一区二区三区在线-一区二区三区亚洲视频-一区二区三区亚洲-一区二区三区午夜-一区二区三区四区在线视频-一区二区三区四区在线免费观看

服務器之家:專注于服務器技術及軟件下載分享
分類導航

Mysql|Sql Server|Oracle|Redis|MongoDB|PostgreSQL|Sqlite|DB2|mariadb|Access|數據庫技術|

服務器之家 - 數據庫 - MongoDB - MongoDB最大連接數設置失效的異常分析過程與解決方法

MongoDB最大連接數設置失效的異常分析過程與解決方法

2020-05-18 15:51東山絮柳仔 MongoDB

mongodb最大連接數是20000。所以業界流傳一段話,千萬級以下的用mysql、千萬級以上的用mongodb,億級以上的用hadoop。下面這篇文章主要給大家介紹了關于MongoDB最大連接數設置失效的異常分析過程,需要的朋友可以參考下

背景介紹:

查詢MongoDB配置參數,可以知道關于最大連接數的參數是maxConns。但是連接實例后,查看支持的最大連接數,還是默認的819。

說明:最大連接數是由maxConn (maxIncomingConnections)和操作系統單個進程能打開的最大文件描述符數總量的80%決定的,取兩個之間的最小值。默認單個進程能打開的最大文件描述符數為1024,1024*80% = 819.2 取整數819。所以最大可以支持的并發連接數為819。

案例重現

以下為本次測試MongoDB案例配置的參數。

MongoDB最大連接數設置失效的異常分析過程與解決方法

啟動后查看最大連接數。

運行命令:db.serverStatus().connections

MongoDB最大連接數設置失效的異常分析過程與解決方法

Current表示當前到實例上正在運行的連接數。

Available表示當前實例還可以支持的并發連接數。

也就是說此實例最大能支持的并發連接數為:Current+available=3+816=819.

所以設置的maxConns參數無效。所以設置的maxConns參數無效!所以設置的maxConns參數無效!所以設置的maxConns參數無效!

答案求索

此時查看查看網上相關資料,大部分集中在 Linux系統最大文件描述符數。查看我們系統配置,此時已經是65535了。不是系統最大文件描述符數限制的了。

MongoDB最大連接數設置失效的異常分析過程與解決方法

轉個彎,因為我們是為操作系統是 centos 7 ,所以我們的mongodb服務是透過systemctl來管理的。那如果是通過service 命令來管理此服務呢?

測試1 測試用service來管理mongodb 服務 對最大連接數的影響

(1) 在/etc/init.d目錄下創建名為mongodbtest0903的服務;

(2) 服務的配置如下:

MongoDB最大連接數設置失效的異常分析過程與解決方法

(3) 賦予執行權限,然后開啟服務

MongoDB最大連接數設置失效的異常分析過程與解決方法

(4) 此時查看連接數為2500(為maxConns參數值)

MongoDB最大連接數設置失效的異常分析過程與解決方法

(5) 關閉 mongodb 服務

MongoDB最大連接數設置失效的異常分析過程與解決方法

 

以上說明用service 來管理服務,最大連接數參數起作用了。

測試2 如果直接用Mongodb command打開呢?

(1) 直接開啟

MongoDB最大連接數設置失效的異常分析過程與解決方法

(2)此時查看連接數為2500(為maxConns參數值)

MongoDB最大連接數設置失效的異常分析過程與解決方法

(3)關閉此服務

MongoDB最大連接數設置失效的異常分析過程與解決方法

以上說明直接開啟Mongodb服務,最大連接數參數起作用了。

通過service和 mongodb命令啟動服務,最大連接數都是設置的參數,而通過systemctl來開啟此服務就變成了默認的819.

探究

 

我們來具體分析下systemctl 開啟的 mongodb 服務(此服務定義為mongodbtest0903)。

(1)查看此服務的所有配置細節的命令

?
1
systemctl show mongodbtest0903.service

部分細節如下

MongoDB最大連接數設置失效的異常分析過程與解決方法

此時 LimitNOFILE=4096

(2) 查看此服務的進程,以及此進程下的資源限制

MongoDB最大連接數設置失效的異常分析過程與解決方法

進程的資源限制

MongoDB最大連接數設置失效的異常分析過程與解決方法

終于看到了 資源限制是1024。

問題1:為什么經過systemctl 啟動的mongodb服務變成了默認的819.

回答:因為systemctl 啟動的服務進程其最大文件描述符數變成了1024. 1024*80% = 819.2 取整數819.

問題2:為什么系統設置的最大是65525 而 systemctl 變成了1024.

在Centos7系統中,使用Systemd替代了之前的SysV。/etc/security/limits.conf文件的配置作用域縮小了。/etc/security/limits.conf的配置,只適用于通過PAM認證登錄用戶的資源限制,它對systemd的service的資源限制不生效。

其實仔細查看/etc/security/limits.conf文件的注釋,說明了對系統服務不生效。

MongoDB最大連接數設置失效的異常分析過程與解決方法

解決方案

解決方案,知道了問題所在,針對此問題尋找解決方案相對容易了。

解決方案1:針對單個 systemctl 管理的服務。

在/lib/systemd/system中找到具體的服務,增加

?
1
2
# (open files)
LimitNOFILE=64000

命令。 修改后為:

MongoDB最大連接數設置失效的異常分析過程與解決方法

重啟服務,此時連接查看最大連接數為2500,到達設置的參數。

解決方案2 網上有種方案是對systemd全局修改此方案本作者沒有驗證,轉述如下,意思是修改/etc/systemd/system.conf 即可:

全局的配置,放在文件/etc/systemd/system.conf和/etc/systemd/user.conf。 同時,也會加載兩個對應的目錄中的所有.conf文件/etc/systemd/system.conf.d/*.conf和/etc/systemd/user.conf.d/*.conf
其中,system.conf是系統實例使用的,user.conf用戶實例使用的。一般的sevice,使用system.conf中的配置即可。systemd.conf.d/*.conf中配置會覆蓋system.conf。

DefaultLimitCORE=infinity

DefaultLimitNOFILE=100000

DefaultLimitNPROC=100000

注意:修改了system.conf后,需要重啟系統才會生效。

因為服務器上systemctl會管理多種服務,為減少對其它服務的影響,建議在單個服務上修改,集采用第一種方案。

其他相關知識

(1)mysql 服務也會遇到類似問題;

(2)* nofiles - soft limit on the number of file descriptors a process may have;

(3)*soft limit與hard limit的不同:soft limit是真正生效的限制值,而hard limit僅僅是soft limit調整范圍的一個上限。

連接數優化:

通過serverStatus查詢連接數:

?
1
mongo> db.serverStatus().connections

每個連接都是一個線程,需要一個Stack,Linux下缺省的Stack設置一般比較大:

?
1
shell> ulimit -a | grep stack stack size (kbytes, -s) 10240

至于MongoDB實際使用的Stack大小,可以用如下命令確認(單位:K):

?
1
shell> cat /proc/$(pidof mongod)/limits | grep stack | awk -F 'size' '{print int($NF)/1024}'

如果Stack過大(比如:10240K)的話沒有意義,簡單對照命令結果中的Size和Rss:

?
1
shell> cat /proc/$(pidof mongod)/smaps | grep 10240 -A 10

所有連接消耗的內存加起來會相當驚人,推薦把Stack設置小一點,比如說1024:

?
1
shell> ulimit -s 1024

注:從MongoDB1.8.3開始,MongoDB會在啟動時自動設置Stack。

總結

以上就是這篇文章的全部內容了,希望本文的內容對大家的學習或者工作具有一定的參考學習價值,如果有疑問大家可以留言交流,謝謝大家對服務器之家的支持。

原文鏈接:https://www.cnblogs.com/xuliuzai/p/9589272.html

 

延伸 · 閱讀

精彩推薦
  • MongoDBmongodb基本命令實例小結

    mongodb基本命令實例小結

    這篇文章主要介紹了mongodb基本命令,結合實例形式總結分析了MongoDB數據庫切換、查看、刪除、查詢等基本命令用法與操作注意事項,需要的朋友可以參考下...

    dawn-liu3652020-05-26
  • MongoDBMongoDB安裝圖文教程

    MongoDB安裝圖文教程

    這篇文章主要為大家詳細介紹了MongoDB安裝圖文教程,分為兩大部分為大家介紹下載MongoDB和安裝MongoDB的方法,感興趣的小伙伴們可以參考一下 ...

    Yangyi.He6132020-05-07
  • MongoDB分布式文檔存儲數據庫之MongoDB分片集群的問題

    分布式文檔存儲數據庫之MongoDB分片集群的問題

    這篇文章主要介紹了分布式文檔存儲數據庫之MongoDB分片集群的問題,本文給大家介紹的非常詳細,對大家的學習或工作具有一定的參考借鑒價值,需要的朋...

    Linux-18743072020-12-20
  • MongoDBMongoDB 內存使用情況分析

    MongoDB 內存使用情況分析

    都說 MongoDB 是個內存大戶,但是怎么知道它到底用了多少內存呢...

    MongoDB教程網10002020-09-29
  • MongoDBMongoDB中javascript腳本編程簡介和入門實例

    MongoDB中javascript腳本編程簡介和入門實例

    作為一個數據庫,MongoDB有一個很大的優勢——它使用js管理數據庫,所以也能夠使用js腳本進行復雜的管理——這種方法非常靈活 ...

    MongoDB教程網6982020-04-24
  • MongoDB遷移sqlserver數據到MongoDb的方法

    遷移sqlserver數據到MongoDb的方法

    這篇文章主要介紹了遷移sqlserver數據到MongoDb的方法,本文給大家介紹的非常詳細,對大家的學習或工作具有一定的參考借鑒價值,需要的朋友可以參考下...

    聽楓xl9682021-01-03
  • MongoDBMongoDB憑什么躋身數據庫排行前五

    MongoDB憑什么躋身數據庫排行前五

    MongoDB以比去年同期超出65.96分的成績繼續雄踞榜單前五,這個增幅在全榜僅次于PostgreSQL的77.99,而其相對于4月份的6.10分的增長也是僅次于微軟SQL Server排名...

    孫浩峰3892020-05-22
  • MongoDBMongodb實現定時備份與恢復的方法教程

    Mongodb實現定時備份與恢復的方法教程

    這篇文章主要給大家介紹了Mongodb實現定時備份與恢復的方法教程,文中通過示例代碼介紹的非常詳細,對大家具有一定的參考學習價值,需要的朋友們下面...

    chenjsh364522020-05-13
主站蜘蛛池模板: 久久全国免费观看视频 | 波多野结衣护士 | 出差上的少妇20p | 日本噜噜影院 | 久久99re2热在线播放7 | 91成| 亚洲va精品中文字幕 | 国产亚洲精品aaa大片 | 91精品手机国产在线观 | 国产高清一区二区三区免费视频 | 国产一二三区视频 | 114级毛片免费观看 1024亚洲天堂 | 国产欧美曰韩一区二区三区 | 色在线亚洲视频www 色欲麻豆国产福利精品 | www亚洲视频| 性做久久久久免费观看 | 99久久6er热免费精品 | 亚州春色| 国产一区二区三区久久精品小说 | 高h全肉动漫在线观看免费 高h辣h双处全是肉军婚 | 99re5在线精品视频热线 | 成人人免费夜夜视频观看 | 美女女女女女女bbbbbb毛片 | 欧美日韩国产一区二区三区伦 | 精品亚洲欧美中文字幕在线看 | 99久视频 | 国产亚洲精品一区二区在线播放 | 波多野结衣中文字幕乱七八糟 | 日韩毛片在线视频 | 亚洲邪恶天堂影院在线观看 | 免费特黄一区二区三区视频一 | 三级全黄裸体 | a免费看 | 色色色色网站 | 欧美xxx000喷水 | 深夜福利影院 | 麻豆视频入口 | 国产精品久线观看视频 | 婚前试爱免费看 | 欧美男同互吃gay老头 | 操碰97|