MongoDB 運行狀態、性能監控,分析


這篇文章的目的是讓你知道怎么了解你正在運行的Mongdb是否健康。轉載自http://tech.lezi.com/archives/290

 

mongostat詳解

啟動mongodb監控,通過下面命令行:

 

mongostat是mongdb自帶的狀態檢測工具,在命令行下使用。它會間隔固定時間獲取mongodb的當前運行狀態,並輸出。如果你發現數據庫突然變慢或者有其他問題的話,你第一手的操作就考慮采用mongostat來查看mongo的狀態。

它的輸出有以下幾列:

  • inserts/s 每秒插入次數
  • query/s 每秒查詢次數
  • update/s 每秒更新次數
  • delete/s 每秒刪除次數
  • getmore/s 每秒執行getmore次數
  • command/s 每秒的命令數,比以上插入、查找、更新、刪除的綜合還多,還統計了別的命令
  • flushs/s 每秒執行fsync將數據寫入硬盤的次數。
  • mapped/s 所有的被mmap的數據量,單位是MB,
  • vsize 虛擬內存使用量,單位MB
  • res 物理內存使用量,單位MB
  • faults/s 每秒訪問失敗數(只有Linux有),數據被交換出物理內存,放到swap。不要超過100,否則就是機器內存太小,造成頻繁swap寫入。此時要升級內存或者擴展
  • locked % 被鎖的時間百分比,盡量控制在50%以下吧
  • idx miss % 索引不命中所占百分比。如果太高的話就要考慮索引是不是少了
  • q t|r|w 當Mongodb接收到太多的命令而數據庫被鎖住無法執行完成,它會將命令加入隊列。這一欄顯示了總共、讀、寫3個隊列的長度,都為0的話表示mongo毫無壓力。高並發時,一般隊列值會升高。
  • conn 當前連接數
  • time 時間戳

使用profiler

類似於MySQL的slow log, MongoDB可以監控所有慢的以及不慢的查詢。

Profiler默認是關閉的,你可以選擇全部開啟,或者有慢查詢的時候開啟。

復制代碼
> show dbs
admin          0.000GB
jetty_session  0.009GB
local          0.000GB
tong           0.002GB
> use tong
switched to db tong
> db.setProfilingLevel(2);
{ "was" : 0, "slowms" : 100, "ok" : 1 }
> db.getProfilingLevel()
2
復制代碼

查看Profile日志

復制代碼
> db.system.profile.find().sort({$natural:-1})
{ "op" : "query", "ns" : "tong.system.profile", "query" : { "find" : "system.profile", "filter" : {  }, "limit" : 2, "singleBatch" : false, "sort" : { "natural" : -1 } }, "keysExamined" : 0, "docsExamined" : 0, "hasSortStage" : true, "cursorExhausted" : true, "numYield" : 0, "locks" : { "Global" : { "acquireCount" : { "r" : NumberLong(2) } }, "Database" : { "acquireCount" : { "r" : NumberLong(1) } }, "Collection" : { "acquireCount" : { "r" : NumberLong(1) } } }, "nreturned" : 0, "responseLength" : 92, "protocol" : "op_command", "millis" : 0, "planSummary" : "COLLSCAN", "execStats" : { "stage" : "SORT", "nReturned" : 0, "executionTimeMillisEstimate" : 0, "works" : 4, "advanced" : 0, "needTime" : 3, "needYield" : 0, "saveState" : 0, "restoreState" : 0, "isEOF" : 1, "invalidates" : 0, "sortPattern" : { "natural" : -1 }, "memUsage" : 0, "memLimit" : 33554432, "limitAmount" : 2, "inputStage" : { "stage" : "SORT_KEY_GENERATOR", "nReturned" : 0, "executionTimeMillisEstimate" : 0, "works" : 3, "advanced" : 0, "needTime" : 2, "needYield" : 0, "saveState" : 0, "restoreState" : 0, "isEOF" : 1, "invalidates" : 0, "inputStage" : { "stage" : "COLLSCAN", "nReturned" : 0, "executionTimeMillisEstimate" : 0, "works" : 2, "advanced" : 0, "needTime" : 1, "needYield" : 0, "saveState" : 0, "restoreState" : 0, "isEOF" : 1, "invalidates" : 0, "direction" : "forward", "docsExamined" : 0 } } }, "ts" : ISODate("2017-03-27T10:02:29.994Z"), "client" : "127.0.0.1", "appName" : "MongoDB Shell", "allUsers" : [ ], "user" : "" }
> 
復制代碼

3個字段的意義

  • ts:時間戳
  • info:具體的操作
  • millis:操作所花時間,毫秒

不多說,此處有官方文檔。注意,造成滿查詢可能是索引的問題,也可能是數據不在內存造成因此磁盤讀入造成。

使用Web控制台

mongodb web monitorMongodb自帶了Web控制台,默認和數據服務一同開啟。他的端口在Mongodb數據庫服務器端口的基礎上加1000,如果是默認的Mongodb數據服務端口(Which is 27017),則相應的Web端口為28017

這個頁面可以看到

  • 當前Mongodb的所有連接
  • 各個數據庫和Collection的訪問統計,包括:Reads, Writes, Queries, GetMores ,Inserts, Updates, Removes
  • 寫鎖的狀態
  • 以及日志文件的最后幾百行(CentOS+10gen yum 安裝的mongodb默認的日志文件位於/var/log/mongo/mongod.log)

可以參考右邊的截圖

db.stat()

獲取當前數據庫的信息,比如Obj總數、數據庫總大小、平均Obj大小等

01 > use test
02 switched to db test
03 > db.stats()
04 {
05     "collections" : 9,
06     "objects" : 4278845,
07     "avgObjSize" : 224.56603031892953,
08     "dataSize" : 960883236,
09     "storageSize" : 1195438080,
10     "numExtents" : 59,
11     "indexes" : 13,
12     "indexSize" : 801931264,
13     "fileSize" : 6373244928,
14     "ok" : 1
15 }

db.serverStatus()

獲取服務器的狀態

01 {
02     "version" "1.6.5",
03     "uptime" : 7208469,
04     "uptimeEstimate" : 7138829,
05     "localTime" "Wed Oct 26 2011 22:23:07 GMT+0800 (CST)",
06     "globalLock" : {
07         "totalTime" : 7208469556704,
08         "lockTime" : 4959693717,
09         "ratio" : 0.000688036992871448,
10         "currentQueue" : {
11             "total" : 0,
12             "readers" : 0,
13             "writers" : 0
14         }
15     },
16     "mem" : {
17         "bits" : 64,
18         "resident" : 3131,
19         "virtual" : 6172,
20         "supported" true,
21         "mapped" : 4927
22     },
23     "connections" : {
24         "current" : 402,
25         "available" : 2599
26     },
27     "extra_info" : {
28         "note" "fields vary by platform",
29         "heap_usage_bytes" : 832531920,
30         "page_faults" : 8757
31     },
32     "indexCounters" : {
33         "btree" : {
34             "accesses" : 2821726,
35             "hits" : 2821725,
36             "misses" : 1,
37             "resets" : 0,
38             "missRatio" : 3.543930204420982e-7
39         }
40     },
41     "backgroundFlushing" : {
42         "flushes" : 120133,
43         "total_ms" : 73235923,
44         "average_ms" : 609.6236920746173,
45         "last_ms" : 1332,
46         "last_finished" "Wed Oct 26 2011 22:22:23 GMT+0800 (CST)"
47     },
48     "cursors" : {
49         "totalOpen" : 0,
50         "clientCursors_size" : 0,
51         "timedOut" : 238392
52     },
53     "repl" : {
54         "ismaster" true
55     },
56     "opcounters" : {
57         "insert" : 269351,
58         "query" : 19331151,
59         "update" : 14199331,
60         "delete" : 1,
61         "getmore" : 145575,
62         "command" : 55982302
63     },
64     "asserts" : {
65         "regular" : 0,
66         "warning" : 0,
67         "msg" : 0,
68         "user" : 27,
69         "rollovers" : 0
70     },
71     "ok" : 1
72 }

需要關心的地方:

  • connections 當前連接和可用連接數,聽過一個同行介紹過,mongodb最大處理到2000個連接就不行了(要根據你的機器性能和業務來設定),所以設大了沒意義。設個合理值的話,到達這個值mongodb就拒絕新的連接請求,避免被太多的連接拖垮。
  • indexCounters:btree:misses 索引的不命中數,和hits的比例高就要考慮索引是否正確建立。你看我的”missRatio” : 3.543930204420982e-7,很健康吧。所以miss率在mongostat里面也可以看
  • 其他的都能自解釋,也不是查看mongo健康狀況的關鍵,就不說明了。

db.currentOp()

MongoDB 的命令一般很快就完成,但是在一台繁忙的機器或者有比較慢的命令時,你可以通過db.currentOp()獲取當前正在執行的操作。

在沒有負載的機器上,該命令基本上都是返回空的

1 >  db.currentOp()
2 "inprog" : [ ] }

以下是一個有負載的機器上得到的返回值樣例:

1 "opid" "shard3:466404288""active" false"waitingForLock" false"op""query""ns" "sd.usersEmails""query" : { }, "client_s" :"10.121.13.8:34473""desc" "conn" },

字段名字都能自解釋。如果你發現一個操作太長,把數據庫卡死的話,可以用這個命令殺死他

1 > db.killOp("shard3:466404288")

MongoDB Monitoring Service

MongoDB Monitoring Service(MMS)是Mongodb廠商提供的監控服務,可以在網頁和Android客戶端上監控你的MongoDB狀況。

 
 


免責聲明!

本站轉載的文章為個人學習借鑒使用,本站對版權不負任何法律責任。如果侵犯了您的隱私權益,請聯系本站郵箱yoyou2525@163.com刪除。



 
粵ICP備18138465號   © 2018-2025 CODEPRJ.COM