MongoDB的監控與性能優化

jopen 11年前發布 | 12K 次閱讀 MongoDB NoSQL數據庫

mongodb可以通過profile來監控數據,進行優化。

查看當前是否開啟profile功能用命令

db.getProfilingLevel()  返回level等級,值為0|1|2,分別代表意思:0代表關閉,1代表記錄慢命令,2代表全部

開始profile功能為

db.setProfilingLevel(level);  #level等級,值同上

level為1的時候,慢命令默認值為100ms,更改為db.setProfilingLevel(level,slowms)如db.setProfilingLevel(1,50)這樣就更改為50毫秒

通過db.system.profile.find() 查看當前的監控日志。

如:

> db.system.profile.find({millis:{$gt:500}})
{ "ts" : ISODate("2011-07-23T02:50:13.941Z"), "info" : "query order.order reslen:11022 nscanned:672230  \nquery: { status: 1.0 } nreturned:101 bytes:11006 640ms", "millis" : 640 }
{ "ts" : ISODate("2011-07-23T02:51:00.096Z"), "info" : "query order.order reslen:11146 nscanned:672302  \nquery: { status: 1.0, user.uid: { $gt: 1663199.0 } }  nreturned:101 bytes:11130 647ms", "millis" : 647 }


 這里值的含義是

 ts:命令執行時間

info:命令的內容

query:代表查詢

order.order: 代表查詢的庫與集合

reslen:返回的結果集大小,byte數

nscanned:掃描記錄數量

nquery:后面是查詢條件

nreturned:返回記錄數及用時

millis:所花時間

如果發現時間比較長,那么就需要作優化。

比如nscanned數很大,或者接近記錄總數,那么可能沒有用到索引查詢。

reslen很大,有可能返回沒必要的字段。

nreturned很大,那么有可能查詢的時候沒有加限制。

mongo可以通過db.serverStatus()查看mongod的運行狀態


> db.serverStatus()
{
    "host" : "baobao-laptop",#主機名
    "version" : "1.8.2",#版本號
    "process" : "mongod",#進程名
    "uptime" : 15549,#運行時間
    "uptimeEstimate" : 15351,
    "localTime" : ISODate("2011-07-23T06:07:31.220Z"),當前時間
    "globalLock" : {
        "totalTime" : 15548525410,#總運行時間(ns)
        "lockTime" : 89206633,  #總的鎖時間(ns)
        "ratio" : 0.005737305027178137,#鎖比值
        "currentQueue" : {
            "total" : 0,#當前需要執行的隊列
            "readers" : 0,#讀隊列
            "writers" : 0#寫隊列
        },
        "activeClients" : {
            "total" : 0,#當前客戶端執行的鏈接數
            "readers" : 0,#讀鏈接數
            "writers" : 0#寫鏈接數
        }
    },
    "mem" : {#內存情況
        "bits" : 32,#32位系統
        "resident" : 337,#占有物理內存數
        "virtual" : 599,#占有虛擬內存
        "supported" : true,#是否支持擴展內存
        "mapped" : 512
    },
    "connections" : {
        "current" : 2,#當前鏈接數
        "available" : 817#可用鏈接數
    },
    "extra_info" : {
        "note" : "fields vary by platform",
        "heap_usage_bytes" : 159008,#堆使用情況字節
        "page_faults" : 907 #頁面故作
    },
    "indexCounters" : {
        "btree" : {
            "accesses" : 59963, #索引被訪問數
            "hits" : 59963, #所以命中數
            "misses" : 0,#索引偏差數
            "resets" : 0,#復位數
            "missRatio" : 0#未命中率
        }
    },
    "backgroundFlushing" : {    
        "flushes" : 259,  #刷新次數
        "total_ms" : 3395, #刷新總花費時長
        "average_ms" : 13.108108108108109, #平均時長
        "last_ms" : 1, #最后一次時長
        "last_finished" : ISODate("2011-07-23T06:07:22.725Z")#最后刷新時間
    },
    "cursors" : {
        "totalOpen" : 0,#打開游標數
        "clientCursors_size" : 0,#客戶端游標大小
        "timedOut" : 16#超時時間
    },
    "network" : {
        "bytesIn" : 285676177,#輸入數據(byte)
        "bytesOut" : 286564,#輸出數據(byte)
        "numRequests" : 2012348#請求數
    },
    "opcounters" : {
        "insert" : 2010000, #插入操作數
        "query" : 51,#查詢操作數
        "update" : 5,#更新操作數
        "delete" : 0,#刪除操作數
        "getmore" : 0,#獲取更多的操作數
        "command" : 148#其他命令操作數
    },
    "asserts" : {#各個斷言的數量
        "regular" : 0,
        "warning" : 0,
        "msg" : 0,
        "user" : 2131,
        "rollovers" : 0
    },
    "writeBacksQueued" : false,
    "ok" : 1
}


db.stats()查看某一個庫的原先狀況

> db.stats()
{
    "db" : "order",#庫名
    "collections" : 4,#集合數
    "objects" : 2011622,#記錄數
    "avgObjSize" : 111.92214441878245,#每條記錄的平均值
    "dataSize" : 225145048,#記錄的總大小
    "storageSize" : 307323392,#預分配的存儲空間
    "numExtents" : 21,#事件數
    "indexes" : 1,#索引數
    "indexSize" : 74187744,#所以大小
    "fileSize" : 1056702464,#文件大小
    "ok" : 1
}

查看集合記錄用

> db.order.stats()
{
    "ns" : "order.order",#命名空間
    "count" : 2010000,#記錄數
    "size" : 225039600,#大小
    "avgObjSize" : 111.96,
    "storageSize" : 307186944,
    "numExtents" : 18,
    "nindexes" : 1,
    "lastExtentSize" : 56089856,
    "paddingFactor" : 1,
    "flags" : 1,
    "totalIndexSize" : 74187744,
    "indexSizes" : {
        "_id_" : 74187744#索引為_id_的索引大小
    },
    "ok" : 1
}

mongostat命令查看運行中的實時統計,表示每秒實時執行的次數

mongodb還提供了一個機遇http的監控頁面,可以訪問http://ip:28017來查看,這個頁面基本上是對上面的這些命令做了一下綜合,所以這里不細述了。

二.mongodb的優化

根據上面這些監控手段,找到問題后,我們可以進行優化

上面找到了某一下慢的命令,現在我們可以通過執行計劃跟蹤一下,如

> db.order.find({ "status": 1.0, "user.uid": { $gt: 2663199.0 } }).explain()
{
    "cursor" : "BasicCursor",#游標類型
    "nscanned" : 2010000,#掃描數量
    "nscannedObjects" : 2010000,#掃描對象
    "n" : 337800,#返回數據
    "millis" : 2838,#耗時
    "nYields" : 0,
    "nChunkSkips" : 0,
    "isMultiKey" : false,
    "indexOnly" : false,
    "indexBounds" : {#使用索引(這里沒有)

    }
}
對于這樣的,我們可以創建索引

可以通過  db.collection.ensureIndex({"字段名":1}) 來創建索引,1為升序,-1為降序,在已經有多數據的情況下,可用后臺來執行,語句db.collection.ensureIndex({"字段名":1} , {backgroud:true}) 

獲取索引用db.collection.getIndexes() 查看

這里我們創建一個user.uid的索引 >db.order.ensureIndex({"user.uid":1})

創建后重新執行

db.order.find({ "status": 1.0, "user.uid": { $gt: 2663199.0 } }).explain()
{
    "cursor" : "BtreeCursor user.uid_1",
    "nscanned" : 337800,
    "nscannedObjects" : 337800,
    "n" : 337800,
    "millis" : 1371,
    "nYields" : 0,
    "nChunkSkips" : 0,
    "isMultiKey" : false,
    "indexOnly" : false,
    "indexBounds" : {
        "user.uid" : [
            [
                2663199,
                1.7976931348623157e+308
            ]
        ]
    }
}

掃描數量減少,速度提高。mongodb的索引設計類似與關系數據庫,按索引查找加快書讀,但是多了會對寫有壓力,所以這里就不再敘述了。


2.其他優化可以用hint強制索引查找,返回只是需要的數據,對數據分頁等。


 本文由用戶 jopen 自行上傳分享,僅供網友學習交流。所有權歸原作者,若您的權利被侵害,請聯系管理員。
 轉載本站原創文章,請注明出處,并保留原始鏈接、圖片水印。
 本站是一個以用戶分享為主的開源技術平臺,歡迎各類分享!