MongoDB管理：副本集創(chuàng)建集合時(shí)慎用{autoIndexId: false}選項(xiàng)

lyhabc

MongoDB默認(rèn)對(duì)_id字段建立索引

MongoDB創(chuàng)建集合時(shí)，默認(rèn)會(huì)給集合創(chuàng)建id索引。用戶(hù)如果不需要id索引，可以在創(chuàng)建結(jié)合時(shí)指定{autoIndexId: false}選項(xiàng)，這樣創(chuàng)建出來(lái)的集合，就不會(huì)有任何索引了。

mongo-9552RIMARY> db.createCollection("testcoll", {autoIndexId: false});
{ "ok" : 1 }
mongo-9552RIMARY> db.testcoll.getIndexes()
[ ]
什么場(chǎng)景不需要id索引？

當(dāng)你只需要順序訪問(wèn)集合數(shù)據(jù)的時(shí)候，可以不對(duì)id字段建立索引以提高寫(xiě)入效率，比如MongoDB的local.oplog.rs集合，Secondary使用tailable cursor順序的從Primary上讀取oplog，故MongoDB沒(méi)有對(duì)locol.oplog.rs建立id索引。

mongo-9552RIMARY> use local
switched to db local
mongo-9552RIMARY> db.oplog.rs.getIndexes()
[ ]
使用副本集時(shí)必須對(duì)id建立索引

MongoDB createCollection的介紹文檔中，關(guān)于autoIndexId選項(xiàng)，有個(gè)小tips

IMPORTANT
For replica sets, all collections must have autoIndexId set to true.
官方建議使用副本集時(shí)，所有的集合必須要有id索引，但MongoDB目前沒(méi)有強(qiáng)制這么做，3.2版本里如果創(chuàng)建集合時(shí)指定了{(lán)autoIndexID: false}，會(huì)提示如下信息，說(shuō)明官方也準(zhǔn)備廢棄該選項(xiàng)。

the autoIndexId option is deprecated and will be removed in a future release
同時(shí)，MongoDB啟動(dòng)時(shí)也會(huì)有警告信息

WARNING: the collection 'test.testcoll' lacks a unique index on _id. This index is needed for replication to function properly
副本集中id索引為什么是必須的？

參考官方issuse

https://jira.mongodb.org/browse/SERVER-22902

https://jira.mongodb.org/browse/SERVER-8237

副本集中，如果集合沒(méi)有id索引，會(huì)導(dǎo)致Secondary在同步數(shù)據(jù)時(shí)負(fù)載很高

接下來(lái)分析Secondary節(jié)點(diǎn)負(fù)載高產(chǎn)生的原因

先看一個(gè)線上的實(shí)際例子，某集合沒(méi)有id索引，用戶(hù)以在該集合上每秒insert 100個(gè)文檔，

Primary CPU利用率： 0.3%左右
Secondary CPU利用率： 200+%  （隨集合中文檔數(shù)量增加不斷上漲）
insert操作在Primary上執(zhí)行后，Primary會(huì)記錄一條oplog

mongo-9552RIMARY> db.colltest.insert({x: 1})
WriteResult({ "nInserted" : 1 })
mongo-9552RIMARY> use local
switched to db local
mongo-9552RIMARY> db.oplog.rs.find().sort({$natural: -1}).limit(1)
{ "ts" : Timestamp(1456886695, 2), "h" : NumberLong("-6988779545498609573", "v" : 2, "op" : "i", "ns" : "test.colltest", "o" : { "_id" : ObjectId("56d653a7204536989bc13c6a", "x" : 1 } }
接下來(lái)Secondary從Primary讀取該oplog，并重放oplog，對(duì)于insert操作，Secondary的行為是執(zhí)行一條upsert操作（根據(jù)id查詢(xún)文檔，如果已經(jīng)存在則update，如果不存在則insert），來(lái)保證冪等性。

由于集合沒(méi)有id索引，導(dǎo)致Secondary在做upsert時(shí)，必對(duì)整個(gè)集合做一次掃描，來(lái)確定id是否存在，當(dāng)集合規(guī)模越來(lái)越大時(shí)，全集合掃描的開(kāi)銷(xiāo)也越來(lái)越大，導(dǎo)致Secondary的負(fù)載越來(lái)越高，最終會(huì)影響到Secondary上的讀請(qǐng)求。