一个 Mongodb command 的前世今生
- 3. Java Driver • MongoClient 建⽴立和管理理连接 • Cluster • SingleServerCluster • MultiServerCluster • Server • DefaultServer • MongoDatabase 和 MongoCollection 指向 DB 和 collection • 元信息和配置保存 • Document : Binary JSON • insertOne 发⽣生了了什什么？
- 5. Request-Response Style • Mongodb Wire Protocol • sendMessage • receiveMessage • WriteCommandProtocol#execute
- 6. Driver ⼩小结
- 7. Server • https://github.com/mongodb/mongo • cloc 源码统计 src/mongo：
- 8. ⽹网络和业务框架 • src/mongo/transport, src/mongo/util/net • TransportLayer • Listener： 处理理链接接⼊入， select 原语 • MessagingPort： ⽹网络链接，封装 socket • ServiceEntryPoint ：业务处理理 • Session：链接会话，封装 Connection -> MessagingPort • 直接⼦子类 ServiceEntryPointImpl 和实现类： • Mongod： Mongodb 数据库服务器器 • src/mongo/db/service_entry_point_mongod.cpp • Mongos: MongoDB 分⽚片路路由服务 • src/mongo/s/service_entry_point_mongos.cpp
- 10. 链接接⼊入 • Listener::initAndListen • Listener::accepted(AbstractMessagingPort) • TransportLayerLegacy::_handleNewConnection(AbstractMessaging Port) • ServiceEntryPoint::startSession(session) • ServiceEntryPoint::launchWrappedServiceEntryWorkerThread • ServiceEntryPoint::_sessionLoop(session) • ServiceEntryPoint::handleRequest(context, message, remote)
- 11. 请求处理理 • ServiceEntryPointImpl::_sessionLoop • sesson->sourceMessage(inMsg) • dbresponse = this->handleRequest(ctx, inMsg, remote) • session->sinkMessage(dbresponse.response)
- 12. 可插拔的存储引擎设计 • src/mongo/db/storage • src/mongo/db/wiredtiger • src/mongo/db/mmap_v1 • StorageEngine: the StorageEngine class is the top level interface for creating a new storage engine. • RecordStore: a RecordStore provides an abstraction used for storing documents in a collection,
- 13. 数据库服务器器框架 • ⼊入⼝口：ServiceEntryPointMongod • 命令处理理： assembly_response.cpp • assembleResponse(ctx, msg, remote) • 命令管理理: commands.cpp，查表法 • static CommandMap* _commands; • 操作： src/mongo/db/ops • 数据库模型：src/mongo/db/catalog • 数据库管理理：DatabaseHolder • typedef StringMap<Database*> DBs; • DBs _dbs; • 数据库：Database • typedef StringMap<Collection*> CollectionMap; • CollectionMap _collections; • Collection：Collection • RecordStore* const _recordStore;
- 15. 插⼊入命令处理理 • ServiceEntryPointMongod::handleRequest • assembleResponse(ctx, request, client) • runCommands(ctx, req, rb) • WriteCommand:run(ctx, dbname, obj, err, result) • CmdInsert::runImpl(ctx, dbname, obj, err, result) • performInserts(ctx, InsertOp) • insertBatchAndHandleErrors • CollectionImpl::_insertDocuments • _recordStore->insertRecords
- 16. MMapV1 存储引擎 • src/mongo/db/storage/mmap_v1 • 每个 db: • ⼀一个namespace⽂文件 xxx.ns • 多个数据⽂文件 xxx.0, xxx.1 …
- 18. 更更多 • 索引管理理 • WiredTiger 引擎 • 复制 • 分⽚片 • ……