您当前的位置:首页 > 电脑百科 > 数据库 > 百科

手把手教你用gdb调试mongodb

时间:2020-09-23 10:49:03  来源:  作者:

MongoDB作为一款NoSQL数据库,常应用在游戏开发领域。 作为一个后端程序,进行CRUD操作是家常便饭,但如果不看源码,便不会知道MongoDB底层是如何实现的,对自己写的CRUD代码,心里就没谱,不确定哪一行代码就把MongoDB给压垮了。遇到问题,不知道为啥MongoDB支撑不住,也就无从说起该怎样哪里优化。

开源MongoDB有上万个文件,代码量百万行。阅读MongoDB的源码是一项具有挑战的任务。一般的,我们可以从简单的、自己感兴趣的模块开始阅读。例如,先理解MongoDB在执行一条find命令时,是如何找到我们想要的结果。

本文,介绍如何编译MongoDB源码、如何用GDB调试MongoDB。

编译安装MongoDB

因为线上使用的是3.4.24版本,所以本文也采用该版本作为例子。

首先下载MongoDB源码

wget https://fastdl.mongodb.org/src/mongodb-src-r3.4.24.tar.gz

解压缩

tar -zxvf mongodb-src-r3.4.24.tar.gz 

在解压的目录中,docs/building.md介绍了如何编译安装MongoDB。

首先是安装依赖库

apt-get install aptitude
aptitude install scons build-essential
aptitude install libboost-filesystem-dev libboost-program-options-dev libboost-system-dev libboost-thread-dev

然后是通过scons命令进行MongoDB的编译安装。

scons core install --disable-warnings-as-errors

参数core,说明想要安装的包括mongod,mongos, mongo。加入参数--disable-warnings-as-errors是为了忽略编译过程的warning。

为了GDB能够调试MongoDB,需要在编译MongoDB时,加入-g参数。不然在调试时,会收到No symbol table is loaded的报错。通过查看SConstruct文件,已经加了-ggdb参数,所以我们就不需要做修改,直接执行scons就可以。

手把手教你用gdb调试mongod

 

编译安装后,会在build/install/bin目录下,生成可执行文件:mongo,mongod,mongos,mongoperf。

启用GDB调试

首先启动mongod。在build/install/bin目录下,执行 ./mongod启动mongod。

启动后,可以用ps -ef | grep mongod查看mongod的进程号,然后用ps -p 进程号 -T查看mongod创建的线程信息。

启动mongo。在build/install/bin目录下,执行./mongo启动mongo,使之直接连接mongod。

启动后,再次用ps -p 进程号 -T查看mongod创建的线程信息。这时,会发现多了一个conn1线程。这个线程,是mongod为一个客户端创建的。

手把手教你用gdb调试mongod

 

在build/install/bin目录下,启动GDB,attach到mongod进程

gdb ./mongod 进程号

mongod是多线程,我们这里只关心处理客户端请求的线程。所以,先要切到相应的线程中。

使用info threads命令, 显示当前可调试的所有线程,每个线程会有一个GDB为其分配的ID,后面操作线程的时候会用到这个ID。 前面有*的是当前调试的线程

手把手教你用gdb调试mongod

 

可以看到,处理客户端连接的线程,在GDB的编号是21,用thread 21切换到对应的线程中。

我们以find命令为例,介绍如何用GDB进行断点调试。

断点调试的第一步,就是加断点。这就需要找到find的入口在哪里,即在哪个文件的哪一行。 我们一般可以先快速过一遍mongod的源码结构。在src/mongo/db/commands发现了大量以命令命名的文件。通过简单分析我们有理由相信,find_cmd.cpp的run函数,就是find的入口。

手把手教你用gdb调试mongod

 

确定了行号之后,就可以用gdb命令加断点了:

b src/mongo/db/commands/find_cmd.cpp:230

加好断点后,我们在启动的mongo进程中,触发find命令。

触发命令后,我们在gdb会话中,输入c告诉gdb继续执行,直到遇到我们设置的断点。

手把手教你用gdb调试mongod

 

现在gdb已经定在了我们设置的断点中,下面可以利用gdb的其他命令,如命令s,n等,跟踪学习mongo的find命令实现了。

如果不幸的,我们没法通过源码发现find命令的入口,则只能借助gdb使用更暴力一些的办法。 在前文介绍的步骤中,当gdb关联到客户端的线程后,直接执行bt命令,看看现在的调用栈。

手把手教你用gdb调试mongod

 

可以看到,线程在等待客户端数据,对应的文件是sock.cpp:692。

手把手教你用gdb调试mongod

 

通过阅读源码,我们直接在sock.cpp:697加断点,客户端发起find请求,然后一步步调试,就能进入find的入口。

 

Docker编译调试mongod

编译安装mongod在不同的环境,会遇到各种奇葩的问题。我们为了用GDB调试mongod,可能会花大量时间在解决环境配置上。为了解决烦恼的环境问题,这里提供一个dockerfile,用docker可以完美的解决环境问题。

FROM debian:9
RUN apt-get install -y wget
RUN apt-get install -y vim
RUN apt-get install -y make
# 在Docker Debian容器中安装ps,top等命令RUN apt-get install -y procps
RUN apt-get install -y gcc
RUN apt-get install -y g++


Tags:mongodb   点击:()  评论:()
声明:本站部分内容及图片来自互联网,转载是出于传递更多信息之目的,内容观点仅代表作者本人,如有任何标注错误或版权侵犯请与我们联系(Email:2595517585@qq.com),我们将及时更正、删除,谢谢。
▌相关推荐
MongoDB 简介MongoDB是一个基于分布式文件存储的数据库。由C++语言编写。旨在为WEB应用提供可扩展的高性能数据存储解决方案。它的最大特点是:•特别适合存储大量的无结...【详细内容】
2021-06-25  Tags: mongodb  点击:(122)  评论:(0)  加入收藏
什么是MongoDB?mongodb是一个基于分布式文件储存的数据库,由C++编写。是一个文档型数据库,提供好的性能,领先的非关系型数据库MongoDB的储存形式类似于python的字典,以{‘...【详细内容】
2021-03-05  Tags: mongodb  点击:(107)  评论:(0)  加入收藏
一、NoSQL的简介NoSQL比关系型数据库性能高数倍。NoSQL凭借 “易扩展、大数据、高可用、高性能、灵活性”特点强势引领全场。CP型分布式数据库,能够保证数据的强一致性和分区...【详细内容】
2021-02-25  Tags: mongodb  点击:(446)  评论:(0)  加入收藏
我加入 MongoDB 还不到一年,但学到了很多东西。在面试这家公司前,我从未真正使用过 MongoDB,尽管我听过一些有关它的演讲,并且它的简单易用给我留下深刻印象。...【详细内容】
2021-01-26  Tags: mongodb  点击:(203)  评论:(0)  加入收藏
需求:promethus对mongodb进行监控, 准备步骤:安装一个简单mongodb服务 下载MongoDB的插件 promethus 配置文件修改关联。一、快速简易安装一个mongodb服务 1、安装部署cat >/et...【详细内容】
2020-12-15  Tags: mongodb  点击:(186)  评论:(0)  加入收藏
Redis定位在"快",MongoDB定位在"灵活",HBase定位于"大"。在一般使用情况下,MongoDB可以当作简单场景下的但是性能高数倍的MySQL,Redis基本只会用来做缓存,HBase用来存储海量数据...【详细内容】
2020-11-11  Tags: mongodb  点击:(173)  评论:(0)  加入收藏
首先,如果用yum安装mongodb数据库的话,后期是无法使用自带mongodump工具进行导入导出的,另外MongoDB Compass工具无法整个库导出,很不方便,这里就会用到一个mongodb很实用的可视...【详细内容】
2020-09-25  Tags: mongodb  点击:(1195)  评论:(0)  加入收藏
MongoDB作为一款NoSQL数据库,常应用在游戏开发领域。 作为一个后端程序,进行CRUD操作是家常便饭,但如果不看源码,便不会知道MongoDB底层是如何实现的,对自己写的CRUD代码,心里就没...【详细内容】
2020-09-23  Tags: mongodb  点击:(190)  评论:(0)  加入收藏
导入和导出命令太枯燥了,让大家看看妹子mongoimport命令可以把一个特定格式文件中的内容导入到指定的collection中。该工具可以导入JSON格式数据,也可以导入CSV格式的数据。mo...【详细内容】
2020-09-21  Tags: mongodb  点击:(108)  评论:(0)  加入收藏
MongoRocks 是基于著名的开源KV数据库RocksDB实现的一个MongoDB存储引擎,借助rocksdb的优秀特性,MongoRocks能很好的支持一些高并发随机写入、读取的应用场景。 MongoDB 与 Mo...【详细内容】
2020-08-21  Tags: mongodb  点击:(133)  评论:(0)  加入收藏
▌简易百科推荐
1增1.1【插入单行】insert [into] <表名> (列名) values (列值)例:insert into Strdents (姓名,性别,出生日期) values (&#39;开心朋朋&#39;,&#39;男&#39;,&#39;1980/6/15&#3...【详细内容】
2021-12-27  快乐火车9d3    Tags:SQL   点击:(1)  评论:(0)  加入收藏
最近发现还有不少做开发的小伙伴,在写存储过程的时候,在参考已有的不同的写法时,往往很迷茫, 不知道各种写法孰优孰劣,该选用哪种写法,以及各种写法的优缺点,本文以一个简单的查询...【详细内容】
2021-12-23  linux上的码农    Tags:sql   点击:(9)  评论:(0)  加入收藏
《开源精选》是我们分享Github、Gitee等开源社区中优质项目的栏目,包括技术、学习、实用与各种有趣的内容。本期推荐的HasorDB 是一个全功能数据库访问工具,提供对象映射、丰...【详细内容】
2021-12-22  GitHub精选    Tags:HasorDB   点击:(5)  评论:(0)  加入收藏
作者丨Rafal Grzegorczyk译者丨陈骏策划丨孙淑娟【51CTO.com原创稿件】您是否还在手动对数据库执行各种脚本?您是否还在浪费时间去验证数据库脚本的正确性?您是否还需要将...【详细内容】
2021-12-22    51CTO  Tags:Liquibase   点击:(3)  评论:(0)  加入收藏
场景描述:由于生产环境的表比较复杂,字段很多。这里我们做下简化,只为说明今天要聊的问题。有两张表 tab1,tab2: tab1 数据如下: tab2 数据如下: 然后给你看下,我用来统计 name=&#3...【详细内容】
2021-12-20  Bald    Tags:SQL   点击:(5)  评论:(0)  加入收藏
前言知识无底,学海无涯,知识点虽然简单,但是比较多,所以将MySQL的基础写出来,方便自己以后查找,还有就是分享给大家。一、SQL简述1.SQL的概述Structure Query Language(结构化查...【详细内容】
2021-12-16  谣言止于独立思考    Tags:SQL基础   点击:(13)  评论:(0)  加入收藏
前言作为一名测试工程师,工作中在对测试结果进行数据比对的时候,或多或少要和数据库打交道的,要和数据库打交道,那么一些常用的 SQL 查询语法必须要掌握。最近有部分做测试小伙...【详细内容】
2021-12-14  柠檬班软件测试    Tags:SQL   点击:(15)  评论:(0)  加入收藏
话说C是面向内存的编程语言。数据要能存得进去,取得出来,且要考虑效率。不管是顺序存储还是链式存储,其寻址方式总是很重要。顺序存储是连续存储。同质结构的数组通过其索引表...【详细内容】
2021-12-08  小智雅汇    Tags:数据存储   点击:(17)  评论:(0)  加入收藏
概述DBConvert Studio 是一款强大的跨数据库迁移和同步软件,可在不同数据库格式之间转换数据库结构和数据。它将成熟、稳定、久经考验的 DBConvert 和 DBSync 核心与改进的现...【详细内容】
2021-11-17  雪竹聊运维    Tags:数据库   点击:(26)  评论:(0)  加入收藏
一、前言 大家好,我是小诚,《从0到1-全面深刻理解MySQL系列》已经来到第四章,这一章节的主要从一条SQL执行的开始,由浅入深的解析SQL语句由客户端到服务器的完整执行流程,最...【详细内容】
2021-11-09  woaker    Tags:SQL   点击:(35)  评论:(0)  加入收藏
最新更新
栏目热门
栏目头条