随着互联网技术的发展,数据量的迅速增长,数据库成为了一种非常重要的应用,然而,在大数据应用下,如何有效的优化数据库的性能,为应用提供更好的服务体验也成为了开发者需要面对的难题,本文将对 MongoDB 数据库中的慢查询日志和 profile 进行详细讲解和指导。
MongoDB 慢查询日志
慢查询日志是指记录在一定时间范围内,数据库执行的慢查询操作的日志文件。MongoDB 支持慢查询日志的开启和关闭,同时还可以通过设置阈值条件,定向地记录慢查询操作。接下来,我们将逐一讲解 MongoDB 的慢查询日志的使用方法和日志文件的分析。
开启慢查询日志
在开启 MongoDB 的慢查询日志前,首先我们需要先创建好日志文件。日志文件的创建方式如下:
sudo touch /var/log/mongodb/mongod.log
接下来,我们在 MongoDB 配置文件中设置慢查询日志阈值,只有执行时间超过设定阈值的查询操作,才会被记录到慢查询日志中。 MongoDB 配置文件为默认的 "/etc/mongod.conf",如下:
sudo vim /etc/mongod.conf
修改 "systemLog" 下面的 "slowOpThresholdMs" 为设定的阈值时间:
systemLog: destination: file logAppend: true path: /var/log/mongodb/mongod.log slowOpThresholdMs: 50
设置完成后,重启 MongoDB 服务,使配置生效:
sudo service mongod restart
一旦 MongoDB 服务重新启动,所有满足阈值条件的查询操作,都将被记录在 "/var/log/mongodb/mongod.log" 日志文件。
查询慢查询日志
我们可以通过命令行工具 tail 查看 MongoDB 的慢查询日志,命令如下:
sudo tail -n 100 /var/log/mongodb/mongod.log
tail 命令将会显示最后 100 行的慢查询日志信息,如下所示:
2022-03-28T15:16:25.203+0800 I COMMAND [conn22] command mydb.users command: find { find: "users", filter: { age: { $lt: 21 } }, batchSize: 100 } planSummary: COLLSCAN keysExamined:0 docsExamined:100 cursorExhausted:1 numYields:1 nreturned:0 reslen:20 locks:{ Global: { acquireCount: { r: 2 } }, Database: { acquireCount: { r: 1 } } } protocol:op_query 51ms
解读慢查询日志
对于 MongoDB 的慢查询日志,我们需要根据日志输出信息进行分析,在进行分析之前,我们先来了解下慢查询日志中一些重要的信息。
time
:查询开始执行的时间点opid
:查询操作的唯一 IDns
:查询操作作用的命名空间command
:查询操作的 JSON 格式命令,每个命令的具体格式和参数不同planSummary
:执行查询操作的计划和策略keysExamined
:查询操作中使用的索引数docsExamined
:扫描的文档数cursorExhausted
:标志着是否遍历了整个文档集numYields
:等待锁的次数nreturned
:返回的文档数reslen
:返回文档的大小locks
:被查询操作使用的锁的详细情况protocol
:使用的协议millis
:查询操作的执行时间
通过上述信息,我们可以对 MongoDB 的慢查询日志进行分析和优化,确保查询操作的执行速度和性能。
MongoDB Profile
除了慢查询日志,MongoDB 还支持 Profile 功能。Profile 可以记录数据库中所有操作的统计数据,包括操作时间、查询计数、命中缓存等信息。通过分析和优化这些统计信息,我们可以检测和解决数据库性能问题。
开启 MongoDB Profile
开启 Profile 非常简单,我们可以通过执行 MongoDB shell 中的命令,设置 profile 的值为 1,即可开启该功能。
db.setProfilingLevel(1)
其中,profile 的值可以设置为 0、1、2,具体含义如下:
- 0:关闭 profile 功能。
- 1:启用 profile 功能,对所有操作都进行记录(默认)。
- 2:启用 profile 功能,只记录慢查询的操作(超过设定的时间阈值)。
查询 Profile 日志
我们可以通过查询系统中的 system.profile 集合来查看 Profile 日志:
db.system.profile.find().pretty()
查询操作将返回所有 profile 记录的数据,并格式化为易读的 JSON 格式,方便查看和分析。
Profile 日志的分析
Profile 日志中记录了 MongoDB 所有操作的统计数值,我们可以通过分析这些数据,来找出和解决数据库中的性能问题。
info
- opid:每个查询操作的唯一 ID。
- millis:查询操作消耗的时间,单位毫秒。
counts
- n:命中缓存的文档数。
- nscanned:需要扫描的(已查询)文档数。
- nscannedObjects:实际扫描的文档数。
- nreturned:返回的文档数。
query
:查询操作的具体信息,包括命名空间、查询参数、索引等。update
:update 操作的具体信息,包括命名空间、查询参数、修改参数等。op
:记录操作的类型(query、update等)。
通过对 Profile 日志的分析,我们可以确定具体操作的时间、命中缓存率、索引使用、查询条件等重要信息。通过针对这些信息,我们可以找出和解决数据库中的性能问题。
总结
MongoDB 的慢查询日志和 Profile 功能提供了一种有效的方法来优化数据库性能。通过开启慢查询日志和 Profile,我们可以记录和分析数据库操作的详细信息,找出并解决数据库性能问题。希望本文可以为 MongoDB 的学习者们提供一些有用的指导和启示。
来源:JavaScript中文网 ,转载请注明来源 https://www.javascriptcn.com/post/64fbdbb8f6b2d6eab31f5a61