MongoDB 运行状态、性能监控,分析

三十一、MongoDB 状态检测 ( mongostat ) 阅读详情

这篇文章的目的是让你知道怎么了解你正在运行的Mongdb是否健康。转载自http://tech.lezi.com/archives/290

mongostat详解

mongostat是mongdb自带的状态检测工具,在命令行下使用。它会间隔固定时间获取mongodb的当前运行状态,并输出。如果你发现数据库突然变慢或者有其他问题的话,你第一手的操作就考虑采用mongostat来查看mongo的状态。

mongo stat

它的输出有以下几列:

  • inserts/s 每秒插入次数
  • query/s 每秒查询次数
  • update/s 每秒更新次数
  • delete/s 每秒删除次数
  • getmore/s 每秒执行getmore次数
  • command/s 每秒的命令数,比以上插入、查找、更新、删除的综合还多,还统计了别的命令
  • flushs/s 每秒执行fsync将数据写入硬盘的次数。
  • mapped/s 所有的被mmap的数据量,单位是MB,
  • vsize 虚拟内存使用量,单位MB
  • res 物理内存使用量,单位MB
  • faults/s 每秒访问失败数(只有Linux有),数据被交换出物理内存,放到swap。不要超过100,否则就是机器内存太小,造成频繁swap写入。此时要升级内存或者扩展
  • locked % 被锁的时间百分比,尽量控制在50%以下吧
  • idx miss % 索引不命中所占百分比。如果太高的话就要考虑索引是不是少了
  • q t|r|w 当Mongodb接收到太多的命令而数据库被锁住无法执行完成,它会将命令加入队列。这一栏显示了总共、读、写3个队列的长度,都为0的话表示mongo毫无压力。高并发时,一般队列值会升高。
  • conn 当前连接数
  • time 时间戳

使用profiler

Mongo profile

类似于MySQL的slow log, MongoDB可以监控所有慢的以及不慢的查询。

Profiler默认是关闭的,你可以选择全部开启,或者有慢查询的时候开启。

1> use test
2switched to db test
3> db.setProfilingLevel(2);
4{"was" : 0 , "slowms" : 100, "ok" : 1} // "was" is the old setting
5> db.getProfilingLevel()
62

查看Profile日志

1> db.system.profile.find().sort({$natural:-1})
2{"ts" : "Thu Jan 29 2009 15:19:32 GMT-0500 (EST)" , "info" :
3"query test.$cmd ntoreturn:1 reslen:66 nscanned:0 query: { profile: 2 } nreturned:1 bytes:50" ,
4"millis" : 0} ...

3个字段的意义

  • ts:时间戳
  • info:具体的操作
  • millis:操作所花时间,毫秒

不多说,此处有官方文档。注意,造成满查询可能是索引的问题,也可能是数据不在内存造成因此磁盘读入造成。

使用Web控制台

Mongodb自带了Web控制台,默认和数据服务一同开启。他的端口在Mongodb数据库服务器端口的基础上加1000,如果是默认的Mongodb数据服务端口(Which is 27017),则相应的Web端口为28017

mongodb web monitor

这个页面可以看到

  • 当前Mongodb的所有连接
  • 各个数据库和Collection的访问统计,包括:Reads, Writes, Queries, GetMores ,Inserts, Updates, Removes
  • 写锁的状态
  • 以及日志文件的最后几百行(CentOS+10gen yum 安装的mongodb默认的日志文件位于/var/log/mongo/mongod.log)

可以参考右边的截图

db.stat()

获取当前数据库的信息,比如Obj总数、数据库总大小、平均Obj大小等

01> use test
02switched to db test
03> db.stats()
04{
05    "collections" : 9,
06    "objects" : 4278845,
07    "avgObjSize" : 224.56603031892953,
08    "dataSize" : 960883236,
09    "storageSize" : 1195438080,
10    "numExtents" : 59,
11    "indexes" : 13,
12    "indexSize" : 801931264,
13    "fileSize" : 6373244928,
14    "ok" : 1
15}

db.serverStatus()

获取服务器的状态

01{
02    "version" : "1.6.5",
03    "uptime" : 7208469,
04    "uptimeEstimate" : 7138829,
05    "localTime" : "Wed Oct 26 2011 22:23:07 GMT+0800 (CST)",
06    "globalLock" : {
07        "totalTime" : 7208469556704,
08        "lockTime" : 4959693717,
09        "ratio" : 0.000688036992871448,
10        "currentQueue" : {
11            "total" : 0,
12            "readers" : 0,
13            "writers" : 0
14        }
15    },
16    "mem" : {
17        "bits" : 64,
18        "resident" : 3131,
19        "virtual" : 6172,
20        "supported" : true,
21        "mapped" : 4927
22    },
23    "connections" : {
24        "current" : 402,
25        "available" : 2599
26    },
27    "extra_info" : {
28        "note" : "fields vary by platform",
29        "heap_usage_bytes" : 832531920,
30        "page_faults" : 8757
31    },
32    "indexCounters" : {
33        "btree" : {
34            "accesses" : 2821726,
35            "hits" : 2821725,
36            "misses" : 1,
37            "resets" : 0,
38            "missRatio" : 3.543930204420982e-7
39        }
40    },
41    "backgroundFlushing" : {
42        "flushes" : 120133,
43        "total_ms" : 73235923,
44        "average_ms" : 609.6236920746173,
45        "last_ms" : 1332,
46        "last_finished" : "Wed Oct 26 2011 22:22:23 GMT+0800 (CST)"
47    },
48    "cursors" : {
49        "totalOpen" : 0,
50        "clientCursors_size" : 0,
51        "timedOut" : 238392
52    },
53    "repl" : {
54        "ismaster" : true
55    },
56    "opcounters" : {
57        "insert" : 269351,
58        "query" : 19331151,
59        "update" : 14199331,
60        "delete" : 1,
61        "getmore" : 145575,
62        "command" : 55982302
63    },
64    "asserts" : {
65        "regular" : 0,
66        "warning" : 0,
67        "msg" : 0,
68        "user" : 27,
69        "rollovers" : 0
70    },
71    "ok" : 1
72}

需要关心的地方:

  • connections 当前连接和可用连接数,听过一个同行介绍过,mongodb最大处理到2000个连接就不行了(要根据你的机器性能和业务来设定),所以设大了没意义。设个合理值的话,到达这个值mongodb就拒绝新的连接请求,避免被太多的连接拖垮。
  • indexCounters:btree:misses 索引的不命中数,和hits的比例高就要考虑索引是否正确建立。你看我的”missRatio” : 3.543930204420982e-7,很健康吧。所以miss率在mongostat里面也可以看
  • 其他的都能自解释,也不是查看mongo健康状况的关键,就不说明了。

db.currentOp()

Mongodb 的命令一般很快就完成,但是在一台繁忙的机器或者有比较慢的命令时,你可以通过db.currentOp()获取当前正在执行的操作。

在没有负载的机器上,该命令基本上都是返回空的

1>  db.currentOp()
2{ "inprog" : [ ] }

以下是一个有负载的机器上得到的返回值样例:

1{ "opid" : "shard3:466404288", "active" : false, "waitingForLock" : false, "op": "query", "ns" : "sd.usersEmails", "query" : { }, "client_s" :"10.121.13.8:34473", "desc" : "conn" },

字段名字都能自解释。如果你发现一个操作太长,把数据库卡死的话,可以用这个命令杀死他

1> db.killOp("shard3:466404288")

MongoDB Monitoring Service

MongoDB Monitoring Service(MMS)是Mongodb厂商提供的监控服务,可以在网页和Android客户端上监控你的MongoDB状况。

Oracle数据库安装图文教程 附百度云oracle Database 11g 安装包 一,Oracle数据库安装包下载 1.从Oracle官网下载所需的数据库安装包【下载需要注册登录Oracle账户】     http://www.oracle.com/technetwork/database/enterprise-edition/downloads/index.html 2.此处有下载好的Oracle Database 11g Release 2  百度云网盘  提取码:z... 阅读详情

相关推荐

从零开始理解异构算力调度:全国一体化算力算网平台实战解析

本文深入解析了异构算力调度技术在全国一体化算力算网平台中的实战应用。通过资源抽象层设计、动态感知引擎和跨云调度算法,实现AI训练任务的高效资源分配,显著提升计算效率并降低成本。特别针对GPU等异构算力的智能调度方案,为多云协同环境下的AI开发提供实用指南。

weixin_28730927的博客 334

监控mongo 状态慢查询

mongostat详解 mongostat是mongdb自带的状态检测工具,在命令行下使用。它会间隔固定时间获取mongodb的当前运行状态,并输出。如果你发现数据库突然变慢或者有其他问题的话,你第一手的操作就考虑采用mongostat来查看mongo的状态。 它的输出有以下几列: inserts/s 每秒插入次数query/s 每秒查询次数update/s 每秒更新次数

逆雪寒的天坑 1万+

教你搞懂RT-Thread的移植和配置ENV工具环境

RT-Thread的移植和配置ENV工具环境

Troubadour~的博客 8262

MongoDB数据库巡检脚本

变量为你的MongoDB连接信息和输出文件路径。运行脚本后,将会生成一个巡检报告文件,其中包含了MongoDB版本、每个数据库的大小和每个集合的大小等信息。这只是一个基本的示例脚本,你可以根据具体需求进行扩展和定制,添加更多的巡检项和检查规则。

Auspicious航的博客 843

STGCN+YOLOV8行为分类

使用关节点追踪网络获取关节点数据,以yolo-v8网络为例,获取2D关节点数据。此次实验采用KTH动作识别数据集,包含人步行、慢跑、跑步、拳击、挥手和拍手等动作。

SDADASDAF的博客 3891

STM32F103C8T6的PC13-15引脚配置避坑指南:为什么你的IO口不工作?

本文详细解析了STM32F103C8T6的PC13-15引脚作为普通IO口不工作的原因及解决方案。这三个引脚默认关联侵入检测和低速外部时钟等特殊功能,需先禁用TAMPER和LSE,并开启AFIO时钟,才能正确配置为普通GPIO。文章提供了标准外设库和HAL库的配置步骤、常见问题排查方法及硬件设计注意事项。

weixin_29169899的博客 522

MongoDB 监控与分析

归咎于这段时间遇到mongo服务波动的问题,特别去看了mongo服务端监控的知识,诸如mongo连接数,慢查询,磁盘占用等,在这里记一下,分享!!!

weixin_38597669的博客 1018

29、网络支持技术:CDN、覆盖网络与无标度网络解析

本文详细解析了CDN路由方式与性能指标,探讨了覆盖网络与无标度网络的特性及其在云计算和现代网络中的应用。文章分析了CDN的关键技术与挑战,介绍了覆盖网络与小世界网络的基本原理,并深入讨论了无标度网络的构建算法、性能优化策略以及在多个领域的应用案例。最后,文章展望了未来网络技术发展趋势与无标度网络的结合潜力。

night的博客 88

云数据库MongoDB监控指标解读与关注

2019独角兽企业重金招聘Python工程师标准>>> ...

weixin_33840661的博客 480

危废焚烧优化控制系统设计与实现:基于数据驱动的控制参数预测

本文提出了一种基于数据驱动的危险废物焚烧过程优化控制方法。系统利用历史运行数据和实时监测数据,通过深度学习模型预测关键控制参数,实现焚烧过程的智能化控制。系统采用Python开发,结合TensorFlow/PyTorch框架,构建了完整的数据采集、预处理、特征工程、模型训练和实时预测闭环系统。该系统能够处理多变量非线性关系,适应工况变化,从历史数据中学习最优控制策略,相比传统PID控制方法具有显著优势。论文详细介绍了系统架构、算法设计和实现细节,为危废焚烧过程的优化控制提供了有效解决方案。

huanghm88的专栏 206

【数据分析】比较SparCC、Pearson和Spearman相关性估计方法在合成组学数据上的表现

【数据分析】比较SparCC、Pearson和Spearman相关性估计方法在合成组学数据上的表现

专注生信领域 659

MongoDB运行状态、性能监控,分析

MongoDB运行状态、性能监控,分析http://automationqa.com/forum.php?mod=viewthread&tid=1708

软件质量优化 2651

【FPGA教程案例49】控制案例1——基于FPGA的PID控制器verilog实现

PID控制器产生于1915年,PID控制律的概念最早是由LYAPIMOV提出的,到目前为止,PID控制器以及改进的PID控制器在工业控制领域里最为常见。PID控制器(比例-积分-微分控制器),由比例单元 P、积分单元 I 和微分单元 D 组成。通过Kp,Ki和Kd三个参数的设定。PID控制器主要适用于基本线性和动态特性不随时间变化的系统。图1为PID控制器的基本结构框图。PID控制器以其结构简单、稳定性好、工作可靠、调整方便而成为工业控制的主要技术之一。...

FPGA/MATLAB学习教程/源码/项目合作开发 4530

MongoDB-运行状态、性能监控,分析

这篇文章的目的是让你知道怎么了解你正在运行的Mongdb是否健康。 mongostat详解 mongostat是mongdb自带的状态检测工具,在命令行下使用。它会间隔固定时间获取mongodb的当前运行状态,并输出。如果你发现数据库突然变慢或者有其他问题的话,你第一手的操作就考虑采用mongostat来查看mongo的状态。 它的输出有以下几列: inserts/s 每秒插入次数 ...

cxu123321的博客 571

精雕软件(JDpaint) 5.5 绿色版

精雕软件(JDpaint) 5.5 绿色版精雕软件(JDpaint) 5.5 绿色版精雕软件(JDpaint) 5.5 绿色版

SIMATIC S7-1200, S7-1500 PID 控制[手册]

SIMATIC S7-1200, S7-1500 PID 控制[手册]

mongodb 服务器性能监控,MongoDB运行状态、性能监控,分析

这篇文章的目的是让你知道怎么了解你正在运行的Mongdb是否健康。mongostat详解mongostat是mongdb自带的状态检测工具,在命令行下使用。它会间隔固定时间获取mongodb的当前运行状态,并输出。如果你发现数据库突然变慢或者有其他问题的话,你第一手的操作就考虑采用mongostat来查看mongo的状态。它的输出有以下几列:inserts/s 每秒插入次数query/s 每秒查询...

weixin_33996020的博客 909

锂电池充电器电路设计 里面有电路

锂电池充电器电路设计 里面有电路 3.7V升压到5V电路设计。

java mongodb 监控_MongoDB监控之一:运行状态、性能监控,分析

为什么要监控?监控及时获得应用的运行状态信息,在问题出现时及时发现。监控什么?CPU、内存、磁盘I/O、应用程序(MongoDB)、进程监控(ps -aux)、错误日志监控1.4.1 MongoDB集群监控方式db.serverStatus()db.serverStatus() 包含的监控信息是从上次开机到现在为止的累计数据,因此不能简单使用。非常核心的有:connections:关于连接数的信息...

weixin_36303462的博客 1192
上一篇: MongoDB中Bson文档的创建
下一篇: MongoDB 索引的创建注意事项、以及建索引导致锁库的解决方案
Comedly
博客等级 码龄10年 17粉丝 29原创
评论
成就一亿技术人!
拼手气红包6.0元
还能输入1000个字符
 
 条评论被折叠 查看
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付:10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值