您当前的位置:首页 > 电脑百科 > 数据库 > MYSQL

MySQL数据库监控

时间:2022-04-25 09:17:49  来源:  作者:卖薯条老师

MySQL常用的性能指标

(1) QPS(每秒Query量)

QPS = Questions(or Queries) / seconds

mysql > show global status like 'Question%';

(2) TPS(每秒事务量)

TPS = (Com_commit + Com_rollback) / seconds

mysql > show global status like'Com_commit';

mysql > show global status like'Com_rollback';

(3)key Buffer 命中率

mysql>show global status like 'key%';

key_buffer_read_hits = (1-key_reads /key_read_requests) * 100%

key_buffer_write_hits = (1-key_writes /key_write_requests) * 100%

(4)InnoDB Buffer命中率

mysql> show status like'innodb_buffer_pool_read%';

innodb_buffer_read_hits = (1 -innodb_buffer_pool_reads / innodb_buffer_pool_read_requests) * 100%

(5)Query Cache命中率

mysql> show status like 'Qcache%';

Query_cache_hits = (Qcahce_hits /(Qcache_hits + Qcache_inserts )) * 100%;

(6)Table Cache状态量

mysql> show global status like 'open%';

比较 open_tables 与opend_tables 值

(7)Thread Cache 命中率

mysql> show global status like'Thread%';

mysql> show global status like'Connections';

Thread_cache_hits = (1 - Threads_created /connections ) * 100%

(8)锁定状态

mysql> show global status like '%lock%';

Table_locks_wAIted/Table_locks_immediate=0.3% 如果这个比值比较大的话,说明表锁造成的阻塞比较严重

Innodb_row_lock_waits innodb行锁,太大可能是间隙锁造成的

(9)复制延时量

mysql > show slave status

查看延时时间

(10) Tmp Table 状况(临时表状况)

mysql > show status like 'Create_tmp%';

Created_tmp_disk_tables/Created_tmp_tables比值最好不要超过10%,如果Created_tmp_tables值比较大,

可能是排序句子过多或者是连接句子不够优化

(11) Binlog Cache 使用状况

mysql > show status like'Binlog_cache%';

如果Binlog_cache_disk_use值不为0 ,可能需要调大 binlog_cache_size大小

(12) Innodb_log_waits 量

mysql > show status like'innodb_log_waits';

Innodb_log_waits值不等于0的话,表明 innodblog buffer 因为空间不足而等待

(13)open file and table

mysql> mysql -e "show global statuslike 'Open_files';

mysql> mysql -e "show global statuslike 'Open_tables';

(14) 慢查询

开启慢查询:

编辑/etc/my.cnf,在[mysqld]域中添加:

slow_query_log= 1 # 开启慢查询

slow_query_log_file=/data/mysql/slow.log # 慢查询日志路径

long_query_time= 1 # 慢查询的时长

查看慢查询数量:

执行mysqladminstatus

(15)全日志

查看全日志:

show global variables like 'general_log';

开启全日志:

set global general_log=on;

注意开启全日志会消耗服务器性能,一般只有在排查问题时才会短暂打开。

########### 分割线 ###########

我们需要根据自己的情况进行配置优化,好的做法是MySQL服务器稳定运行了一段时间后,根据服务器的”状态”再进行优化。

 

数据库性能状态

QueryCache命中率

Query_cache_hits=(Qcahce_hits/(Qcache_hits+Qcache_inserts))*100%;

show status like 'Qcache%';

 

MySQL数据库监控

 

  • QPS(每秒Query量)

QPS=Questions(orQueries)/seconds

show global status like 'Question%';

 

MySQL数据库监控

 

 

  • TPS(每秒事务量)

TPS=(Com_commit+Com_rollback)/seconds

show status like 'Com_commit';

 

MySQL数据库监控

 

 

show status like 'Com_rollback';

 

MySQL数据库监控

 

 

(3)keyBuffer命中率

key_buffer_read_hits=(1-key_reads/key_read_requests)*100%

key_buffer_write_hits=(1-key_writes/key_write_requests)*100%

show status like 'key%';

 

MySQL数据库监控

 

 

(4)InnoDBBuffer命中率

innodb_buffer_read_hits=(1-innodb_buffer_pool_reads/innodb_buffer_pool_read_requests)*100%

show status like 'innodb_buffer_pool_read%';

 

MySQL数据库监控

 

 

 

(5)QueryCache命中率

Query_cache_hits=(Qcahce_hits/(Qcache_hits+Qcache_inserts))*100%;

show status like 'Qcache%';

 

MySQL数据库监控

 

(6)TableCache状态量

show status like 'open%';

 

MySQL数据库监控

 

 

(7)ThreadCache命中率

Thread_cache_hits=(1-Threads_created/connections)*100%

show status like 'Thread%';

 

MySQL数据库监控

 

 

show status like 'Connections';

 

MySQL数据库监控

 

 

(8)锁定状态

show status like '%lock%';

 

MySQL数据库监控

 

 

(9)复制延时量

show slave status;

 

MySQL数据库监控

 

 

(10)TmpTable状况(临时表状况)

show status like 'Created_tmp%';

 

MySQL数据库监控

 

 

(11)BinlogCache使用状况

show status like 'Binlog_cache%';

 

MySQL数据库监控

 

 

(12)Innodb_log_waits量

show status like 'innodb_log_waits';

 

MySQL数据库监控

 

 

MySQL5.7的新特性之一就是sys库,sys库完成MySQL信息的收集

一、用户、连接类

1、查看每个客户端IP过来的连接消耗资源情况。

select * from sys.host_summary;

MySQL数据库监控

 

total_connections:

current_connections:当前连接数

statement_latency:声明延迟

statement_avg_latency:声明平均延迟

table_scans:扫描查询的总次数

file_IOS:

file_io_latency:

current_memory:

total_memory_allocated:

unique_users:

 

 

 

2、查看每个用户消耗资源情况

select * from sys.user_summary;

MySQL数据库监控

 

user:

statements:

statement_latency:

statement_avg_latency:

table_scans:

file_ios:

file_io_latency:

current_connections:

total_connections:

unique_hosts:

current_memory:

total_memory_allocated:

3、查看当前连接情况(有多少连接就应该有多少行)

select host,current_connections,statements from sys.host_summary;

MySQL数据库监控

 

4、查看当前正在执行的SQL

 

select conn_id,pid,user,db,command,current_statement,last_statement,time,lock_latency from sys.session

 

MySQL数据库监控

 

 

执行show full processlist的结果

 

MySQL数据库监控

 

 


二、SQL 和io类

1、查看发生IO请求前5名的文件。

select * from sys.io_global_by_file_by_bytes order by total desc limit 5;

MySQL数据库监控

 


三、buffer pool 、内存

1、查看总共分配了多少内存

select * from sys.memory_global_total;

 

MySQL数据库监控

 

 

select * from sys.memory_global_by_current_bytes;

MySQL数据库监控

 

2、每个库(database)占用多少buffer pool

select * from sys.innodb_buffer_stats_by_schema order by allocated desc;

MySQL数据库监控

 

pages是指在buffer pool中的page数量;

pages_old指在LUR 列表中处于后37%位置的page。

当出现buffer page不够用时,就会征用这些page所占的空间。

37%是默认位置,具体可以自定义。

3、统计每张表具体在InnoDB中具体的情况,比如占多少页?

注意和前面的pages的总数都是相等的,也可以借用sum(pages)运算验证一下。

select * from sys.innodb_buffer_stats_by_table;

MySQL数据库监控

 

4、查询每个连接分配了多少内存

利用session表和
memory_by_thread_by_current_bytes分配表进行关联查询。

SELECT b.USER, current_count_used, current_allocated, current_avg_alloc, current_max_alloc, total_allocated, current_statement FROM sys.memory_by_thread_by_current_bytes a, sys.SESSION b WHERE a.thread_id = b.thd_id;

MySQL数据库监控

 


四、字段、索引、锁

1、查看表自增字段最大值和当前值,有时候做数据增长的监控,可以作为参考。

select * from sys.schema_auto_increment_columns;

MySQL数据库监控

 

2、MySQL索引使用情况统计

select * from sys.schema_index_statistics order by rows_selected desc;

MySQL数据库监控

 

3、MySQL中有哪些冗余索引和无用索引

若库中展示没有冗余索引,则没有数据;当有联合索引idx_abc(a,b,c)和idx_a(a),那么idx_a就算冗余索引了。

select * from sys.schema_redundant_indexes;

MySQL数据库监控

 

4、查看INNODB 锁信息

在未来的版本将被移除,可以采用其他方式

select * from sys.innodb_lock_waits

 

5、查看库级别的锁信息,这个需要先打开MDL锁的监控:

--打开MDL锁监控

update performance_schema.setup_instruments set enabled='YES',TIMED='YES' where name='wait/lock/metadata/sql/mdl';

select * from sys.schema_table_lock_waits;


五、线程类

1、MySQL内部有多个线程在运行,线程类型及数量

select user,count(*) from sys.`processlist` group by user;

 


六、主键自增

查看MySQL自增id的使用情况

SELECT table_schema, table_name, ENGINE, Auto_increment FROM information_schema.TABLES WHERE TABLE_SCHEMA NOT IN ( "INFORMATION_SCHEMA", "PERFORMANCE_SCHEMA", "MYSQL", "SYS" )

MySQL数据库监控

 

一、对数据库服务可用性进行监控

思路:

1.1 通过测试账号ping命令返回的信息判断数据库可以通过网络连接

/usr/bin/mysqladmin -uroot -p123456 ping

mysqld is alive

 

1.2 确认数据库是否可读写

a.检查数据库的read_only参数是否为off

mysql -uroot -p123456 -P3306 -e "show global variables like 'read_only'" | grep read_only

read_only OFF

 

b.执行简单的数据库查询,如:select @@version;

mysql -uroot -p123456 -P3306 -e "select @@version"

MySQL数据库监控

 

二、对数据库性能进行监控

2.1 监控数据库连接数可用性

a.数据库最大连接数

mysql -uroot -p123456 -e "show variables like 'max_connections'"

 

MySQL数据库监控

 

b.数据库当前打开的连接数

mysqladmin -uroot -p123456 extended-status grep -w "Threads_connected"

 

MySQL数据库监控

 

 

注:如何计算当前打开的连接数占用最大连接数的比例呢?

result=
Threads_connected/max_connections,在做监控报警或可视化监控时能够很好的根据这个比例及时调整最大连接数。

 

2.2 数据库性能监控

a.QPS:每秒的查询数

QPS计算方法

Questions = SHOW GLOBAL STATUS LIKE 'Questions';

Uptime = SHOW GLOBAL STATUS LIKE 'Uptime';

QPS=Questions/Uptime

 

b.TPS:每秒的事物量(commit与rollback的之和)

TPS计算方法

Com_commit = SHOW GLOBAL STATUS LIKE 'Com_commit';

Com_rollback = SHOW GLOBAL STATUS LIKE 'Com_rollback';

Uptime = SHOW GLOBAL STATUS LIKE 'Uptime';

TPS=(Com_commit + Com_rollback)/Uptime

 

2.3 数据库并发请求数量

SHOW GLOBAL STATUS LIKE 'Threads_running';

MySQL数据库监控

 

注:并发请求数量通常会远小于同一时间内连接到数据库的连接数量。

 

2.4 监控innodb阻塞情况

a. innodb

 

三、对主从复制进行监控

3.1 主从复制链路状态的监控

3.2 主从复制延迟时间的监控

3.3 定期确认主从复制的数据是否一致



Tags:MySQL   点击:()  评论:()
声明:本站部分内容及图片来自互联网,转载是出于传递更多信息之目的,内容观点仅代表作者本人,不构成投资建议。投资者据此操作,风险自担。如有任何标注错误或版权侵犯请与我们联系,我们将及时更正、删除。
▌相关推荐
MySQL 核心模块揭秘
server 层会创建一个 SAVEPOINT 对象,用于存放 savepoint 信息。binlog 会把 binlog offset 写入 server 层为它分配的一块 8 字节的内存里。 InnoDB 会维护自己的 savepoint...【详细内容】
2024-04-03  Search: MySQL  点击:(10)  评论:(0)  加入收藏
MySQL 核心模块揭秘,你看明白了吗?
为了提升分配 undo 段的效率,事务提交过程中,InnoDB 会缓存一些 undo 段。只要同时满足两个条件,insert undo 段或 update undo 段就能被缓存。1. 关于缓存 undo 段为了提升分...【详细内容】
2024-03-27  Search: MySQL  点击:(17)  评论:(0)  加入收藏
MySQL:BUG导致DDL语句无谓的索引重建
对于5.7.23之前的版本在评估类似DDL操作的时候需要谨慎,可能评估为瞬间操作,但是实际上线的时候跑了很久,这个就容易导致超过维护窗口,甚至更大的故障。一、问题模拟使用5.7.22...【详细内容】
2024-03-26  Search: MySQL  点击:(14)  评论:(0)  加入收藏
从 MySQL 到 ByteHouse,抖音精准推荐存储架构重构解读
ByteHouse是一款OLAP引擎,具备查询效率高的特点,在硬件需求上相对较低,且具有良好的水平扩展性,如果数据量进一步增长,可以通过增加服务器数量来提升处理能力。本文将从兴趣圈层...【详细内容】
2024-03-22  Search: MySQL  点击:(29)  评论:(0)  加入收藏
MySQL自增主键一定是连续的吗?
测试环境:MySQL版本:8.0数据库表:T (主键id,唯一索引c,普通字段d)如果你的业务设计依赖于自增主键的连续性,这个设计假设自增主键是连续的。但实际上,这样的假设是错的,因为自增主键不...【详细内容】
2024-03-10  Search: MySQL  点击:(14)  评论:(0)  加入收藏
准线上事故之MySQL优化器索引选错
1 背景最近组里来了许多新的小伙伴,大家在一起聊聊技术,有小兄弟提到了MySQL的优化器的内部策略,想起了之前在公司出现的一个线上问题,今天借着这个机会,在这里分享下过程和结论...【详细内容】
2024-03-07  Search: MySQL  点击:(32)  评论:(0)  加入收藏
MySQL数据恢复,你会吗?
今天分享一下binlog2sql,它是一款比较常用的数据恢复工具,可以通过它从MySQL binlog解析出你要的SQL,并根据不同选项,可以得到原始SQL、回滚SQL、去除主键的INSERT SQL等。主要...【详细内容】
2024-02-22  Search: MySQL  点击:(54)  评论:(0)  加入收藏
如何在MySQL中实现数据的版本管理和回滚操作?
实现数据的版本管理和回滚操作在MySQL中可以通过以下几种方式实现,包括使用事务、备份恢复、日志和版本控制工具等。下面将详细介绍这些方法。1.使用事务:MySQL支持事务操作,可...【详细内容】
2024-02-20  Search: MySQL  点击:(54)  评论:(0)  加入收藏
为什么高性能场景选用Postgres SQL 而不是 MySQL
一、 数据库简介 TLDR;1.1 MySQL MySQL声称自己是最流行的开源数据库,它属于最流行的RDBMS (Relational Database Management System,关系数据库管理系统)应用软件之一。LAMP...【详细内容】
2024-02-19  Search: MySQL  点击:(39)  评论:(0)  加入收藏
MySQL数据库如何生成分组排序的序号
经常进行数据分析的小伙伴经常会需要生成序号或进行数据分组排序并生成序号。在MySQL8.0中可以使用窗口函数来实现,可以参考历史文章有了这些函数,统计分析事半功倍进行了解。...【详细内容】
2024-01-30  Search: MySQL  点击:(55)  评论:(0)  加入收藏
▌简易百科推荐
MySQL 核心模块揭秘
server 层会创建一个 SAVEPOINT 对象,用于存放 savepoint 信息。binlog 会把 binlog offset 写入 server 层为它分配的一块 8 字节的内存里。 InnoDB 会维护自己的 savepoint...【详细内容】
2024-04-03  爱可生开源社区    Tags:MySQL   点击:(10)  评论:(0)  加入收藏
MySQL 核心模块揭秘,你看明白了吗?
为了提升分配 undo 段的效率,事务提交过程中,InnoDB 会缓存一些 undo 段。只要同时满足两个条件,insert undo 段或 update undo 段就能被缓存。1. 关于缓存 undo 段为了提升分...【详细内容】
2024-03-27  爱可生开源社区  微信公众号  Tags:MySQL   点击:(17)  评论:(0)  加入收藏
MySQL:BUG导致DDL语句无谓的索引重建
对于5.7.23之前的版本在评估类似DDL操作的时候需要谨慎,可能评估为瞬间操作,但是实际上线的时候跑了很久,这个就容易导致超过维护窗口,甚至更大的故障。一、问题模拟使用5.7.22...【详细内容】
2024-03-26  MySQL学习  微信公众号  Tags:MySQL   点击:(14)  评论:(0)  加入收藏
从 MySQL 到 ByteHouse,抖音精准推荐存储架构重构解读
ByteHouse是一款OLAP引擎,具备查询效率高的特点,在硬件需求上相对较低,且具有良好的水平扩展性,如果数据量进一步增长,可以通过增加服务器数量来提升处理能力。本文将从兴趣圈层...【详细内容】
2024-03-22  字节跳动技术团队    Tags:ByteHouse   点击:(29)  评论:(0)  加入收藏
MySQL自增主键一定是连续的吗?
测试环境:MySQL版本:8.0数据库表:T (主键id,唯一索引c,普通字段d)如果你的业务设计依赖于自增主键的连续性,这个设计假设自增主键是连续的。但实际上,这样的假设是错的,因为自增主键不...【详细内容】
2024-03-10    dbaplus社群  Tags:MySQL   点击:(14)  评论:(0)  加入收藏
准线上事故之MySQL优化器索引选错
1 背景最近组里来了许多新的小伙伴,大家在一起聊聊技术,有小兄弟提到了MySQL的优化器的内部策略,想起了之前在公司出现的一个线上问题,今天借着这个机会,在这里分享下过程和结论...【详细内容】
2024-03-07  转转技术  微信公众号  Tags:MySQL   点击:(32)  评论:(0)  加入收藏
MySQL数据恢复,你会吗?
今天分享一下binlog2sql,它是一款比较常用的数据恢复工具,可以通过它从MySQL binlog解析出你要的SQL,并根据不同选项,可以得到原始SQL、回滚SQL、去除主键的INSERT SQL等。主要...【详细内容】
2024-02-22  数据库干货铺  微信公众号  Tags:MySQL   点击:(54)  评论:(0)  加入收藏
如何在MySQL中实现数据的版本管理和回滚操作?
实现数据的版本管理和回滚操作在MySQL中可以通过以下几种方式实现,包括使用事务、备份恢复、日志和版本控制工具等。下面将详细介绍这些方法。1.使用事务:MySQL支持事务操作,可...【详细内容】
2024-02-20  编程技术汇    Tags:MySQL   点击:(54)  评论:(0)  加入收藏
MySQL数据库如何生成分组排序的序号
经常进行数据分析的小伙伴经常会需要生成序号或进行数据分组排序并生成序号。在MySQL8.0中可以使用窗口函数来实现,可以参考历史文章有了这些函数,统计分析事半功倍进行了解。...【详细内容】
2024-01-30  数据库干货铺  微信公众号  Tags:MySQL   点击:(55)  评论:(0)  加入收藏
mysql索引失效的场景
MySQL中索引失效是指数据库查询时无法有效利用索引,这可能导致查询性能显著下降。以下是一些常见的MySQL索引失效的场景:1.使用非前导列进行查询: 假设有一个复合索引 (A, B)。...【详细内容】
2024-01-15  小王爱编程  今日头条  Tags:mysql索引   点击:(88)  评论:(0)  加入收藏
站内最新
站内热门
站内头条