您当前的位置:首页 > 电脑百科 > 数据库 > MYSQL

MySQL性能飙升的秘密武器:Innodb_lru_scan_depth参数解密!

时间:2023-11-20 14:39:08  来源:微信公众号  作者:数据库干货铺

1、innodb_lru_scan_depth 到底是何方神圣?

 innodb_lru_scan_depth参数就像MySQL的一把钥匙,控制着LRU(Least Recently Used)算法的扫描深度。LRU 算法用于管理 InnoDB 缓冲池中的页,以确定哪些页应该保留在内存中,哪些应该被淘汰出去.调整它,就像给数据库打了一支强心剂,让性能焕发新生。

该参数的作用是指定 InnoDB 在进行 LRU 扫描时要检查的页数。较大的值可以使 InnoDB 更深地检查缓冲池中的页,但也会增加 LRU 扫描的开销。通过调整这个参数,可以在性能和内存使用之间找到平衡点。

修改 innodb_lru_scan_depth 参数后,数据库会经历一些变化,特别是在缓冲池管理方面。下面是可能的变化:

缓冲池中的页淘汰行为:

  • 增加深度:如果你将 innodb_lru_scan_depth 参数的值增加,InnoDB 将在每次 LRU 扫描时检查更多的页。这可能导致更多的热点数据保留在内存中,从而提高缓冲池命中率,减少对磁盘的读取次数。
  • 减小深度:如果将该参数值减小,InnoDB 将检查较少的页,可能导致一些热点数据被淘汰出缓冲池,增加对磁盘的读取需求。

LRU 扫描的效率:

  • 增加深度:更深入的扫描可能会增加 LRU 扫描的开销,因为需要更多的资源和时间来检查更多的页。这可能对系统的性能产生一定的影响。
  • 减小深度:减小深度可能会减少 LRU 扫描的开销,但也可能导致更频繁的页淘汰。

系统负载:

  • 增加深度:在内存资源足够的情况下,增加 innodb_lru_scan_depth 的值可能会提高系统性能,因为更多的数据被保留在内存中,减少了磁盘 I/O。

  • 减小深度:减小深度可能会降低系统的内存消耗,但也可能导致更多的磁盘 I/O 操作,影响性能。

  • 竞争情况:

  • 增加深度:更深入的 LRU 扫描可能有助于减轻由于高并发读写操作而引起的缓冲池竞争。

  • 减小深度:减小深度可能导致更频繁的缓冲池页替换,增加竞争,尤其在高并发环境中。

2、简单案例

如果一个火爆的电商平台中的商品、订单信息频繁被查询,但发现缓冲池命中率低,热点数据不在内存中。这时, innodb_lru_scan_depth 就是你提升性能的秘密武器。

备份配置文件: 数据库参数调整前都建议先备份配置文件以及当前数据库中的参数值(因为可能修改后没修改配置文件)。

查询当前值: 使用以下 SQL 语句查询当前 innodb_lru_scan_depth 参数值。

mysql> SHOW GLOBAL VARIABLES LIKE 'innodb_lru_scan_depth';
+-----------------------+-------+
| Variable_name         | Value |
+-----------------------+-------+
| innodb_lru_scan_depth | 1024  |
+-----------------------+-------+
1 row in set (0.00 sec)

修改参数:根据实际情况使用以下 SQL 语句修改参数值。

mysql> set global  innodb_lru_scan_depth=2048;
Query OK, 0 rows affected (0.00 sec)


mysql> SHOW GLOBAL VARIABLES LIKE 'innodb_lru_scan_depth';
+-----------------------+-------+
| Variable_name         | Value |
+-----------------------+-------+
| innodb_lru_scan_depth | 2048  |
+-----------------------+-------+
1 row in set (0.00 sec)

验证效果:通过监控工具、性能测试或数据库日志,验证数据库主机及数据库运行情况,如果内存依旧剩余较多,可以继续逐步调整

3、小结

(1)何时调整

  • 低缓冲池命中率:当系统的缓冲池命中率较低,即大量的热点数据未能保留在内存中,可以考虑增加 innodb_lru_scan_depth 的值。这有助于增加 LRU 扫描的深度,提高热点数据在缓冲池中的保留率,从而减少对磁盘的读取
  • 高磁盘 I/O:如果系统频繁进行磁盘 I/O 操作,表示热点数据未能在缓冲池中得到足够的保留,可以考虑增加 innodb_lru_scan_depth 以提高热点数据的内存保留率,减少磁盘 I/O 操作
  • 系统负载过高:在高负载的情况下,可能需要调整 innodb_lru_scan_depth 以平衡性能和资源消耗。增加深度可能有助于提高性能,但需要注意可能的系统开销
  • 高并发写入操作:如果系统有大量并发的写入操作,减小 innodb_lru_scan_depth 的值可能有助于减轻由于高并发写操作而导致的缓冲池竞争。这样可以减少 LRU 扫描的开销,但需要权衡磁盘 I/O 操作的增加
  • 系统稳定期间:最好在系统相对稳定的时期进行参数的修改,避免在高峰时段或者关键业务时段引起不必要的风险
  • 性能监控反馈: 通过性能监控工具观察系统的性能指标,如缓冲池命中率、磁盘 I/O 等,如果发现有改进的空间,可以考虑调整 innodb_lru_scan_depth 参数

(2)注意事项

  • 逐步调整值的大小:避免过度增加深度,以免系统开销突增,因此调整时需要结合系统及数据库的运行情况逐步增加,如果有条件可以提前部署环境进行压测
  • 定期监控性能: 调整参数后,定期监控系统性能,确保性能在可接受范围内
  • 在稳定时期进行调整: 最好在系统相对稳定的时期进行参数的修改,避免在高峰时段引起不必要的风险


Tags:MySQL   点击:()  评论:()
声明:本站部分内容及图片来自互联网,转载是出于传递更多信息之目的,内容观点仅代表作者本人,不构成投资建议。投资者据此操作,风险自担。如有任何标注错误或版权侵犯请与我们联系,我们将及时更正、删除。
▌相关推荐
MySQL 核心模块揭秘
server 层会创建一个 SAVEPOINT 对象,用于存放 savepoint 信息。binlog 会把 binlog offset 写入 server 层为它分配的一块 8 字节的内存里。 InnoDB 会维护自己的 savepoint...【详细内容】
2024-04-03  Search: MySQL  点击:(5)  评论:(0)  加入收藏
MySQL 核心模块揭秘,你看明白了吗?
为了提升分配 undo 段的效率,事务提交过程中,InnoDB 会缓存一些 undo 段。只要同时满足两个条件,insert undo 段或 update undo 段就能被缓存。1. 关于缓存 undo 段为了提升分...【详细内容】
2024-03-27  Search: MySQL  点击:(10)  评论:(0)  加入收藏
MySQL:BUG导致DDL语句无谓的索引重建
对于5.7.23之前的版本在评估类似DDL操作的时候需要谨慎,可能评估为瞬间操作,但是实际上线的时候跑了很久,这个就容易导致超过维护窗口,甚至更大的故障。一、问题模拟使用5.7.22...【详细内容】
2024-03-26  Search: MySQL  点击:(8)  评论:(0)  加入收藏
从 MySQL 到 ByteHouse,抖音精准推荐存储架构重构解读
ByteHouse是一款OLAP引擎,具备查询效率高的特点,在硬件需求上相对较低,且具有良好的水平扩展性,如果数据量进一步增长,可以通过增加服务器数量来提升处理能力。本文将从兴趣圈层...【详细内容】
2024-03-22  Search: MySQL  点击:(23)  评论:(0)  加入收藏
MySQL自增主键一定是连续的吗?
测试环境:MySQL版本:8.0数据库表:T (主键id,唯一索引c,普通字段d)如果你的业务设计依赖于自增主键的连续性,这个设计假设自增主键是连续的。但实际上,这样的假设是错的,因为自增主键不...【详细内容】
2024-03-10  Search: MySQL  点击:(5)  评论:(0)  加入收藏
准线上事故之MySQL优化器索引选错
1 背景最近组里来了许多新的小伙伴,大家在一起聊聊技术,有小兄弟提到了MySQL的优化器的内部策略,想起了之前在公司出现的一个线上问题,今天借着这个机会,在这里分享下过程和结论...【详细内容】
2024-03-07  Search: MySQL  点击:(26)  评论:(0)  加入收藏
MySQL数据恢复,你会吗?
今天分享一下binlog2sql,它是一款比较常用的数据恢复工具,可以通过它从MySQL binlog解析出你要的SQL,并根据不同选项,可以得到原始SQL、回滚SQL、去除主键的INSERT SQL等。主要...【详细内容】
2024-02-22  Search: MySQL  点击:(41)  评论:(0)  加入收藏
如何在MySQL中实现数据的版本管理和回滚操作?
实现数据的版本管理和回滚操作在MySQL中可以通过以下几种方式实现,包括使用事务、备份恢复、日志和版本控制工具等。下面将详细介绍这些方法。1.使用事务:MySQL支持事务操作,可...【详细内容】
2024-02-20  Search: MySQL  点击:(50)  评论:(0)  加入收藏
为什么高性能场景选用Postgres SQL 而不是 MySQL
一、 数据库简介 TLDR;1.1 MySQL MySQL声称自己是最流行的开源数据库,它属于最流行的RDBMS (Relational Database Management System,关系数据库管理系统)应用软件之一。LAMP...【详细内容】
2024-02-19  Search: MySQL  点击:(37)  评论:(0)  加入收藏
MySQL数据库如何生成分组排序的序号
经常进行数据分析的小伙伴经常会需要生成序号或进行数据分组排序并生成序号。在MySQL8.0中可以使用窗口函数来实现,可以参考历史文章有了这些函数,统计分析事半功倍进行了解。...【详细内容】
2024-01-30  Search: MySQL  点击:(53)  评论:(0)  加入收藏
▌简易百科推荐
MySQL 核心模块揭秘
server 层会创建一个 SAVEPOINT 对象,用于存放 savepoint 信息。binlog 会把 binlog offset 写入 server 层为它分配的一块 8 字节的内存里。 InnoDB 会维护自己的 savepoint...【详细内容】
2024-04-03  爱可生开源社区    Tags:MySQL   点击:(5)  评论:(0)  加入收藏
MySQL 核心模块揭秘,你看明白了吗?
为了提升分配 undo 段的效率,事务提交过程中,InnoDB 会缓存一些 undo 段。只要同时满足两个条件,insert undo 段或 update undo 段就能被缓存。1. 关于缓存 undo 段为了提升分...【详细内容】
2024-03-27  爱可生开源社区  微信公众号  Tags:MySQL   点击:(10)  评论:(0)  加入收藏
MySQL:BUG导致DDL语句无谓的索引重建
对于5.7.23之前的版本在评估类似DDL操作的时候需要谨慎,可能评估为瞬间操作,但是实际上线的时候跑了很久,这个就容易导致超过维护窗口,甚至更大的故障。一、问题模拟使用5.7.22...【详细内容】
2024-03-26  MySQL学习  微信公众号  Tags:MySQL   点击:(8)  评论:(0)  加入收藏
从 MySQL 到 ByteHouse,抖音精准推荐存储架构重构解读
ByteHouse是一款OLAP引擎,具备查询效率高的特点,在硬件需求上相对较低,且具有良好的水平扩展性,如果数据量进一步增长,可以通过增加服务器数量来提升处理能力。本文将从兴趣圈层...【详细内容】
2024-03-22  字节跳动技术团队    Tags:ByteHouse   点击:(23)  评论:(0)  加入收藏
MySQL自增主键一定是连续的吗?
测试环境:MySQL版本:8.0数据库表:T (主键id,唯一索引c,普通字段d)如果你的业务设计依赖于自增主键的连续性,这个设计假设自增主键是连续的。但实际上,这样的假设是错的,因为自增主键不...【详细内容】
2024-03-10    dbaplus社群  Tags:MySQL   点击:(5)  评论:(0)  加入收藏
准线上事故之MySQL优化器索引选错
1 背景最近组里来了许多新的小伙伴,大家在一起聊聊技术,有小兄弟提到了MySQL的优化器的内部策略,想起了之前在公司出现的一个线上问题,今天借着这个机会,在这里分享下过程和结论...【详细内容】
2024-03-07  转转技术  微信公众号  Tags:MySQL   点击:(26)  评论:(0)  加入收藏
MySQL数据恢复,你会吗?
今天分享一下binlog2sql,它是一款比较常用的数据恢复工具,可以通过它从MySQL binlog解析出你要的SQL,并根据不同选项,可以得到原始SQL、回滚SQL、去除主键的INSERT SQL等。主要...【详细内容】
2024-02-22  数据库干货铺  微信公众号  Tags:MySQL   点击:(41)  评论:(0)  加入收藏
如何在MySQL中实现数据的版本管理和回滚操作?
实现数据的版本管理和回滚操作在MySQL中可以通过以下几种方式实现,包括使用事务、备份恢复、日志和版本控制工具等。下面将详细介绍这些方法。1.使用事务:MySQL支持事务操作,可...【详细内容】
2024-02-20  编程技术汇    Tags:MySQL   点击:(50)  评论:(0)  加入收藏
MySQL数据库如何生成分组排序的序号
经常进行数据分析的小伙伴经常会需要生成序号或进行数据分组排序并生成序号。在MySQL8.0中可以使用窗口函数来实现,可以参考历史文章有了这些函数,统计分析事半功倍进行了解。...【详细内容】
2024-01-30  数据库干货铺  微信公众号  Tags:MySQL   点击:(53)  评论:(0)  加入收藏
mysql索引失效的场景
MySQL中索引失效是指数据库查询时无法有效利用索引,这可能导致查询性能显著下降。以下是一些常见的MySQL索引失效的场景:1.使用非前导列进行查询: 假设有一个复合索引 (A, B)。...【详细内容】
2024-01-15  小王爱编程  今日头条  Tags:mysql索引   点击:(82)  评论:(0)  加入收藏
站内最新
站内热门
站内头条