您当前的位置:首页 > 电脑百科 > 数据库 > MYSQL

数据库性能杀手?MySQL SQL 优化攻略来了!

时间:2023-03-13 15:02:29  来源:微信公众号  作者:走进Java

SQL 优化需要结合具体的应用场景和需求来进行,需要考虑到 SQL 查询语句、索引的使用、表结构设计以及 MySQL 参数设置等方面。通过优化 SQL 查询语句,提高查询效率,通过优化索引使用,减少查询时间和资源占用,通过优化表结构,提高查询效率和数据存储效率,通过调整 MySQL 参数设置,提高缓存效率、并发性能等。

编写高效的SQL查询语句

对于一些复杂的 SQL 查询语句,可以通过优化查询语句的结构和细节,来提高其性能。例如:

  • 避免使用 SELECT * 查询所有列,只查询需要的列:
-- 不推荐:
SELECT * FROM employees;

-- 推荐:
SELECT employee_id, first_name, last_name FROM employees;
  • 避免在 WHERE 子句中使用函数,因为函数会使索引失效:
-- 不推荐:
SELECT * FROM employees WHERE YEAR(hire_date) = 2022;

-- 推荐:
SELECT * FROM employees WHERE hire_date >= '2022-01-01' AND hire_date < '2023-01-01';
  • 使用 EXISTS 替代 IN 子句,因为 EXISTS 只需要判断是否存在记录,而 IN 需要查询所有记录再进行比较:
-- 不推荐:
SELECT * FROM employees WHERE department_id IN (SELECT department_id FROM departments WHERE location_id = 1700);

-- 推荐:
SELECT * FROM employees WHERE EXISTS (SELECT 1 FROM departments WHERE departments.department_id = employees.department_id AND departments.location_id = 1700);
  • 使用 UNION ALL 替代 UNION,因为 UNION ALL 不会去重,所以效率更高:
-- 不推荐:
SELECT employee_id FROM employees WHERE salary > 5000
UNION
SELECT employee_id FROM employees WHERE commission_pct > 0;

-- 推荐:
SELECT employee_id FROM employees WHERE salary > 5000
UNION ALL
SELECT employee_id FROM employees WHERE commission_pct > 0;
  • 使用 LIMIT 限制返回的记录数量,避免返回过多的记录导致性能下降:
-- 不推荐:
SELECT * FROM employees;

-- 推荐:
SELECT * FROM employees LIMIT 10;

创建索引

在 MySQL 中,索引是一种用于加速数据查询的数据结构,可以帮助我们快速地定位需要查询的数据。以下是一些创建索引的技巧:

  • 创建唯一索引,避免重复数据:
-- 创建唯一索引
CREATE UNIQUE INDEX idx_employee_id ON employees (employee_id);
  • 创建联合索引,提高查询效率:
-- 创建联合索引
CREATE INDEX idx_department_id ON employees (department_id, hire_date);
  • 避免在长文本字段上创建索引,因为这会增加索引大小,降低查询速度:
-- 不推荐:
CREATE INDEX idx_long_text ON employees (long_text_field);

-- 推荐:
不在长文本字段上创建索引,或者只在字段的前几个字符上创建索引。
  • 定期检查索引,确保索引的完整性和正确性:
-- 查看索引的状态
SHOW INDEX FROM employees;

-- 重新生成索引
ANALYZE TABLE employees;

优化表结构

在 MySQL 中,表结构的设计和优化对于查询性能有着重要的影响。以下是一些优化表结构的技巧:

  • 使用适当的数据类型,避免使用过大或过小的数据类型:
-- 不推荐:
CREATE TABLE employees (
    employee_id INT,
    first_name VARCHAR(100),
    last_name VARCHAR(100),
    salary FLOAT(8,2)
);

-- 推荐:
CREATE TABLE employees (
    employee_id INT UNSIGNED,
    first_name VARCHAR(20),
    last_name VARCHAR(20),
    salary DECIMAL(8,2)
);
  • 将表拆分为多个表,避免单个表数据过大:
-- 不推荐:
CREATE TABLE employees (
    employee_id INT UNSIGNED,
    first_name VARCHAR(20),
    last_name VARCHAR(20),
    salary DECIMAL(8,2),
    department_name VARCHAR(50),
    manager_name VARCHAR(50)
);

-- 推荐:
CREATE TABLE employees (
    employee_id INT UNSIGNED,
    first_name VARCHAR(20),
    last_name VARCHAR(20),
    salary DECIMAL(8,2),
    department_id INT UNSIGNED,
    manager_id INT UNSIGNED
);

CREATE TABLE departments (
    department_id INT UNSIGNED,
    department_name VARCHAR(50)
);

CREATE TABLE managers (
    manager_id INT UNSIGNED,
    manager_name VARCHAR(50)
);
  • 使用分区表来分散数据,提高查询性能:
-- 创建分区表
CREATE TABLE employees (
    employee_id INT UNSIGNED,
    first_name VARCHAR(20),
    last_name VARCHAR(20),
    salary DECIMAL(8,2),
    hire_date DATE
)
PARTITION BY RANGE(YEAR(hire_date)) (
    PARTITION p0 VALUES LESS THAN (2020),
    PARTITION p1 VALUES LESS THAN (2021),
    PARTITION p2 VALUES LESS THAN (2022),
    PARTITION p3 VALUES LESS THAN (2023)
);

调整 MySQL 参数

在 MySQL 中,通过调整一些参数设置,也可以提高查询性能。以下是一些调整 MySQL 参数的技巧:

  • 调整缓存大小,提高缓存效率:
-- 调整 key_buffer_size 参数,提高索引缓存大小
SET GLOBAL key_buffer_size = 512M;

-- 调整 innodb_buffer_pool_size 参数,提高 InnoDB 缓存大小
SET GLOBAL innodb_buffer_pool_size = 2G;
  • 调整线程池大小,提高并发性能:
-- 调整 thread_pool_size 参数,提高线程池大小
SET GLOBAL thread_pool_size = 32;
  • 调整查询缓存大小,提高查询缓存效率:
-- 调整 query_cache_size 参数,提高查询缓存大小
SET GLOBAL query_cache_size = 512M;
  • 调整连接超时时间,避免长时间占用连接资源:
-- 调整 wAIt_timeout 参数,设置连接超时时间为 300 秒
SET GLOBAL wait_timeout = 300;

总之,SQL 优化需要结合具体的应用场景和需求来进行,需要考虑到 SQL 查询语句、索引的使用、表结构设计以及 MySQL 参数设置等方面。通过优化 SQL 查询语句,提高查询效率,通过优化索引使用,减少查询时间和资源占用,通过优化表结构,提高查询效率和数据存储效率,通过调整 MySQL 参数设置,提高缓存效率、并发性能等。

最后,SQL 优化需要结合实际情况进行,需要定期监控和调整,以确保系统的稳定性和高性能运行。



Tags:MySQL   点击:()  评论:()
声明:本站部分内容及图片来自互联网,转载是出于传递更多信息之目的,内容观点仅代表作者本人,不构成投资建议。投资者据此操作,风险自担。如有任何标注错误或版权侵犯请与我们联系,我们将及时更正、删除。
▌相关推荐
MySQL 核心模块揭秘
server 层会创建一个 SAVEPOINT 对象,用于存放 savepoint 信息。binlog 会把 binlog offset 写入 server 层为它分配的一块 8 字节的内存里。 InnoDB 会维护自己的 savepoint...【详细内容】
2024-04-03  Search: MySQL  点击:(6)  评论:(0)  加入收藏
MySQL 核心模块揭秘,你看明白了吗?
为了提升分配 undo 段的效率,事务提交过程中,InnoDB 会缓存一些 undo 段。只要同时满足两个条件,insert undo 段或 update undo 段就能被缓存。1. 关于缓存 undo 段为了提升分...【详细内容】
2024-03-27  Search: MySQL  点击:(11)  评论:(0)  加入收藏
从 MySQL 到 ByteHouse,抖音精准推荐存储架构重构解读
ByteHouse是一款OLAP引擎,具备查询效率高的特点,在硬件需求上相对较低,且具有良好的水平扩展性,如果数据量进一步增长,可以通过增加服务器数量来提升处理能力。本文将从兴趣圈层...【详细内容】
2024-03-22  Search: MySQL  点击:(24)  评论:(0)  加入收藏
我们一起聊聊MySQL 索引的底层逻辑
数据结构以及算法索引的本质其实就是一种数据结构。我们都希望查询数据的速度能尽可能的快,因此数据库系统的设计者会从查询算法的角度进行优化。最基本的查询算法当然是顺序...【详细内容】
2024-01-03  Search: MySQL  点击:(85)  评论:(0)  加入收藏
MySQL 记录、页、索引的数据结构简析
引言本文在介绍 MySQL 内存中记录、页、索引、游标的数据结构的基础上,通过简单分析插入操作过程中行格式的转换介绍了不同数据结构的关系,其中不涉及加锁相关逻辑。原理记录...【详细内容】
2023-12-28  Search: MySQL  点击:(68)  评论:(0)  加入收藏
数据恢复新姿势:使用MySQL Shell进行更高效灵活的数据恢复
上篇文章(转战MySQL Shell!数据库备份新姿势,轻松搞定备份操作!)简单介绍了使用MySQL Shell进行数据库备份,本文基于上文的备份进行数据恢复演示操作。一、恢复单表因为上次备份的...【详细内容】
2023-12-19  Search: MySQL  点击:(114)  评论:(0)  加入收藏
如何解决 MySQL 主从延时问题?
最近面试了十几个同学,关于 MySQL 主从延时问题,笔者一般都会问。 MySQL 主从延时的原因是什么? 具体哪个环节发生延时? 如何解决呢?对于这“三连问”,极少有同学能通关,甚至有同学...【详细内容】
2023-12-13  Search: MySQL  点击:(121)  评论:(0)  加入收藏
MySQL Repeatable-Read 实现的一些误解
背景首先1992 年发表的SQL Standard 对隔离级别进行的定义是根据几个异象(Dirty Read, Non-Repeatable Read, Phantom Read) , 当然这个定义非常模糊, 后面Jim Grey 也有文...【详细内容】
2023-12-12  Search: MySQL  点击:(139)  评论:(0)  加入收藏
为何在中国 MySQL 远比 PostgreSQL 流行?
首先在全球范围内,MySQL 一直是领先于 PostgreSQL (下文简称 PG) 的。下图是 DB-Engines 的趋势图,虽然 PG 是近 10 年增长最快的数据库,但 MySQL 依然保持着优势。再来看一下...【详细内容】
2023-12-11  Search: MySQL  点击:(196)  评论:(0)  加入收藏
浅析 MySQL 代价模型:告别盲目使用 EXPLAIN,提前预知索引优化策略
背景 在 MySQL 中,当我们为表创建了一个或多个索引后,通常需要在索引定义完成后,根据具体的数据情况执行 EXPLAIN 命令,才能观察到数据库实际使用哪个索引、是否使用索引。这使...【详细内容】
2023-12-07  Search: MySQL  点击:(180)  评论:(0)  加入收藏
▌简易百科推荐
MySQL 核心模块揭秘
server 层会创建一个 SAVEPOINT 对象,用于存放 savepoint 信息。binlog 会把 binlog offset 写入 server 层为它分配的一块 8 字节的内存里。 InnoDB 会维护自己的 savepoint...【详细内容】
2024-04-03  爱可生开源社区    Tags:MySQL   点击:(6)  评论:(0)  加入收藏
MySQL 核心模块揭秘,你看明白了吗?
为了提升分配 undo 段的效率,事务提交过程中,InnoDB 会缓存一些 undo 段。只要同时满足两个条件,insert undo 段或 update undo 段就能被缓存。1. 关于缓存 undo 段为了提升分...【详细内容】
2024-03-27  爱可生开源社区  微信公众号  Tags:MySQL   点击:(11)  评论:(0)  加入收藏
MySQL:BUG导致DDL语句无谓的索引重建
对于5.7.23之前的版本在评估类似DDL操作的时候需要谨慎,可能评估为瞬间操作,但是实际上线的时候跑了很久,这个就容易导致超过维护窗口,甚至更大的故障。一、问题模拟使用5.7.22...【详细内容】
2024-03-26  MySQL学习  微信公众号  Tags:MySQL   点击:(10)  评论:(0)  加入收藏
从 MySQL 到 ByteHouse,抖音精准推荐存储架构重构解读
ByteHouse是一款OLAP引擎,具备查询效率高的特点,在硬件需求上相对较低,且具有良好的水平扩展性,如果数据量进一步增长,可以通过增加服务器数量来提升处理能力。本文将从兴趣圈层...【详细内容】
2024-03-22  字节跳动技术团队    Tags:ByteHouse   点击:(24)  评论:(0)  加入收藏
MySQL自增主键一定是连续的吗?
测试环境:MySQL版本:8.0数据库表:T (主键id,唯一索引c,普通字段d)如果你的业务设计依赖于自增主键的连续性,这个设计假设自增主键是连续的。但实际上,这样的假设是错的,因为自增主键不...【详细内容】
2024-03-10    dbaplus社群  Tags:MySQL   点击:(6)  评论:(0)  加入收藏
准线上事故之MySQL优化器索引选错
1 背景最近组里来了许多新的小伙伴,大家在一起聊聊技术,有小兄弟提到了MySQL的优化器的内部策略,想起了之前在公司出现的一个线上问题,今天借着这个机会,在这里分享下过程和结论...【详细内容】
2024-03-07  转转技术  微信公众号  Tags:MySQL   点击:(28)  评论:(0)  加入收藏
MySQL数据恢复,你会吗?
今天分享一下binlog2sql,它是一款比较常用的数据恢复工具,可以通过它从MySQL binlog解析出你要的SQL,并根据不同选项,可以得到原始SQL、回滚SQL、去除主键的INSERT SQL等。主要...【详细内容】
2024-02-22  数据库干货铺  微信公众号  Tags:MySQL   点击:(47)  评论:(0)  加入收藏
如何在MySQL中实现数据的版本管理和回滚操作?
实现数据的版本管理和回滚操作在MySQL中可以通过以下几种方式实现,包括使用事务、备份恢复、日志和版本控制工具等。下面将详细介绍这些方法。1.使用事务:MySQL支持事务操作,可...【详细内容】
2024-02-20  编程技术汇    Tags:MySQL   点击:(53)  评论:(0)  加入收藏
MySQL数据库如何生成分组排序的序号
经常进行数据分析的小伙伴经常会需要生成序号或进行数据分组排序并生成序号。在MySQL8.0中可以使用窗口函数来实现,可以参考历史文章有了这些函数,统计分析事半功倍进行了解。...【详细内容】
2024-01-30  数据库干货铺  微信公众号  Tags:MySQL   点击:(54)  评论:(0)  加入收藏
mysql索引失效的场景
MySQL中索引失效是指数据库查询时无法有效利用索引,这可能导致查询性能显著下降。以下是一些常见的MySQL索引失效的场景:1.使用非前导列进行查询: 假设有一个复合索引 (A, B)。...【详细内容】
2024-01-15  小王爱编程  今日头条  Tags:mysql索引   点击:(85)  评论:(0)  加入收藏
站内最新
站内热门
站内头条