mysql排序优化技巧
概述在使用order by时,经常出现Using filesort,所以对于此类sql语句我们需要去尽力优化,使其尽量使用Using index。那么,我们对于这类型的语句我们怎么去做优化呢?因为这一...
2024.11.22分享一下之前笔记记录的一些不同类型sql语句优化方法,针对mysql。
主要分成优化insert语句、优化ORDER BY语句、优化GROUP BY 语句、优化嵌套查询、优化OR语句这几个方面,可能写的不是很全,大家有啥好想法可以在下方留言哦。
优化insert语句当进行数据insert时,mysql客户端大致要经过的步骤如下:
1、客户端连接mysql服务器
2、客户端发送insert语句到服务器
3、服务器解析insert语句
4、服务器增加数据
5、服务器给增加的记录添加索引
6、服务器关闭连接
优化insert的常用方法:
1、如果从同一客户端插入很多行数据到mysql服务器,一次性插入多个值将大大缩短客户端与数据库服务器之间的连接和关闭等操作,如:
insert into books values (1,‘book1‘),(2,‘book2‘),(3,‘book3‘);
当从一个文本文件装载一个表时,使用LOAD DATA INFILE加载数据往往比使用很多insert语句效率至少提高20倍。
2、对于myisam类型的表,如果从不同客户端插入很多行,可使用insert DELAYED语句提升执行速度。
insert DELAYED INTO 是客户端提交数据给mysql服务器,mysql服务器返回ok状态给客户端,而这并不是将数据立即执行插入到表,而是存储在内存里面等待排队,直至mysql服务器有空闲时再插入。
3、锁定表以加速插入数据。
lock tables test write;
insert into test values (3,‘t3‘),(4,‘t4‘);
unlock tables
如果不加锁定表,每一次执行insert语句完成后,索引缓冲区都会被写到磁盘上,而加入锁定后索引缓冲区仅被写到磁盘上一次。
优化ORDER BY语句1、对ORDER BY + LIMIT 组合的索引优化,sql形式 如下:
select [column1] ... FROM [TABLE] ORDER BY [sort ] LIMIT [offset ],[LIMIT];优化:在[sort]上建立索引。
2、对WHERE + ORDER BY +LIMIT组合的索引优化,sql形式 如下:
select [column1] ... FROM [TABLE] WHERE [columnX]=[value] ORDER BY [sort ] LIMIT [offset ],[LIMIT];此时如果对[sort]添加索引,效率不是很高,可采用更高效的方法建立一个联合索引(columnX,sort)
3、不要对where和order by的选项使用表达式或者函数,sql形式如下:
select * FROM [TABLE] ORDER BY YEAR(date) LIMIT 0,30;下面几种情况不应该使用索引:
1、order by的字段混合使用asc和desc
select * from ordertable order by col1 desc ,col2 asc;2、where子句使用的字段和order by的字段不一致
select * from ordertable where col1=1 order by col2;3、对不同的关键字使用order by排序
select * from ordertable order by col1,col2;优化GROUP BY 语句使用group by语句时,mysql会对符合的结果自动排序,通过扫描整个表并创建一个新的临时表,表中每个组的所有行应为连续的,然后使用该临时表来找到组并应用累计行数。在某些情况下,mysql可以通过索引访问而不用临时表。
通过制定order by null可以禁止排序,从而节省耗损。
#没有优化
explain select id,count(data) from test group by id;#使用order by null优化
explain select id,count(data) from test group by id order by null ;优化嵌套查询mysql从4.1版本开始支持子查询,使用子查询可进行select语句的嵌套查询,即一个select查询的结果作为另一个select语句的条件。执行子查询时,mysql需要为内层查询语句的查询结果建立一个临时表,然后外层查询语句从临时表中查询记录,查询完毕后,在撤销这些临时表,因此子查询速度会受到一定影响。
在mysql中可以使用连接(JOIN)查询来替代子查询,连接查询不需要建立临时表,其速度比子查询快,如果查询中使用索引的话,性能会更好。连接之所以更有效率,是因为mysql不需要在内存中创建临时表来完成查询工作。
子查询:
explain select * from emp where dept_id not in (select id from dept);连接:
explain select * from emp left join dept on emp.dept_id=dept.id where emp.dept_id is null;优化OR语句对于使用OR条件的子查询,如果要使用索引,则OR之间的每个条件列都必须使用索引。
explain select * from ortest where data1=2 or data2=3;create index idx_data1 on ortest(data1);create index idx_data2 on ortest(data2);#创建索引后,mysql在处理包含or子查询中,是对or的各个字段在查询结果之后在进行UNION操作。
explain select * from ortest where data1=2 or data2=3;平时都是想到哪写到哪,所以可能会比较杂,大家有什么好的想法可以提一下哦,一起交流
后面会分享更多DBA方面内容,感兴趣的朋友可以关注下!
概述在使用order by时,经常出现Using filesort,所以对于此类sql语句我们需要去尽力优化,使其尽量使用Using index。那么,我们对于这类型的语句我们怎么去做优化呢?因为这一...
2024.11.22概述在数据库的开发过程中,经常会遇到复杂的业务逻辑和对数据库的操作,这个时候就会用存储过程来封装数据库操作。如果项目的存储过程较多,书写又没有一定的规范,将会影响以后的系统维护困难和大存储过程逻辑的难...
2024.11.22Mysql统计近30天的数据,无数据的填充0。 这个应该是我们在做统计分析的时候,经常遇到的一个需求。先说一般的实现方式,就是按照日期进行分组,但是这样会有一个问题,如果数据库表中有一天没有数据,那么...
2024.11.211、对查询进行优化,应尽量避免全表扫描,首先应考虑在 where 及 order by 涉及的列上建立索引。 2、应尽量避免在 where 子句中使用!=或操作符,否则将引擎放弃使用索引而进行全表扫描...
2024.11.20在日常工作中你会从哪些维度进行MySQL性能优化呢?所谓的性能优化,一般针对的是MySQL查询的优化。既然是优化查询,我们自然要先知道查询操作要经过哪些环节,然后思考可以在哪些环节进行优化。我用一张图...
2024.11.21