返回顶部
首页 > 资讯 > 数据库 >开发中那些常用的MySQL优化有哪些
  • 412
分享到

开发中那些常用的MySQL优化有哪些

2024-04-02 19:04:59 412人浏览 独家记忆
摘要

本篇文章给大家分享的是有关开发中那些常用的Mysql优化有哪些,小编觉得挺实用的,因此分享给大家学习,希望大家阅读完这篇文章后可以有所收获,话不多说,跟着小编一起来看看吧。 1、大批量插入数据优化

本篇文章给大家分享的是有关开发中那些常用的Mysql优化有哪些,小编觉得挺实用的,因此分享给大家学习,希望大家阅读完这篇文章后可以有所收获,话不多说,跟着小编一起来看看吧。

 1、大批量插入数据优化

(1)对于MyISAM存储引擎的表,可以使用:DISABLE KEYS 和 ENABLE KEYS 用来打开或者关闭 MyISAM 表非唯一索引的更新。

ALTER TABLE tbl_name DISABLE KEYS;  loading the data  ALTER TABLE tbl_name ENABLE KEYS;

(2)对于InnoDB引擎,有以下几种优化措施:

① 导入的数据按照主键的顺序保存:这是因为InnoDB引擎表示按照主键顺序保存的,如果能将插入的数据提前按照排序好自然能省去很多时间。

比如bulk_insert.txt文件是以表user主键的顺序存储的,导入的时间为15.23秒

mysql> load data infile 'mysql/bulk_insert.txt' into table user;  Query OK, 126732 rows affected (15.23 sec)  Records: 126732 Deleted: 0 Skipped: 0 Warnings: 0

没有按照主键排序的话,时间为:26.54秒

mysql> load data infile 'mysql/bulk_insert.txt' into table user;  Query OK, 126732 rows affected (26.54 sec)  Records: 126732 Deleted: 0 Skipped: 0 Warnings: 0

② 导入数据前执行SET UNIQUE_CHECKS=0,关闭唯一性校验,带导入之后再打开设置为1:校验会消耗时间,在数据量大的情况下需要考虑。

③ 导入前设置SET AUTOCOMMIT=0,关闭自动提交,导入后结束再设置为1:这是因为自动提交会消耗部分时间与资源,虽然消耗不是很大,但是在数据量大的情况下还是得考虑。

2、INSERT的优化

(1)尽量使用多个值表的 INSERT 语句,这种方式将大大缩减客户端与数据库之间的连接、关闭等消耗。(同一客户的情况下),即:

INSERT INTO tablename values(1,2),(1,3),(1,4)

实验:插入8条数据到user表中(使用navicat客户端工具

insert into user values(1,'test',replace(uuid(),'-',''));  insert into user values(2,'test',replace(uuid(),'-',''));  insert into user values(3,'test',replace(uuid(),'-',''));  insert into user values(4,'test',replace(uuid(),'-',''));  insert into user values(5,'test',replace(uuid(),'-',''));  insert into user values(6,'test',replace(uuid(),'-',''));  insert into user values(7,'test',replace(uuid(),'-','')); insert into user values(8,'test',replace(uuid(),'-',''));

得到反馈:

[SQL] insert into user values(1,'test',replace(uuid(),'-',''));  受影响的行: 1  时间: 0.033s  [SQL]   insert into user values(2,'test',replace(uuid(),'-',''));  受影响的行: 1  时间: 0.034s  [SQL]   insert into user values(3,'test',replace(uuid(),'-',''));  受影响的行: 1  时间: 0.056s  [SQL]   insert into user values(4,'test',replace(uuid(),'-',''));  受影响的行: 1  时间: 0.008s  [SQL]   insert into user values(5,'test',replace(uuid(),'-',''));  受影响的行: 1  时间: 0.008s  [SQL]   insert into user values(6,'test',replace(uuid(),'-',''));  受影响的行: 1  时间: 0.024s  [SQL]   insert into user values(7,'test',replace(uuid(),'-',''));  受影响的行: 1  时间: 0.004s  [SQL]   insert into user values(8,'test',replace(uuid(),'-',''));  受影响的行: 1  时间: 0.004s

总共的时间为0.171秒,接下来使用多值表形式:

insert into user values  (9,'test',replace(uuid(),'-','')),  (10,'test',replace(uuid(),'-','')),  (11,'test',replace(uuid(),'-','')),  (12,'test',replace(uuid(),'-','')),  (13,'test',replace(uuid(),'-','')),  (14,'test',replace(uuid(),'-','')),  (15,'test',replace(uuid(),'-','')),  (16,'test',replace(uuid(),'-',''));

得到反馈:

[SQL] insert into user values  (9,'test',replace(uuid(),'-','')),  (10,'test',replace(uuid(),'-','')),  (11,'test',replace(uuid(),'-','')),  (12,'test',replace(uuid(),'-','')),  (13,'test',replace(uuid(),'-','')),  (14,'test',replace(uuid(),'-','')),  (15,'test',replace(uuid(),'-','')),  (16,'test',replace(uuid(),'-',''));  受影响的行: 8  时间: 0.038s

得到时间为0.038,这样一来可以很明显节约时间优化SQL

(2)如果在不同客户端插入很多行,可使用INSERT DELAYED语句得到更高的速度,DELLAYED含义是让INSERT语句马上执行,其实数据都被放在内存的队列中。并没有真正写入磁盘。LOW_PRioRITY刚好相反。

(3)将索引文件和数据文件分在不同的磁盘上存放(InnoDB引擎是在同一个表空间的)。

(4)如果批量插入,则可以增加bluk_insert_buffer_size变量值提供速度(只对MyISAM有用)

(5)当从一个文本文件装载一个表时,使用LOAD DATA INFILE,通常比INSERT语句快20倍。

3、GROUP BY的优化

在默认情况下,MySQL中的GROUP BY语句会对其后出现的字段进行默认排序(非主键情况),就好比我们使用ORDER BY col1,col2,col3…所以我们在后面跟上具有相同列(与GROUP BY后出现的col1,col2,col3…相同)ORDER BY子句并没有影响该SQL的实际执行性能。

那么就会有这样的情况出现,我们对查询到的结果是否已经排序不在乎时,可以使用ORDER BY NULL禁止排序达到优化目的。下面使用EXPLaiN命令分析SQL。Java知音公众号内回复“面试题聚合”,送你一份面试题宝典

在user_1中执行select id, sum(money) fORM user_1 group by name时,会默认排序(注意group by后的column是非index才会体现group by的排序,如果是primary key,那之前说过了InnoDB默认是按照主键index排好序的)

mysql> select*from user_1;  +----+----------+-------+  | id | name     | money |  +----+----------+-------+  |  1 | Zhangsan |    32 |  |  2 | Lisi     |    65 |  |  3 | Wangwu   |    44 |  |  4 | Lijian   |   100 |  +----+----------+-------+  4 rows in set

不禁止排序,即不使用ORDER BY NULL时:有明显的Using filesort。

开发中那些常用的MySQL优化有哪些

当使用ORDER BY NULL禁止排序后,Using filesort不存在

开发中那些常用的MySQL优化有哪些

4、ORDER BY 的优化

MySQL可以使用一个索引来满足ORDER BY 子句的排序,而不需要额外的排序,但是需要满足以下几个条件:

(1)WHERE 条件和OREDR BY 使用相同的索引:即key_part1与key_part2是复合索引,where中使用复合索引中的key_part1

SELECT*FROM user WHERE key_part1=1 ORDER BY key_part1 DESC, key_part2 DESC;

(2)而且ORDER BY顺序和索引顺序相同:

SELECT*FROM user ORDER BY key_part1, key_part2;

(3)并且要么都是升序要么都是降序:

SELECT*FROM user ORDER BY key_part1 DESC, key_part2 DESC;

但以下几种情况则不使用索引:

(1)ORDER BY中混合ASC和DESC:

SELECT*FROM user ORDER BY key_part1 DESC, key_part2 ASC;

(2)查询行的关键字与ORDER BY所使用的不相同,即WHERE 后的字段与ORDER BY 后的字段是不一样的

SELECT*FROM user WHERE key2 = ‘xxx’ ORDER BY key1;

(3)ORDER BY对不同的关键字使用,即ORDER BY后的关键字不相同

SELECT*FROM user ORDER BY key1, key2;

5、OR的优化

当MySQL使用OR查询时,如果要利用索引的话,必须每个条件列都使独立索引,而不是复合索引(多列索引),才能保证使用到查询的时候使用到索引。

比如我们新建一张用户信息表user_info

mysql> select*from user_info;  +---------+--------+----------+-----------+  | user_id | idcard | name     | address    |  +---------+--------+----------+-----------+  |       1 | 111111 | Zhangsan | Kunming   |  |       2 | 222222 | Lisi     | Beijing   |  |       3 | 333333 | Wangwu   | Shanghai  |  |       4 | 444444 | Lijian   | Guangzhou |  +---------+--------+----------+-----------+  4 rows in set

之后创建ind_name_id(user_id, name)复合索引、id_index(id_index)独立索引,idcard主键索引三个索引。

mysql> show index from user_info;  +-----------+------------+-------------+--------------+-------------+-----------+-------------+----------+--------+------+------------+---------+---------------+ | Table     | Non_unique | Key_name    | Seq_in_index | Column_name | Collation | Cardinality | Sub_part | Packed | Null | Index_type | Comment | Index_comment | +-----------+------------+-------------+--------------+-------------+-----------+-------------+----------+--------+------+------------+---------+---------------+ | user_info |          0 | PRIMARY     |            1 | idcard      | A         |           4 | NULL     | NULL   |      | BTREE      |         |               | | user_info |          1 | ind_name_id |            1 | user_id     | A         |           4 | NULL     | NULL   |      | BTREE      |         |               | | user_info |          1 | ind_name_id |            2 | name        | A         |           4 | NULL     | NULL   | YES  | BTREE      |         |               | | user_info |          1 | id_index    |            1 | user_id     | A         |           4 | NULL     | NULL   |      | BTREE      |         |               | +-----------+------------+-------------+--------------+-------------+-----------+-------------+----------+--------+------+------------+---------+---------------+ 4 rows in set

测试一:OR连接两个有单独索引的字段,整个SQL查询才会用到索引(index_merge),并且我们知道OR实际上是把每个结果最后UNION一起的。

mysql> explain select*from user_info where user_id=1 or idcard='222222';  +----+-------------+-----------+------------+-------------+------------------------------+---------------------+---------+------+------+----------+----------------------------------------------------+ | id | select_type | table     | partitions | type        | possible_keys                | key                 | key_len | ref  | rows | filtered | Extra                                              | +----+-------------+-----------+------------+-------------+------------------------------+---------------------+---------+------+------+----------+----------------------------------------------------+ |  1 | SIMPLE      | user_info | NULL       | index_merge | PRIMARY,ind_name_id,id_index | ind_name_id,PRIMARY | 4,62    | NULL |    2 |      100 | Using sort_union(ind_name_id,PRIMARY); Using where | +----+-------------+-----------+------------+-------------+------------------------------+---------------------+---------+------+------+----------+----------------------------------------------------+ 1 row in set

测试二:OR使用复合索引的字段name,与没有索引的address,整个SQL都是ALL全表扫描的

mysql> explain select*from user_info where name='Zhangsan' or address='Beijing';  +----+-------------+-----------+------------+------+---------------+------+---------+------+------+----------+-------------+  | id | select_type | table     | partitions | type | possible_keys | key  | key_len | ref  | rows | filtered | Extra       |  +----+-------------+-----------+------------+------+---------------+------+---------+------+------+----------+-------------+  |  1 | SIMPLE      | user_info | NULL       | ALL  | NULL          | NULL | NULL    | NULL |    4 |    43.75 | Using where |  +----+-------------+-----------+------------+------+---------------+------+---------+------+------+----------+-------------+  1 row in set

交换OR位置并且使用另外的复合索引的列,也是ALL全表扫描:

mysql> explain select*from user_info where address='Beijing' or user_id=1;  +----+-------------+-----------+------------+------+----------------------+------+---------+------+------+----------+-------------+  | id | select_type | table     | partitions | type | possible_keys        | key  | key_len | ref  | rows | filtered | Extra       |  +----+-------------+-----------+------------+------+----------------------+------+---------+------+------+----------+-------------+ |  1 | SIMPLE      | user_info | NULL       | ALL  | ind_name_id,id_index | NULL | NULL    | NULL |    4 |    43.75 | Using where |  +----+-------------+-----------+------------+------+----------------------+------+---------+------+------+----------+-------------+  1 row in set

6、优化嵌套查询

使用嵌套查询有时候可以使用更有效的JOIN连接代替,这是因为MySQL中不需要在内存中创建临时表完成SELECT子查询与主查询两部分查询工作。但是并不是所有的时候都成立,最好是在on关键字后面的列有索引的话,效果会更好!

比如在表major中major_id是有索引的:

select * from student u left join major m on u.major_id=m.major_id where m.major_id is null;

而通过嵌套查询时,在内存中创建临时表完成SELECT子查询与主查询两部分查询工作,会有一定的消耗

select * from student u where major_id not in (select major_id from major);

7、使用SQL提示

SQL提示(SQL HINT)是优化数据库的一个重要手段,就是往SQL语句中加入一些人为的提示来达到优化目的。下面是一些常用的SQL提示:

(1)USE INDEX:使用USE INDEX是希望MySQL去参考索引列表,就可以让MySQL不需要考虑其他可用索引,其实也就是possible_keys属性下参考的索引值

mysql> explain select* from user_info use index(id_index,ind_name_id) where user_id>0;  +----+-------------+-----------+------------+------+----------------------+------+---------+------+------+----------+-------------+  | id | select_type | table     | partitions | type | possible_keys        | key  | key_len | ref  | rows | filtered | Extra       |  +----+-------------+-----------+------------+------+----------------------+------+---------+------+------+----------+-------------+  |  1 | SIMPLE      | user_info | NULL       | ALL  | ind_name_id,id_index | NULL | NULL    | NULL |    4 |      100 | Using where |  +----+-------------+-----------+------------+------+----------------------+------+---------+------+------+----------+-------------+  1 row in set  mysql> explain select* from user_info use index(id_index) where user_id>0;  +----+-------------+-----------+------------+------+---------------+------+---------+------+------+----------+-------------+  | id | select_type | table     | partitions | type | possible_keys | key  | key_len | ref  | rows | filtered | Extra       |  +----+-------------+-----------+------------+------+---------------+------+---------+------+------+----------+-------------+  |  1 | SIMPLE      | user_info | NULL       | ALL  | id_index      | NULL | NULL    | NULL |    4 |      100 | Using where |  +----+-------------+-----------+------------+------+---------------+------+---------+------+------+----------+-------------+  1 row in set

(2)IGNORE INDEX忽略索引

我们使用user_id判断,用不到其他索引时,可以忽略索引。即与USE INDEX相反,从possible_keys中减去不需要的索引,但是实际环境中很少使用。

mysql> explain select* from user_info ignore index(primary,ind_name_id,id_index) where user_id>0;  +----+-------------+-----------+------------+------+---------------+------+---------+------+------+----------+-------------+  | id | select_type | table     | partitions | type | possible_keys | key  | key_len | ref  | rows | filtered | Extra       |  +----+-------------+-----------+------------+------+---------------+------+---------+------+------+----------+-------------+  |  1 | SIMPLE      | user_info | NULL       | ALL  | NULL          | NULL | NULL    | NULL |    4 |    33.33 | Using where |  +----+-------------+-----------+------------+------+---------------+------+---------+------+------+----------+-------------+  1 row in set

(3)FORCE INDEX强制索引

比如where user_id > 0,但是user_id在表中都是大于0的,自然就会进行ALL全表搜索,但是使用FORCE INDEX虽然执行效率不是最高(where user_id > 0条件决定的)但MySQL还是使用索引。

mysql> explain select* from user_info where user_id>0;  +----+-------------+-----------+------------+------+----------------------+------+---------+------+------+----------+-------------+  | id | select_type | table     | partitions | type | possible_keys        | key  | key_len | ref  | rows | filtered | Extra       |  +----+-------------+-----------+------------+------+----------------------+------+---------+------+------+----------+-------------+  |  1 | SIMPLE      | user_info | NULL       | ALL  | ind_name_id,id_index | NULL | NULL    | NULL |    4 |      100 | Using where |  +----+-------------+-----------+------------+------+----------------------+------+---------+------+------+----------+-------------+  1 row in set

之后强制使用独立索引id_index(user_id):

mysql> explain select* from user_info force index(id_index) where user_id>0;  +----+-------------+-----------+------------+-------+---------------+----------+---------+------+------+----------+-----------------------+  | id | select_type | table     | partitions | type  | possible_keys | key      | key_len | ref  | rows | filtered | Extra                 |  +----+-------------+-----------+------------+-------+---------------+----------+---------+------+------+----------+-----------------------+  |  1 | SIMPLE      | user_info | NULL       | range | id_index      | id_index | 4       | NULL |    4 |      100 | Using index condition |  +----+-------------+-----------+------------+-------+---------------+----------+---------+------+------+----------+-----------------------+  1 row in set

很多时候数据库的性能是由于不合适(是指效率不高,可能会导致表等)的SQL语句造成,其中有些优化在真正开发中是用不到的,但是一旦出问题性能下降的时候需要去一一分析。

以上就是开发中那些常用的MySQL优化有哪些,小编相信有部分知识点可能是我们日常工作会见到或用到的。希望你能通过这篇文章学到更多知识。更多详情敬请关注编程网数据库频道。

您可能感兴趣的文档:

--结束END--

本文标题: 开发中那些常用的MySQL优化有哪些

本文链接: https://lsjlt.com/news/68637.html(转载时请注明来源链接)

有问题或投稿请发送至: 邮箱/279061341@qq.com    QQ/279061341

猜你喜欢
  • 开发中那些常用的MySQL优化有哪些
    本篇文章给大家分享的是有关开发中那些常用的MySQL优化有哪些,小编觉得挺实用的,因此分享给大家学习,希望大家阅读完这篇文章后可以有所收获,话不多说,跟着小编一起来看看吧。 1、大批量插入数据优化...
    99+
    2024-04-02
  • 有哪些常用的MySQL优化方法
    下面讲讲关于有哪些常用的MySQL优化方法,文字的奥妙在于贴近主题相关。所以,闲话就不谈了,我们直接看下文吧,相信看完有哪些常用的MySQL优化方法这篇文章你一定会有所受益。    &n...
    99+
    2024-04-02
  • 实用的MySQL常用优化方法有哪些
    本篇内容主要讲解“实用的MySQL常用优化方法有哪些”,感兴趣的朋友不妨来看看。本文介绍的方法操作简单快捷,实用性强。下面就让小编来带大家学习“实用的MySQL常用优化方法有哪些”吧!当MySQL单表记录数...
    99+
    2024-04-02
  • mysql常见的优化类型有哪些
    这篇文章主要介绍“mysql常见的优化类型有哪些”,在日常操作中,相信很多人在mysql常见的优化类型有哪些问题上存在疑惑,小编查阅了各式资料,整理出简单好用的操作方法,希望对大家解答”mysql常见的优化类型有哪些”的疑惑有所帮助!接下来...
    99+
    2023-06-20
  • Android开发优化的技巧有哪些
    Android开发的优化技巧有很多,以下是一些常见的优化技巧: 减少内存使用:避免使用过多的内存,可以使用对象池、缓存和适当的内存...
    99+
    2023-10-24
    Android
  • mysql优化通常使用的方法有哪些
    这期内容当中小编将会给大家带来有关mysql优化通常使用的方法有哪些,文章内容丰富且以专业的角度为大家分析和叙述,阅读完这篇文章希望大家可以有所收获。分享一下常见的几种MySQL数据优化方式。。。。。。。选...
    99+
    2024-04-02
  • MySql常用查询优化策略有哪些
    本篇内容介绍了“MySql常用查询优化策略有哪些”的有关知识,在实际案例的操作过程中,不少人都会遇到这样的困境,接下来就让小编带领大家学习一下如何处理这些情况吧!希望大家仔细阅读,能够学有所成!查询优化可以...
    99+
    2022-12-02
    mysql
  • Torch中常用的优化算法有哪些
    在Torch中常用的优化算法包括: 随机梯度下降(SGD) Adam优化算法 Adagrad优化算法 RMSprop优化算法 Ad...
    99+
    2024-03-14
    Torch
  • 优化Vue开发中的性能技巧有哪些
    这篇文章主要介绍了优化Vue开发中的性能技巧有哪些的相关知识,内容详细易懂,操作简单快捷,具有一定借鉴价值,相信大家阅读完这篇优化Vue开发中的性能技巧有哪些文章都会有所收获,下面我们一起来看看吧。1. 长列表性能优化1. 不做响应式比如会...
    99+
    2023-06-29
  • Vue开发中的性能优化技巧有哪些
    这篇文章将为大家详细讲解有关Vue开发中的性能优化技巧有哪些,小编觉得挺实用的,因此分享给大家做个参考,希望大家阅读完这篇文章后可以有所收获。1. 长列表性能优化1. 不做响应式比如会员列表、商品列表之类的,只是纯粹的数据展示,不会有任何动...
    99+
    2023-06-29
  • tomcat的常见优化有哪些
    这篇文章主要为大家展示了“tomcat的常见优化有哪些”,内容简而易懂,条理清晰,希望能够帮助大家解决疑惑,下面让小编带领大家一起研究并学习一下“tomcat的常见优化有哪些”这篇文章吧。Tomcat连接器协议优化Tomcat 连接器的三种...
    99+
    2023-06-03
  • Django开发中常用的命令有哪些
    这篇文章主要介绍Django开发中常用的命令有哪些,文中介绍的非常详细,具有一定的参考价值,感兴趣的小伙伴们一定要看完! 1. 创建一个Django Project#使用下面的命令可以创建一个pr...
    99+
    2024-04-02
  • JAVA开发中常用的工具有哪些
    本文小编为大家详细介绍“JAVA开发中常用的工具有哪些”,内容详细,步骤清晰,细节处理妥当,希望这篇“JAVA开发中常用的工具有哪些”文章能帮助大家解决疑惑,下面跟着小编的思路慢慢深入,一起来学习新知识吧。...
    99+
    2024-04-02
  • Nodejs开发中常用的模块有哪些
    这篇文章主要介绍Nodejs开发中常用的模块有哪些,文中介绍的非常详细,具有一定的参考价值,感兴趣的小伙伴们一定要看完!MVC框架 - ExpressExpress 是轻量灵活的Nodejs Web应用框架,它可以快速地搭建网站。Expre...
    99+
    2023-06-14
  • sql优化常用的方法有哪些
    SQL优化常用的方法有以下几种:1. 使用索引:索引可以加快查询的速度,可以在查询中使用WHERE子句中的字段创建索引。2....
    99+
    2023-08-23
    sql
  • MySQL中有哪些优化策略
    MySQL中有哪些优化策略,很多新手对此不是很清楚,为了帮助大家解决这个难题,下面小编将为大家详细讲解,有这方面需求的人可以来学习下,希望你能有所收获。单表优化除非单表数据未来会一直不断上涨,否则不要一开始...
    99+
    2024-04-02
  • mysql中有哪些优化方法
    mysql中有哪些优化方法?针对这个问题,这篇文章详细介绍了相对应的分析和解答,希望可以帮助更多想解决这个问题的小伙伴找到更简单易行的方法。1、sql优化分解关联查询:将关联(join)放在应用中处理,执行简单的sql,好处是:分解后的sq...
    99+
    2023-06-15
  • Android开发中常用布局有哪些
    Android开发中常用布局有哪些,很多新手对此不是很清楚,为了帮助大家解决这个难题,下面小编将为大家详细讲解,有这方面需求的人可以来学习下,希望你能有所收获。一、简介如下图所示,按照界面编写的方式,可以分为传统布局和新型布局两种。imag...
    99+
    2023-06-04
  • Tomcat常用优化配置有哪些
    这篇文章主要为大家展示了“Tomcat常用优化配置有哪些”,内容简而易懂,条理清晰,希望能够帮助大家解决疑惑,下面让小编带领大家一起研究并学习一下“Tomcat常用优化配置有哪些”这篇文章吧。精简Tomcat和配置文件1 .删除不需要的管理...
    99+
    2023-06-03
  • android开发性能优化的方法有哪些
    Android开发性能优化的方法有以下几种:1.减少内存使用:通过使用轻量级数据结构、避免创建不必要的对象、及时释放无用的资源等方式...
    99+
    2023-09-13
    android
软考高级职称资格查询
编程网,编程工程师的家园,是目前国内优秀的开源技术社区之一,形成了由开源软件库、代码分享、资讯、协作翻译、讨论区和博客等几大频道内容,为IT开发者提供了一个发现、使用、并交流开源技术的平台。
  • 官方手机版

  • 微信公众号

  • 商务合作