美文网首页
记一次sql优化

记一次sql优化

作者: 0d1b415a365b | 来源:发表于2019-03-15 11:28 被阅读0次

DDL

CREATE TABLE `sys_user_feedback` (
  `id` int(11) NOT NULL AUTO_INCREMENT,
  ...
  `feedback_time` datetime DEFAULT NULL COMMENT '表示反馈时间',
  ...
  PRIMARY KEY (`id`),
  KEY `feedback_time` (`feedback_time`),
  ...
) ENGINE=InnoDB AUTO_INCREMENT=8063893 DEFAULT CHARSET=utf8mb4 COLLATE=utf8mb4_bin COMMENT='用户举报表' |

SQL

select *
    from sys_user_feedback as suf
     where
      ...
          and suf.feedback_time >= '2019-03-13'
          and suf.feedback_time < '2019-03-14'  
    order by suf.id desc
    limit 0,50
  • mysql服务器突然负载飙升,DBA同学找出上面的问题sql,大量卡在sending data

Explain

+----+-------------+-------+-------+---------------+---------+---------+------+------+-------------+
| id | select_type | table | type  | possible_keys | key     | key_len | ref  | rows | Extra       |
+----+-------------+-------+-------+---------------+---------+---------+------+------+-------------+
|  1 | SIMPLE      | suf   | index | feedback_time | PRIMARY | 4       | NULL | 6422 | Using where |
+----+-------------+-------+-------+---------------+---------+---------+------+------+-------------+
  • explain发现没有feedback_time索引,走了主键索引,扫描类型为index,仅优于all全表扫描,尝试改进

优化SQL

select *
    from sys_user_feedback as suf
     where
     ...
          and suf.feedback_time >= '2019-03-13'
          and suf.feedback_time < '2019-03-14'  
    order by suf.feedback_time desc
    limit 0,50

Explain

+----+-------------+-------+-------+---------------+---------------+---------+------+-------+-------------+
| id | select_type | table | type  | possible_keys | key           | key_len | ref  | rows  | Extra       |
+----+-------------+-------+-------+---------------+---------------+---------+------+-------+-------------+
|  1 | SIMPLE      | suf   | range | feedback_time | feedback_time | 9       | NULL | 60606 | Using where |
+----+-------------+-------+-------+---------------+---------------+---------+------+-------+-------------+
  • 优化后走了feedback_time索引,索引类型变为range,在where查询出的子集中扫描,奇怪的是rows反而变多

验证

  • 问题sql查询完全卡住,怕影响服务,强行终止
  • 优化后的sql,50 rows in set (0.01 sec)

分析

由两次explain可以看出,id没出现在where子句中,所以根据id列进行排序时会使用id索引,相当于全表扫描(千万级别),取够50条为止。 优化后在where查询出的集合中扫描(6万),所以要避免排序索引字段不在查询条件中。
奇怪的是为什么explain出来的rows和结果相反???

再补一个

取值少的字段加上索引反而拖慢查询速度的例子:

DDL
CREATE TABLE `some_table` (
  `id` bigint(20) NOT NULL AUTO_INCREMENT,
  `company_id` int(11) NOT NULL COMMENT '所属公司ID',
  `type` enum('t1','t2','t3','t4') NOT NULL,
  PRIMARY KEY (`id`),
  KEY `company_id` (`company_id`),
  KEY `type` (`type`)
);
SQL
select * from some_table where company_id=1 and type="t1";
Explain
+------+-------------+---------------------------+-------------+-----------------+-----------------+---------+------+------+-----------------------------------------------+
| id   | select_type | table                     | type        | possible_keys   | key             | key_len | ref  | rows | Extra                                         |
+------+-------------+---------------------------+-------------+-----------------+-----------------+---------+------+------+-----------------------------------------------+
|    1 | SIMPLE      | some_table                | index_merge | company_id,type | company_id,type | 4,1     | NULL | 2689 | Using intersect(company_id,type); Using where |
+------+-------------+---------------------------+-------------+-----------------+-----------------+---------+------+------+-----------------------------------------------+

可以看到,这个 sql 走了交叉索引,会使用 company_id 和 type 两个索引的搜索结果求交集。很明显,type取值就4种,能过滤掉的结果也就很少了,所以 type 索引的结果集会比较大,在这个字段加索引反而起到了副作用。

优化
select * from some_table where company_id=1 and type like "t1";

不走 type 索引,当然允许改表结构的情况下,删掉索引是最好的。优化后,sql执行时间从0.5s降至0

SQL性能优化的目标

至少要达到 range级别,要求是ref级别,如果可以是consts最好。

说明:

1)consts单表中最多只有一个匹配行(主键或者唯一索引),在优化阶段即可读取到数据。

2)ref指的是使用普通的索引(normal index)。

3)range对索引进行范围检索。

相关文章

  • SQL优化分享

    SQL优化分享 最近公司部门内部进行了一次分享,是总工给我们进行的一次关于SQL优化的内容。相信关于SQL的优化也...

  • 记一次SQL优化

    同事反应一个接口很慢,查询了一下,接口返回基本都在6秒以上,是有点慢了。一步步排除~~一、访问其他接口都是正常,首...

  • 记一次sql优化

    最近为公司写后台程序,就是数据库检索,其实就是拼sql,在测试环境运行没问题,线上却没有数据显示,最后发现是sql...

  • 记一次sql优化

    今天做系统性能优化时,注意到一个请求响应时间竟然达到了7秒,排查发现是后台一个比较复杂的sql语句造成的,虽然这个...

  • 记一次sql优化

    DDL SQL mysql服务器突然负载飙升,DBA同学找出上面的问题sql,大量卡在sending data E...

  • 常用sql优化2019-09-27

    sql优化 sql优化.................................................

  • mysql数据库优化

    1. Mysql优化介绍 1.1 sql优化 a. sql优化分析b. 索引优化c. 常用sql优化d. 常用优化...

  • 记一次sql优化实践

    当业务数据量较大时,有时sql查询会变慢,影响数据的展示和用户体验,所以我们在编写sql时要尽量考虑到数据量较大的...

  • 记一次Sql性能优化

    场景预设 现有 A B 两个表 A 代表具体业务表 B 中间表, 需要将B表的数据插入到A表插入前 需要进行重复性...

  • Mysql 优化

    1.Sql优化 1)sql优化分析2)索引优化3)sql语句优化4)一些常用的技巧优化 (正则、函数) 2.优化数...

网友评论

      本文标题:记一次sql优化

      本文链接:https://www.haomeiwen.com/subject/nrklmqtx.html