之前一直依赖惯了通过mysql慢查询文本日志来解决问题,这次遇到的情况是无法访问文本日志,只能在mysql客户端里鼓捣,经过一番周折之后,终于顺利解决问题,原先一个页面的首字节返回时间长达24秒,经过优化后缩短为1秒。以下记录操作步骤。
设置
首先,看一下慢查询日志有没有开:
show variables like '%slow%';
| Variable_name | Value |
|---|---|
| log_slow_admin_statements | ON |
| log_slow_slave_statements | OFF |
| slow_launch_time | 2 |
| slow_query_log | ON |
| slow_query_log_file | /home/mysql/data3001/mysql/slow_query.log |
第4行为ON,说明已经开了,如果没有开的话,就先开一下吧。
show variables like '%long%';
| Variable_name | Value |
|---|---|
| long_query_time | 1.000000 |
| performance_schema_events_stages_history_long_size | 0 |
| performance_schema_events_statements_history_long_size | 0 |
| performance_schema_events_transactions_history_long_size | 0 |
| performance_schema_events_waits_history_long_size | 0 |
第1行说明慢查询门槛值是1秒,也就是说只要任意一个查询时间超过了1秒的就会被记录,如果你觉得这个值有点太低,也可以改为5秒或者10秒,看你觉得多长时间的一个查询是不可接受的。
show variables like '%log_output%';
| Variable_name | Value |
|---|---|
| log_output | TABLE |
这里比较关键,log的输出方式是TABLE,才能把结果记录在数据库表中。
use mysql;
show tables;
| Tables_in_mysql |
|---|
| columns_priv |
| db |
| engine_cost |
| event |
| func |
| general_log |
| gtid_executed |
| help_category |
| help_keyword |
| help_relation |
| help_topic |
| innodb_index_stats |
| innodb_table_stats |
| ndb_binlog_index |
| plugin |
| proc |
| procs_priv |
| proxies_priv |
| server_cost |
| servers |
| slave_master_info |
| slave_relay_log_info |
| slave_worker_info |
| slow_log |
| tables_priv |
| time_zone |
| time_zone_leap_second |
| time_zone_name |
| time_zone_transition |
| time_zone_transition_type |
| user |
这里有一个表slow_log,它就是存储我们的慢查询日志的地方了。
desc slow_log;
| Field | Type | Null | Key | Default | Extra |
|---|---|---|---|---|---|
| start_time | timestamp(6) | NO | CURRENT_TIMESTAMP(6) | on update CURRENT_TIMESTAMP(6) | |
| user_host | mediumtext | NO | NULL | ||
| query_time | time(6) | NO | NULL | ||
| lock_time | time(6) | NO | NULL | ||
| rows_sent | int(11) | NO | NULL | ||
| rows_examined | int(11) | NO | NULL | ||
| db | varchar(512) | NO | NULL | ||
| last_insert_id | int(11) | NO | NULL | ||
| insert_id | int(11) | NO | NULL | ||
| server_id | int(10) unsigned | NO | NULL | ||
| sql_text | mediumblob | NO | NULL | ||
| thread_id | bigint(21) unsigned | NO | NULL |
分析
在slow_log表中,query_time是我们最关心的:
select query_time, rows_sent, rows_examined, db from mysql.slow_log where query_time > 10 and rows_sent < 100 limit 10;
| query_time | rows_sent | rows_examined | db |
|---|---|---|---|
| 00:00:17.187272 | 15 | 15733 | mydb |
| 00:00:18.948918 | 15 | 15733 | mydb |
| 00:00:18.901217 | 15 | 15733 | mydb |
| 00:00:18.590528 | 15 | 15733 | mydb |
| 00:00:17.173634 | 15 | 15733 | mydb |
| 00:00:13.013449 | 15 | 15733 | mydb |
| 00:00:15.114500 | 15 | 15733 | mydb |
| 00:00:19.771646 | 15 | 15733 | mydb |
| 00:00:21.683656 | 15 | 15733 | mydb |
| 00:00:22.271268 | 15 | 15733 | mydb |
可以看到有很多次查询虽然只返回15条数据,而耗时竟然长达17秒!是可忍,孰不可忍!我们先只取第1条数据看一下:
select sql_text from mysql.slow_log order by start_time desc limit 1;
结果就是这条语句:
select * from a left join b on b.parentid=a.id LEFT join d on d.memberid=b.memberid limit 0, 15;
就是这么一条简单的sql语句,怎么就会需要17秒呢?我们首先怀疑的就是有没有加索引,索引不需要在每个字段上加,但是这里的查询关系上必须有,比如a.id, b.parentid, d.memberid, b.memberid。
show index from b;
| Table | Non_unique | Key_name | Seq_in_index | Column_name | Collation | Cardinality | Sub_part | Packed | Null | Index_type | Comment | Index_comment |
|---|---|---|---|---|---|---|---|---|---|---|---|---|
| b | 0 | PRIMARY | 1 | id | A | 6714 | NULL | NULL | BTREE |
不出所料,果然只在主键上加了索引,而关键的parentid没有索引。
添加索引
alter table b add index b_parent (parentid);
再次查看索引:
show index from b;
| Table | Non_unique | Key_name | Seq_in_index | Column_name | Collation | Cardinality | Sub_part | Packed | Null | Index_type | Comment | Index_comment |
|---|---|---|---|---|---|---|---|---|---|---|---|---|
| b | 0 | PRIMARY | 1 | id | A | 6714 | NULL | NULL | BTREE | |||
| b | 1 | b_parent | 1 | parentid | A | 6593 | NULL | NULL | YES | BTREE |
依此类推,把我们所有缺索引的地方统统都加上索引,再次查询,时间缩短到1秒以内,收工!