• 技术文章 >数据库 >mysql教程

    mysql慢查询日志分析

    2016-06-07 17:52:32原创446

    大访问量的情况下,可添加节点或改变架构可有效的缓解数据库压力,不过一切的原点,都是从单台mysql开始的。下面总结一些使用过或者研究过的经验,从配置以及调节索引的方面入手,对mysql进行一些优化。


    第一步应该做的就是排查问题,找出瓶颈,所以,先从日志入手
    开启慢查询日志

    mysql>show variables like "%slow%";

    查看慢查询配置,没有则在my.cnf中添加,如下
    log-slow-queries = /data/mysqldata/slowquery.log #日志目录
    long_query_time = 1 #记录下查询时间查过1秒
    log-queries-not-using-indexes #表示记录下没有使用索引的查询

    分析日志 – mysqldumpslow
    分析日志,可用mysql提供的mysqldumpslow,使用很简单,参数可–help查看
    # -s:排序方式。c , t , l , r 表示记录次数、时间、查询时间的多少、返回的记录数排序;
    # ac , at , al , ar 表示相应的倒叙;
    # -t:返回前面多少条的数据;
    # -g:包含什么,大小写不敏感的;

    使用实例:

    mysqldumpslow -s r -t 10 /slowquery.log #slow记录最多的10个语句
    mysqldumpslow -s t -t 10 -g "left join" /slowquery.log #按照时间排序前10中含有"left join"的
    mysql日志分析工具–mysqlsla
    mysqlsla下载安装:


    wget http://hackmysql.com/scripts/mysqlsla-2.03.tar.gz
    tar zvxf mysqlsla-2.03.tar.gz
    cd mysqlsla-2.03
    perl Makefile.PL
    make
    make install
    mysqlsla /data/mysqldata/slow.log
    使用实例:

    mysqlsla /data/mysqldata/slow.log
    # mysqlsla会自动判断日志类型,为了方便可以建立一个配置文件”~/.mysqlsla”
    # 在文件里写上:top=100,这样会打印出前100条结果。

    mysqlsla命令参数说明:
    hackmysql.com推出的一款MySQL的日志分析工具

    mysql

    有一个功能就是可以log下来运行的比较慢的sql语句,默认是没有这个log的,为了开启这个功能,要修改my.cnf或者在mysql 启动的时候加入一些参数。
    如果在my.cnf里面修改,需增加如下几行
    long_query_time = 10
    log-slow-queries =

    long_query_time 是指执行超过多久的sql会被log下来,这里是10秒。
    log-slow-queries 设置把日志 写在那里,为空的时候,系统会给慢查询 日志赋予主机名,并被附加slow.log 如果设置了参数log-long-format,那么所有没有使用索引的查询也将被记录。在文件my.cnf或my.ini中加入下面这一行可以记录这些查询 这是一个有用的日志。它对于性能的影响不大(假设所有查询都很快),并且强调了那些最需要注意的查询(丢失了索引或索引没有得到最佳应用)
    # Time: 070927 8:08:52 # User@Host: root[root] @ [192.168.0.20] # Query_time: 372 Lock_time: 136 Rows_sent: 152 Rows_examined: 263630
    select id, name from manager where id in (66,10135);
    这是慢查询 日志中的一条,用了372秒,锁了136秒,返回152行,一共查了263630行


    如果日志内容很多,用眼睛一条一条去看会累死,mysql 自带了分析的工具,使用方法如下:
    命令行下,进入mysql /bin 目录,输入mysqldumpslow –help 或--help 可以看到这个工具的参数,主要有
    Usage: mysqldumpslow [ OPTS... ] [ LOGS... ]
    Parse and summarize the MySQL slow query log. Options are
    --verbose verbose
    --debug debug
    --help write this text to standard output
    -v verbose
    -d debug
    -s ORDER what to sort by (t, at, l, al, r, ar etc), 'at' is default
    -r reverse the sort order (largest last instead of first)
    -t NUM just show the top n queries
    -a don't abstract all numbers to N and strings to 'S'
    -n NUM abstract numbers with at least n digits within names
    -g PATTERN grep: only consider stmts that include this string
    -h HOSTNAME hostname of db server for *-slow.log filename (can be wildcard),
    default is '*', i.e. match all
    -i NAME name of server instance (if using mysql .server startup scrīpt)
    -l don't subtract lock time from total time

    -s ,是order 的顺序,说明写的不够详细,俺用下来,包括看了代码,主要有
    c,t,l,r 和ac,at,al,ar ,分别是按照query 次数,时间,lock 的时间和返回的记录数来排序,前面加了a 的时倒叙
    -t ,是top n 的意思,即为返回前面多少条的数据
    -g ,后边可以写一个正则匹配模式,大小写不敏感的

    mysqldumpslow -s c -t 20 host-slow.log
    mysqldumpslow -s r -t 20 host-slow.log

    上述命令可以看出访问次数最多的20 个sql 语句和返回记录集最多的20 个sql 。
    mysqldumpslow -t 10 -s t -g “left join” host-slow.log
    这个是按照时间返回前10 条里面含有左连接的sql 语句

    整体来说, 功能非常强大. 数据报表,非常有利于分析慢查询的原因, 包括执行频率, 数据量, 查询消耗等.
    格式说明如下:
    总查询次数 (queries total), 去重后的sql数量 (unique)
    输出报表的内容排序(sorted by)
    最重大的慢sql统计信息, 包括 平均执行时间, 等待锁时间, 结果行的总数, 扫描的行总数.
    Count, sql的执行次数及占总的slow log数量的百分比.
    Time, 执行时间, 包括总时间, 平均时间, 最小, 最大时间, 时间占到总慢sql时间的百分比.
    95% of Time, 去除最快和最慢的sql, 覆盖率占95%的sql的执行时间.
    Lock Time, 等待锁的时间.
    95% of Lock , 95%的慢sql等待锁时间.
    Rows sent, 结果行统计数量, 包括平均, 最小, 最大数量.
    Rows examined, 扫描的行数量.
    Database, 属于哪个数据库
    Users, 哪个用户,IP, 占到所有用户执行的sql百分比
    Query abstract, 抽象后的sql语句
    Query sample, sql语句
    除了以上的输出, 官方还提供了很多定制化参数, 是一款不可多得的好工具.

    php入门到就业线上直播课:查看学习

    声明:本文内容由网友自发贡献,版权归原作者所有,本站不承担相应法律责任。如您发现有涉嫌抄袭侵权的内容,请联系admin@php.cn核实处理。

    千万级数据并发解决方案(理论+实战):点击学习

    Mysql单表千万级数据量的查询优化与性能分析

    Mysql主从原理及其在高并发系统中的应用

    专题推荐:查询日志 mysql
    上一篇:linux中mysql备份,增量备份及恢复程序 下一篇:自己动手写 PHP MVC 框架(40节精讲/巨细/新人进阶必看)

    相关文章推荐

    • ❤️‍🔥共22门课程,总价3725元,会员免费学• ❤️‍🔥接口自动化测试不想写代码?• MySQL存储过程高级SQL语句总结• 实例分析MySQL中pt-query-digest工具的使用记录• 一起聊聊Mysql两阶段锁和死锁• 深入理解MySQL索引优化器工作原理• 简单聊聊MySQL中join查询
    1/1

    PHP中文网