慢查询分析1、慢查询分析1.1、慢查询的两个配置参数2、最佳实践1、慢查询分析许多存储系统例如MySQL提供慢查询日志帮助开发和运维人员定位系统存在的慢操作。所谓慢查询日志就是系统在命令执行前后计算每条命令的执行时间当超过预设阀值就将这条命令的相关信息例如发生时间耗时命令的详细信息记录下来Redis也提供了类似的功能。如图所示Redis客户端执行一条命令分为如下4个部分发送命令命令排队命令执行返回结果需要注意慢查询只统计步骤3)的时间所以没有慢查询并不代表客户端没有超时问题。1.1、慢查询的两个配置参数对于慢查询功能需要明确两件事预设阀值怎么设置慢查询记录存放在哪Redis提供了slowlog-log-slower-than和slowlog-max-len配置来解决这两个问题。从字面意思就可以看出slowlog-log-slower-than就是那个预设阀值它的单位是微秒1秒1000毫秒1000000微秒​默认值是10000假如执行了一条“很慢”的命令例如keys*​如果它的执行时间超过了10000微秒那么它将被记录在慢查询日志中。如果slowlog-log-slower-than0会记录所有的命令slowlog-log-slower-than0对于任何命令都不会进行记录。从字面意思看slowlog-max-len只是说明了慢查询日志最多存储多少条并没有说明存放在哪里实际上Redis使用了一个列表来存储慢查询日志slowlog-max-len就是列表的最大长度。一个新的命令满足慢查询条件时被插入到这个列表中当慢查询日志列表已处于其最大长度时最早插入的一个命令将从列表中移出例如slowlog-max-len设置为5当有第6条慢查询插入的话那么队头的第一条数据就出列第6条慢查询就会入列。在Redis中有两种修改配置的方法一种是修改配置文件另一种是使用config set命令动态修改。例如下面使用config set命令将slowlog-log-slower-than设置为20000微秒slowlog-max-len设置为1000configsetslowlog-log-slower-than20000configsetslowlog-max-len1000config rewrite如果要Redis将配置持久化到本地配置文件需要执行config rewrite命令如图所示。虽然慢查询日志是存放在Redis内存列表中的但是Redis并没有暴露这个列表的键而是通过一组命令来实现对慢查询日志的访问和管理。下面介绍这几个命令。(1)获取慢查询日志slowlog get[n]下面操作返回当前Redis的慢查询参数n可以指定条数127.0.0.1:6379slowlog get1)1)(integer)6662)(integer)14567865003)(integer)116154)1)BGREWRITEAOF2)1)(integer)6652)(integer)14567184003)(integer)120064)1)SETEX2)video_info_2003)3004)2…可以看到每个慢查询日志有4个属性组成分别是慢查询日志的标识id、发生时间戳、命令耗时、执行命令和参数慢查询列表如所示。(2)获取慢查询日志列表当前的长度slowlog len例如当前Redis中有45条慢查询127.0.0.1:6379slowlog len(integer)45(3)慢查询日志重置slowlog reset实际是对列表做清理操作例如127.0.0.1:6379slowlog len(integer)45127.0.0.1:6379slowlog reset OK127.0.0.1:6379slowlog len(integer)02、最佳实践慢查询功能可以有效地帮助我们找到Redis可能存在的瓶颈但在实际使用过程中要注意以下几点slowlog-max-len配置建议线上建议调大慢查询列表记录慢查询时Redis会对长命令做截断操作并不会占用大量内存。增大慢查询列表可以减缓慢查询被剔除的可能例如线上可设置为1000以上。slowlog-log-slower-than配置建议默认值超过10毫秒判定为慢查询需要根据Redis并发量调整该值。由于Redis采用单线程响应命令对于高流量的场景如果命令执行时间在1毫秒以上那么Redis最多可支撑OPS不到1000。因此对于高OPS场景的Redis建议设置为1毫秒。慢查询只记录命令执行时间并不包括命令排队和网络传输时间。因此客户端执行命令的时间会大于命令实际执行时间。因为命令执行排队机制慢查询会导致其他命令级联阻塞因此当客户端出现请求超时需要检查该时间点是否有对应的慢查询从而分析出是否为慢查询导致的命令级联阻塞。由于慢查询日志是一个先进先出的队列也就是说如果慢查询比较多的情况下可能会丢失部分慢查询命令为了防止这种情况发生可以定期执行slow get命令将慢查询日志持久化到其他存储中例如MySQL​然后可以制作可视化界面进行查询第13章介绍的Redis私有云CacheCloud提供了这样的功能好的工具可以让问题排查事半功倍。