监控指标

•性能指标：Performance•内存指标: Memory•基本活动指标：Basic activity•持久性指标: Persistence•错误指标：Error

性能指标：Performance

内存指标: Memory

基本活动指标：Basic activity

持久性指标: Persistence

错误指标：Error

监控方式

•redis-benchmark•redis-stat•redis-faina•redislive•redis-cli•monitor•showlog

1.get：获取慢查询日志2.len：获取慢查询日志条目数3.reset：重置慢查询日志

相关配置：

slowlog-log-slower-than 1000 # 设置慢查询的时间下线，单位：微秒slowlog-max-len 100 # 设置慢查询命令对应的日志显示长度，单位：命令数

info（可以一次性获取所有的信息，也可以按块获取信息）

1.server:服务器运行的环境参数2.clients:客户端相关信息3.memory：服务器运行内存统计数据4.persistence：持久化信息5.stats：通用统计数据6.Replication：主从复制相关信息7.CPU：CPU使用情况8.cluster：集群信息9.Keypass：键值对统计数量信息

终端info命令使用

./redis-cli info 按块获取信息 | grep 需要过滤的参数./redis-cli info stats | grep ops

交互式info命令使用

#./redis-cli > info server

性能监控：

redis-cli info | grep ops # 每秒操作数

内存监控

[root@CombCloud-2020110836 src]# ./redis-cli info | grep used | grep human       used_memory_human:2.99M  # 内存分配器从操作系统分配的内存总量used_memory_rss_human:8.04M  #操作系统看到的内存占用，top命令看到的内存used_memory_peak_human:7.77M # redis内存消耗的峰值used_memory_lua_human:37.00K   # lua脚本引擎占用的内存大小

由于BLPOP,BRPOP,or BRPOPLPUSH而备阻塞的客户端

[root@CombCloud-2020110836 src]# ./redis-cli info | grep blocked_clientsblocked_clients:0  

由于最大内存限制被移除的key的数量

[root@CombCloud-2020110836 src]# ./redis-cli info | grep evicted_keysevicted_keys:0  #

内存碎片率

[root@CombCloud-2020110836 src]# ./redis-cli info | grep mem_fragmentation_ratiomem_fragmentation_ratio:2.74

已使用内存

[root@CombCloud-2020110836 src]# ./redis-cli info | grep used_memory:used_memory:3133624  

基本活动指标：

redis连接了多少客户端 通过观察其数量可以确认是否存在意料之外的连接。如果发现数量不对劲，就可以使用lcient list指令列出所有的客户端链接地址来确定源头。

[root@CombCloud-2020110836 src]# ./redis-cli info | grep connected_clientsconnected_clients:1

[root@CombCloud-2020110836 src]# ./redis-cli info | grep connectedconnected_clients:1   # 客户端连接数量connected_slaves:1   # slave连接数量

持久性指标：

[root@CombCloud-2020110836 src]# ./redis-cli info | grep rdb_last_save_timerdb_last_save_time:1591876204  # 最后一次持久化保存磁盘的时间戳[root@CombCloud-2020110836 src]# ./redis-cli info | grep rdb_changes_since_last_saverdb_changes_since_last_save:0   # 自最后一次持久化以来数据库的更改数

错误指标

由于超出最大连接数限制而被拒绝的客户端连接次数，如果这个数字很大，则意味着服务器的最大连接数设置得过低，需要调整maxclients

[root@CombCloud-2020110836 src]# ./redis-cli info | grep connected_clientsconnected_clients:1

key值查找失败(没有命中)次数，出现多次可能是被hei ke gongjji

[root@CombCloud-2020110836 src]# ./redis-cli info | grep keyspacekeyspace_misses:0  

主从断开的持续时间（以秒为单位)

[root@CombCloud-2020110836 src]# ./redis-cli info | grep rdb_changes_since_last_saverdb_changes_since_last_save:0  

复制积压缓冲区如果设置得太小，会导致里面的指令被覆盖掉找不到偏移量，从而触发全量同步

[root@CombCloud-2020110836 src]# ./redis-cli info | grep backlog_sizerepl_backlog_size:1048576

通过查看sync_partial_err变量的次数来决定是否需要扩大积压缓冲区，它表示主从半同步复制失败的次数

[root@CombCloud-2020110836 src]# ./redis-cli info | grep sync_partial_errsync_partial_err:1

redis性能测试命令

./redis-benchmark -c 100 -n 5000

说明：100个连接，5000次请求对应的性能

• 服务器系统数据采集
• Redis Server数据采集
• Redis响应时间数据采集
• Redis监控Screen
  <b>
  <b>
  <b>

一、服务器存活监控

1>ping监控告警

2>CPU

3>丢包率

<b>

二、Redis Server监控数据采集

• ping,info all, slowlog get/len/reset/cluster info/config get

<b>

Redis存活监控

• redis存活监控 (redis_alive):redis本地监控agent使用ping，如果指定时间返回PONG表示存活，否则redis不能响应请求，可能阻塞或死亡。当返回值不为1时，redis挂了，告警

[root@tzgdevapp10 bin]# ./redis-cli -c -p 7000 ping | grep -c PONG
1

<b>

• 连接个数 (connected_clients)：客户端连接个数，如果连接数过高，影响redis吞吐量。>5000 时告警

[root@tzgdevapp10 bin]# ./redis-cli -c -p 7000 info | grep -w "connected_clients" | awk -F":" '{print $2}'
1

• 连接数使用率(connected_clients_pct): 连接数使用百分比，通过(connected_clients/maxclients)计算；如果达到1，redis开始拒绝新连接创建，告警

<b>

• 拒绝的连接个数(rejected_connections): redis连接个数达到maxclients限制，拒绝新连接的个数。告警

[root@tzgdevapp10 bin]# ./redis-cli -c -p 7000 info | grep -w rejected_connections
rejected_connections:0

• 新创建连接个数 (total_connections_received): 如果新创建连接过多，过度地创建和销毁连接对性能有影响，说明短连接严重或连接池使用有问题，告警。

[root@tzgdevapp10 bin]# ./redis-cli -c -p 7000 info | grep -w total_connections_received
total_connections_received:217

<b>

• list阻塞调用被阻塞的连接个数 (blocked_clients): 如果监控数据大于0，告警

[root@tzgdevapp10 bin]# ./redis-cli -c -p 7000 info | grep -w blocked_clients
blocked_clients:0

<b>

• redis分配的内存大小 (used_memory): redis真实使用内存，不包含内存碎片

[root@tzgdevapp10 bin]# ./redis-cli -c -p 7000 info | grep -w used_memory
used_memory:2513656

<b>

• redis进程使用内存大小(used_memory_rss): 进程实际使用的物理内存大小，包含内存碎片；如果rss过大导致内部碎片大，内存资源浪费，和fork的耗时和cow内存都会增大。

[root@tzgdevapp10 bin]# ./redis-cli -c -p 7000 info | grep -w used_memory_rss
used_memory_rss:9728000

<b>

• redis内存碎片率 (mem_fragmentation_ratio): 表示(used_memory_rss/used_memory)，碎片率过大，导致内存资源浪费，不设置告警。小于1，表示redis已使用swap分区，则告警

[root@tzgdevapp10 bin]# ./redis-cli -c -p 7000 info | grep -w mem_fragmentation_ratio
mem_fragmentation_ratio:3.89

<b>

• 键个数 (keys): redis实例包含的键个数。单实例键个数过大，可能导致过期键的回收不及时。

[root@tzgdevapp10 bin]# ./redis-cli -c -p 7000 info | grep -w keys | awk -F':' '{print $2}' | awk -F',' '{print $1}' | awk -F'=' '{print $2}'
43

<b>

• redis处理的命令数 (total_commands_processed): 监控采集周期内的平均qps

./redis-cli -c -p 7000 info | grep -w total_commands_processed| awk -F':' '{print $2}'

<b>

• redis当前的qps (instantaneous_ops_per_sec): redis内部较实时的每秒执行的命令数

./redis-cli -c -p 7000 info | grep -w instantaneous_ops_per_sec | awk -F':' '{print $2}'

<b>

• 请求键被命中次数 (keyspace_hits): redis请求键被命中的次数

[root@tzgdevapp10 bin]# ./redis-cli -c -p 7000 info | grep -w keyspace_hits | awk -F':' '{print $2}'
354

<b>

• 请求键未被命中次数 (keyspace_misses): redis请求键未被命中的次数

[root@tzgdevapp10 bin]# ./redis-cli -c -p 7000 info | grep -w keyspace_misses
keyspace_misses:122

<b>

• 请求键的命中率 (keyspace_hit_ratio):使用keyspace_hits/(keyspace_hits+keyspace_misses)计算所得，命中率低于50%告警

<b>

• 最近一次fork阻塞的微秒数 (latest_fork_usec): 最近一次Fork操作阻塞redis进程的耗时数，单位微秒。

[root@tzgdevapp10 bin]# ./redis-cli -c -p 7000 info | grep -w latest_fork_usec
latest_fork_usec:315

三、Redis集群监控

• cluster info 、info

<b>

• 实例是否启用集群模式 (cluster_enabled): 通过info的cluster_enabled监控是否启用集群模式。不等于1则告警

[root@tzgdevapp10 bin]# ./redis-cli -c -p 7000 info | grep -w cluster_enabled
cluster_enabled:1

<b>

• 集群健康状态 （clusster_state):cluster_state不为OK则告警

[root@tzgdevapp10 bin]# ./redis-cli -c -p 7000 cluster info
cluster_state:ok

<b>

• 集群数据槽slots分配情况 (cluster_slots_assigned):集群正常运行时，默认16384个slots

不等于16384则告警

[root@tzgdevapp10 bin]# ./redis-cli -c -p 7000 cluster info | grep -w cluster_slots_ok
cluster_slots_ok:16384

<b>

• 检测下线的数据槽slots个数 (cluster_slots_fail):集群正常运行时，应该为0. 如果大于0说明集群有slot存在故障。

[root@tzgdevapp10 bin]# ./redis-cli -c -p 7000 cluster info | grep -w cluster_slots_fail
cluster_slots_fail:0

<b>

• 集群的节点数 （cluster_known_nodes）：集群中redis节点的个数

[root@tzgdevapp10 bin]# ./redis-cli -c -p 7000 cluster info | grep -w cluster_known_nodes
cluster_known_nodes:6

常用指标监控指标

• 性能指标：Performance
• 内存指标：Memory
• 基本活动指标：Basic activity
• 持久性指标：Persistence
• 错误指标：Error
• 性能指标：Performance

内存指标: Memory

基本活动指标：Basic activity

持久性指标: Persistence

错误指标：Error

监控方式

• redis-benchmark
• redis-stat
• redis-faina
• redislive
• redis-cli
• monitor
• showlog
• 1）get：获取慢查询日志
• 2）len：获取慢查询日志条目数
• 3）reset：重置慢查询日志

相关配置：

slowlog-log-slower-than 1000	#设置慢查询的时间下线，单位：微秒
slowlog-max-len 100 			#设置慢查询命令对应的日志显示长度，单位：命令数

• info（可以一次性获取所有的信息，也可以按块获取信息）
• 1）server:服务器运行的环境参数
• 2）clients:客户端相关信息
• 3）memory：服务器运行内存统计数据
• 4）persistence：持久化信息
• 5）stats：通用统计数据
• 6）Replication：主从复制相关信息
• 7）CPU：CPU使用情况
• 8）cluster：集群信息
• 9）Keypass：键值对统计数量信息

终端 info 命令使用

• ./redis-cli info 按块获取信息 | grep 需要过滤的参数
• ./redis-cli info stats | grep ops

交互式 info 命令使用

 #./redis-cli
 > info server

性能监控

redis-cli info | grep ops	#每秒操作数

内存监控

[root@CombCloud-2020110836 src]# ./redis-cli info | grep used | grep human
used_memory_human:2.99M  		#内存分配器从操作系统分配的内存总量
used_memory_rss_human:8.04M  	#操作系统看到的内存占用，top命令看到的内存
used_memory_peak_human:7.77M 	#redis内存消耗的峰值
used_memory_lua_human:37.00K   	#lua脚本引擎占用的内存大小

由于 BLPOP,BRPOP,or BRPOPLPUSH 而备阻塞的客户端

[root@CombCloud-2020110836 src]# ./redis-cli info | grep blocked_clients
blocked_clients:0

由于最大内存限制被移除的key的数量

[root@CombCloud-2020110836 src]# ./redis-cli info | grep evicted_keys
evicted_keys:0 

内存碎片率

[root@CombCloud-2020110836 src]# ./redis-cli info | grep mem_fragmentation_ratio
mem_fragmentation_ratio:2.74

已使用内存

[root@CombCloud-2020110836 src]# ./redis-cli info | grep used_memory:
used_memory:3133624

基本活动指标

redis 连接了多少客户端

通过观察其数量可以确认是否存在意料之外的连接。如果发现数量不对劲，就可以使用lcient list 指令列出所有的客户端链接地址来确定源头。

[root@CombCloud-2020110836 src]# ./redis-cli info | grep connected_clients
connected_clients:1
[root@CombCloud-2020110836 src]# ./redis-cli info | grep connected
connected_clients:1   	#客户端连接数量
connected_slaves:1   	#slave连接数量

持久性指标

[root@CombCloud-2020110836 src]# ./redis-cli info | grep rdb_last_save_time
rdb_last_save_time:1591876204  	#最后一次持久化保存磁盘的时间戳
[root@CombCloud-2020110836 src]# ./redis-cli info | grep rdb_changes_since_last_save
rdb_changes_since_last_save:0   #自最后一次持久化以来数据库的更改数

错误指标

由于超出最大连接数限制而被拒绝的客户端连接次数，如果这个数字很大，则意味着服务器的最大连接数设置得过低，需要调整 maxclients

[root@CombCloud-2020110836 src]# ./redis-cli info | grep connected_clients
connected_clients:1

key 值查找失败(没有命中)次数，出现多次可能是被 hei ke gong ji

[root@CombCloud-2020110836 src]# ./redis-cli info | grep keyspace
keyspace_misses:0

主从断开的持续时间（以秒为单位)

[root@CombCloud-2020110836 src]# ./redis-cli info | grep rdb_changes_since_last_save
rdb_changes_since_last_save:0

复制积压缓冲区如果设置得太小，会导致里面的指令被覆盖掉找不到偏移量，从而触发全量同步

[root@CombCloud-2020110836 src]# ./redis-cli info | grep backlog_size
repl_backlog_size:1048576

通过查看 sync_partial_err 变量的次数来决定是否需要扩大积压缓冲区，它表示主从半同步复制失败的次数

[root@CombCloud-2020110836 src]# ./redis-cli info | grep sync_partial_err
sync_partial_err:1

redis 性能测试命令

./redis-benchmark -c 100 -n 5000

说明：100 个连接（并发量），5000 次请求测试对应的性能