一日一技:可视化分析 Redis Key 资源占用情况

大数据 数据可视化 Redis
Redis 在日常的开发中,会积累大量的 Key,占用不少内存空间。有时候,我们想知道当前 Redis 里面有多少个 Key,是哪个 Key 占用了最大的内存。

 [[383970]]

Redis 在日常的开发中,会积累大量的 Key,占用不少内存空间。有时候,我们想知道当前 Redis 里面有多少个 Key,是哪个 Key 占用了最大的内存。

但是,我们知道,由于 Redis 是单线程数据库,所以在线上环境是绝对禁止使用keys *这种命令的,因为它会花费很长时间扫描所有的 Key,在这个过程中,Redis 会卡死,无法处理其他的读写操作。

那么,我们应该怎么知道当前有多少个 Key 呢?有同学说可以使用scan命令。但这个命令一方面是需要写程序来迭代,另一方面是它给出的结果可能是不准确的。

也有同学会说,可以使用info keyspace命令,运行效果如下图所示:

确实可以看到有多少个 Key。不过另一个问题是,怎么知道哪个 Key 占用的内存空间最大?

还有时候,Redis 里面可能有几万十几万个 Key,里面有些 Key 是可以删掉的。但是由于我们不能使用keys命令查看当前有哪些 Key,所以不知道这些可以删掉的 Key 竟然还在。

实际上,这些问题,我们使用一个叫做RDR[1]的工具,都可以解决。在 RDR 的 Github 上,可以找到对应系统的可执行文件。我们以 Linux 版本为例来进行说明。Linux 版本的可执行文件地址为:https://github.com/xueqiu/rdr/releases/download/v0.0.1/rdr-linux,下载以后,赋予可执行权限:

  1. cd ~ 
  2. wget https://github.com/xueqiu/rdr/releases/download/v0.0.1/rdr-linux 
  3. chmod +x rdr-linux 

接下来,我们需要找到dump.rdb文件。

Redis 默认开启了RDB方式的持久化储存。满足一定条件时,Redis 会把内存中的数据存放到硬盘中,防止由于突然断电导致数据丢失。默认情况下,RDB 文件在/var/lib/redis/dump.rdb,这个文件只有 root 用户可以读取。

如果你现在不是 root 用户,那么你可以把它复制出来,修改成当前用户,我的 Linux 系统当前用户名叫做 kingname,所在的用户组也叫 kingname,所以可以执行如下 shell 命令:

  1. cd ~ 
  2. sudo cp /var/lib/redis/dump.rdb ./ 
  3. sudo chown kingname:kinganme dump.rdb 

修改了用户以后,现在我们让 RDR 来读取这个RDB 文件:

  1. ./rdr-linux show -p 8766 dump.rdb 

运行效果如下图所示:

现在,打开浏览器,打开http://IP:8766,就可以看到当前 Redis 的各个 Key 的统计信息:

不仅可以看到Redis 有哪些 Key,还能看到每个 Key 里面有多少元素,大小是多少。

而且由于是分析的 RDB 文件,所以也完全不需要担心对线上数据造成任何影响。

有了这个工具以后,要找出占用空间最大的 Key,就非常简单了。

参考资料[1]RDR: https://github.com/xueqiu/rdr

 本文转载自微信公众号「未闻Code」,可以通过以下二维码关注。转载本文请联系未闻Code公众号。

 

责任编辑:武晓燕 来源: 未闻Code
相关推荐

2021-10-08 20:11:40

类方法静态

2021-10-15 21:08:31

PandasExcel对象

2021-04-27 22:15:02

Selenium浏览器爬虫

2021-04-12 21:19:01

PythonMakefile项目

2021-09-13 20:38:47

Python链式调用

2021-04-05 14:47:55

Python多线程事件监控

2024-11-13 09:18:09

2023-10-28 12:14:35

爬虫JavaScriptObject

2022-06-28 09:31:44

LinuxmacOS系统

2021-03-12 21:19:15

Python链式调用

2024-07-30 08:11:16

2022-03-12 20:38:14

网页Python测试

2021-04-19 23:29:44

MakefilemacOSLinux

2024-07-30 08:16:18

Python代码工具

2021-07-27 21:32:57

Python 延迟调用

2021-10-03 20:08:29

HTTP2Scrapy

2024-05-24 09:07:06

JSONprint字符串

2024-07-19 18:23:17

2024-11-11 00:38:13

Mypy静态类型

2021-05-08 19:33:51

移除字符零宽
点赞
收藏

51CTO技术栈公众号