创新互联是专业的陵川网站建设公司，陵川接单;提供成都网站设计、成都网站建设,网页设计,网站设计,建网站,PHP网站建设等专业做网站服务;采用PHP框架,可快速的进行陵川网站开发网页制作和功能扩展;专业做搜索引擎喜爱的网站,专业的做网站团队,希望更多企业前来合作! 一 前言 

     在运维Redis的时候，总会遇到使用不规范的业务设计，比如没有对key设置ttl，进而导致内存空间吃紧，通常的解决方法是在slave上dump 出来所有的key ，然后对文件进行遍历再分析。遇到几十G的Redis实例，dump + 分析 会是一个比较耗时的操作，为此，我开发了一个小脚本直接连接Redis 进行scan 遍历所有的key，然后在检查key的ttl，将没有ttl的key输出到指定的文件里面。

二 代码实现

1. # encoding: utf-8
   
2. """
   
3. author: yangyi@youzan.com
   
4. time: 2018/4/26 下午4:34
   
5. func: 获取数据库中没有设置ttl的 key
   
6. """
   
7. import redis
   
8. import argparse
   
9. import time
   
10. import sys
    
11. 
    
12. 
    
13. class ShowProcess:
    
14.     """
    
15.     显示处理进度的类
    
16.     调用该类相关函数即可实现处理进度的显示
    
17.     """
    
18.     i = 0 # 当前的处理进度
    
19.     max_steps = 0 # 总共需要处理的次数
    
20.     max_arrow = 50 # 进度条的长度
    
21. 
    
22.     # 初始化函数，需要知道总共的处理次数
    
23.     def __init__(self, max_steps):
    
24.         self.max_steps = max_steps
    
25.         self.i = 0
    
26. 
    
27.     # 显示函数，根据当前的处理进度i显示进度
    
28.     # 效果为[>>>>>>>>>>>>>>>>>>>>>>>>>>>>>>>>>>>>>>>>>>>>>>>>>>]100.00%
    
29.     def show_process(self, i = None):
    
30.         if i is not None:
    
31.             self.i = i
    
32.         else:
    
33.             self.i += 1
    
34.         num_arrow = int(self.i * self.max_arrow / self.max_steps) # 计算显示多少个'>'
    
35.         num_line = self.max_arrow - num_arrow # 计算显示多少个'-'
    
36.         percent = self.i * 100.0 / self.max_steps # 计算完成进度，格式为xx.xx%
    
37.         process_bar = '[' + '>' * num_arrow + ' ' * num_line + ']'\
    
38.                       + '%.2f' % percent + '%' + '\r' # 带输出的字符串，'\r'表示不换行回到最左边
    
39.         sys.stdout.write(process_bar) # 这两句打印字符到终端
    
40.         sys.stdout.flush()
    
41. 
    
42.     def close(self, words='done'):
    
43.         print ''
    
44.         print words
    
45.         self.i = 0
    
46. 
    
47. 
    
48. def check_ttl(redis_conn, no_ttl_file, dbindex):
    
49.     start_time = time.time()
    
50.     no_ttl_num = 0
    
51.     keys_num = redis_conn.dbsize()
    
52.     print "there are {num} keys in db {index} ".format(num=keys_num, index=dbindex)
    
53.     process_bar = ShowProcess(keys_num)
    
54.     with open(no_ttl_file, 'a') as f:
    
55. 
    
56.         for key in redis_conn.scan_iter(count=1000):
    
57.             process_bar.show_process()
    
58.             if redis_conn.ttl(key) == -1:
    
59.                 no_ttl_num += 1
    
60.                 if no_ttl_num < 1000:
    
61.                     f.write(key+'\n')
    
62.             else:
    
63.                 continue
    
64. 
    
65.     process_bar.close()
    
66.     print "cost time(s):", time.time() - start_time
    
67.     print "no ttl keys number:", no_ttl_num
    
68.     print "we write keys with no ttl to the file: %s" % no_ttl_file
    
69. 
    
70. 
    
71. def main():
    
72.     parser = argparse.ArgumentParser()
    
73.     parser.add_argument('-p', type=int, dest='port', action='store', help='port of redis ')
    
74.     parser.add_argument('-d', type=str, dest='db_list', action='store', default=0,
    
75.                         help='ex : -d all / -d 1,2,3,4 ')
    
76.     args = parser.parse_args()
    
77.     port = args.port
    
78.     if args.db_list == 'all':
    
79.         db_list = [i for i in xrange(0, 16)]
    
80.     else:
    
81.         db_list = [int(i) for i in args.db_list.split(',')]
    
82. 
    
83.     for index in db_list:
    
84.         try:
    
85.             pool = redis.ConnectionPool(host='127.0.0.1', port=port, db=index)
    
86.             r = redis.StrictRedis(connection_pool=pool)
    
87.         except redis.exceptions.ConnectionError as e:
    
88.             print e
    
89.         else:
    
90.             no_ttl_keys_file = "/tmp/{port}_{db}_no_ttl_keys.txt".format(port=port, db=index)
    
91.             check_ttl(r, no_ttl_keys_file, index)
    
92. 
    
93. 
    
94. if __name__ == '__main__':
    
95.     main()

新闻标题：【Redis】获取没有设置ttl的key脚本-创新互联
本文地址：http://kswjz.com/article/ccosih.html