簡(jiǎn)介Redis中的showlog功能
Redis 有一個(gè)實(shí)用的slowlog功能，正如你可以猜到的，可以讓你檢查運(yùn)行緩慢的查詢. Slowlog 將會(huì)記錄運(yùn)行時(shí)間超過Y微秒的最后X條查詢. X 和 Y 可以在 redis.conf 或者在運(yùn)行時(shí)通過 CONFIG 命令:
CONFIG SET slowlog-max-len 25
進(jìn)行設(shè)置。
slowlog-log-slower-than 是用來設(shè)置微秒數(shù)的, 因此上面的設(shè)置將記錄執(zhí)行時(shí)間超過5秒的查詢. 要獲取記錄的日志，你可以使用 SLOWLOG GET X 命令, 這里 X 是你想要獲取的記錄條數(shù):
它將會(huì)展示一個(gè)唯一的id，時(shí)間戳和發(fā)生的查詢，查詢執(zhí)行所花掉的時(shí)間和實(shí)際被執(zhí)行的命令+參數(shù). 你可以通過SLOWLOG RESET擦出日志.
最后一次查看slowlog，我很不淡定的看到DEL命令的執(zhí)行竟然花了超過20毫秒的時(shí)間. 還記得嗎，Redis是單線程的，因此這樣會(huì)阻塞（并且嚴(yán)重的有礙）我們系統(tǒng)的并發(fā). 還有，因?yàn)檫@是一個(gè)寫操作，它將會(huì)在向所有從屬Redis服務(wù)復(fù)制的時(shí)候阻塞這一復(fù)制過程. 額，到底這是咋回事呢?
也許除了我之外所有人都知道這個(gè)問題了，但是這證明了Redis的DEL命令的時(shí)間復(fù)雜度對(duì)于字符串和哈希值而言是O(1)，而對(duì)于list、set和sorted set而言則是O(N) (這里的 N 是集合中數(shù)據(jù)項(xiàng)的數(shù)目). 你會(huì)刪除一個(gè)包含數(shù)百萬條數(shù)據(jù)的set嗎? 那就等著阻塞吧.
我們的解決方案很簡(jiǎn)單: 不去刪除這些數(shù)據(jù)項(xiàng)，而是將它們重命名，并且在后臺(tái)作業(yè)中用小而可間斷的塊去執(zhí)行對(duì)它們的刪除操作. 首先，是我們的delayed_delete函數(shù):
local key = KEYS[1]
local data_type = redis.call('type', key).ok
if data_type == 'set' or data_type == 'zset' then
local temp = 'gc:tmp:' .. redis.call('incr', 'gc:ids') .. ':' .. key
redis.call('rename', key, temp)
return redis.call('sadd', 'gc:' .. data_type, temp)
end
return redis.call('del', key)
這將會(huì)將集合重命名，并且將新的名稱添加到gc:set 或者 gc:zset set中 (我們沒有使用 list, 但如果你使用了的話，你也應(yīng)該向其加入這方面的支持).
下一步我們安排了一個(gè)Ruby腳本每分鐘運(yùn)行一次:
require 'redis'
r = Redis.new(driver: :hiredis)
r.srandmember('gc:set', 10000).each do |set|
items = r.srandmember(set, 5000)
if items.nil? || items.length == 0
r.srem('gc:set', set)
next
end
r.srem(set, items)
end
r.srandmember('gc:zset', 10000).each do |zset|
if r.zremrangebyrank(zset, 0, 5000) < 5000
r.srem('gc:zset', zset)
end
end
你可以基于自己的需要將修改數(shù)字. 你的集合有多大，以及它們被刪除有多頻繁? 因?yàn)槲覀儾蝗ヌ^頻繁的做這些類型的產(chǎn)出操作, 我們可以一次只進(jìn)行一小塊的刪除操作.
不過這種方法比直接刪除更加的慢, 但它在并發(fā)的環(huán)境下卻可以表現(xiàn)得很好.
相關(guān)文章
這篇文章主要為大家介紹了Redis底層類型之json命令使用詳解,有需要的朋友可以借鑒參考下,希望能夠有所幫助,祝大家多多進(jìn)步,早日升職加薪2023-09-09
這篇文章主要介紹了Redis的RDB持久化與AOF持久化詳解,Redis是許多公司都在使用的一款高性能、非關(guān)系型數(shù)據(jù)庫(kù),其中最為重要的一個(gè)特性就是它支持持久化,本文將深入介紹Redis持久化原理，包括RDB和AOF兩種方式的實(shí)現(xiàn),需要的朋友可以參考下2023-07-07
Redis 哨兵機(jī)制及配置實(shí)現(xiàn)
本文主要介紹了Redis 哨兵機(jī)制及配置實(shí)現(xiàn)，文中通過示例代碼介紹的非常詳細(xì)，具有一定的參考價(jià)值，感興趣的小伙伴們可以參考一下2022-03-03
Redis實(shí)現(xiàn)短信登錄的企業(yè)實(shí)戰(zhàn)
本文主要介紹了Redis實(shí)現(xiàn)短信登錄的企業(yè)實(shí)戰(zhàn)，文中通過示例代碼介紹的非常詳細(xì)，對(duì)大家的學(xué)習(xí)或者工作具有一定的參考學(xué)習(xí)價(jià)值，需要的朋友們下面隨著小編來一起學(xué)習(xí)學(xué)習(xí)吧2022-07-07
redis學(xué)習(xí)之RDB、AOF與復(fù)制時(shí)對(duì)過期鍵的處理教程
這篇文章主要給大家介紹了關(guān)于redis學(xué)習(xí)之RDB、AOF與復(fù)制時(shí)對(duì)過期鍵處理的相關(guān)資料，文中通過示例代碼介紹的非常詳細(xì)，對(duì)大家學(xué)習(xí)或者使用redis具有一定的參考學(xué)習(xí)價(jià)值，需要的朋友們下面來一起學(xué)習(xí)學(xué)習(xí)吧2019-11-11
RedisTemplate序列化設(shè)置的流程和具體步驟
在使用 Redis 作為緩存數(shù)據(jù)庫(kù)時(shí),我們通常會(huì)使用 RedisTemplate 來簡(jiǎn)化與 Redis 進(jìn)行交互的操作,而其中一個(gè)重要的配置項(xiàng)就是序列化設(shè)置,它決定了數(shù)據(jù)在存儲(chǔ)到 Redis 中時(shí)的格式,本文將介紹如何進(jìn)行 RedisTemplate 的序列化設(shè)置,以及一些常見的序列化方案2024-11-11
Redis實(shí)現(xiàn)RBAC權(quán)限管理
本文主要介紹了Redis實(shí)現(xiàn)RBAC權(quán)限管理,文中通過示例代碼介紹的非常詳細(xì),對(duì)大家的學(xué)習(xí)或者工作具有一定的參考學(xué)習(xí)價(jià)值,需要的朋友們下面隨著小編來一起學(xué)習(xí)學(xué)習(xí)吧2025-03-03
本文主要介紹了淺談Redis的事件驅(qū)動(dòng)模型，文中通過示例代碼介紹的非常詳細(xì)，對(duì)大家的學(xué)習(xí)或者工作具有一定的參考學(xué)習(xí)價(jià)值，需要的朋友們下面隨著小編來一起學(xué)習(xí)學(xué)習(xí)吧2022-05-05
這篇文章主要給大家介紹了關(guān)于redis分布式鎖的問題與解決方法，文中通過示例代碼介紹的非常詳細(xì)，對(duì)大家學(xué)習(xí)或者使用redis具有一定的參考學(xué)習(xí)價(jià)值，需要的朋友們下面來一起學(xué)習(xí)學(xué)習(xí)吧2019-07-07
Linux中設(shè)置Redis開機(jī)啟動(dòng)的方法
這篇文章主要給大家介紹了關(guān)于Linux中設(shè)置Redis開機(jī)啟動(dòng)的方法，主要包括在CentOS7.0系統(tǒng)和Debian 8.0系統(tǒng)下實(shí)現(xiàn)方法，文中介紹的非常詳細(xì)，需要的朋友可以參考借鑒，下面來一起看看吧。2017-04-04