SpringBoot整合Redis管道的示例代碼
1. Redis 之管道(pipeline)
執(zhí)行一個(gè)Redis命令,Redis客戶端和Redis服務(wù)器就需要執(zhí)行以下步驟:
- 客戶端發(fā)送命令到服務(wù)器;
- 服務(wù)器接受命令請求,執(zhí)行命令,產(chǎn)生相應(yīng)的結(jié)果;
- 服務(wù)器返回結(jié)果給客戶端;
- 客戶端接受命令的執(zhí)行結(jié)果,并向用戶展示。
Redis命令所消耗的大部分時(shí)間都用在了發(fā)送命令請求和接收命令結(jié)果上面,把任意多條Redis命令請求打包在一起,然后一次性地將它們?nèi)堪l(fā)送給服務(wù)器,而服務(wù)器則會(huì)把所有命令請求都處理完畢之后,一次性地將它們的執(zhí)行結(jié)果全部返回給客戶端。
注意事項(xiàng):
Redis服務(wù)器并不會(huì)限制客戶端在管道中包含的命令數(shù)量,但是卻會(huì)為客戶端的輸入緩沖區(qū)設(shè)置默認(rèn)值為1GB的體積上限:當(dāng)客戶端發(fā)送的數(shù)據(jù)量超過這一限制時(shí),Redis服務(wù)器將強(qiáng)制關(guān)閉該客戶端。因此最好不要一下把大量命令或者一些體積非常龐大的命令放到同一個(gè)管道中執(zhí)行。
除此之外,很多客戶端本身也帶有隱含的緩沖區(qū)大小限制,如果你在使用流水線特性的過程中,發(fā)現(xiàn)某些流水線命令沒有被執(zhí)行,或者流水線返回的結(jié)果不完整,那么很可能就是你的程序觸碰到了客戶端內(nèi)置的緩沖區(qū)大小限制。
2. SpringBoot 整合 Redis 管道實(shí)例
使用單個(gè)的 increment 命令,處理 200w個(gè)key:
public class RedisPipelineStudy extends BaseTest {
@Autowired
private StringRedisTemplate stringRedisTemplate;
private static final String PREFIX = "test0:";
@Test
public void test() {
StopWatch stopWatch = new StopWatch();
stopWatch.start("test0");
for (int times = 0; times < 2; times++) {
for (int i = 0; i < 1000000; i++) {
stringRedisTemplate.opsForValue().increment(PREFIX + i, 1L);
}
}
stopWatch.stop();
System.out.println(stopWatch.prettyPrint());
}
}
耗時(shí)如下所示:是 12 位 ,單位ns

使用管道 incrBy 處理 200w個(gè)key,每次打包300條命令發(fā)送給服務(wù)器,如下所示:
public class RedisPipelineStudy extends BaseTest {
@Autowired
private StringRedisTemplate stringRedisTemplate;
private static final String PREFIX = "test1:";
@Test
public void test() {
StopWatch stopWatch = new StopWatch();
stopWatch.start("test1");
List<Integer> recordList = new ArrayList<>();
for (int times = 0; times < 2; times++) {
for (int i = 0; i < 1000000; i++) {
try {
recordList.add(i);
if (recordList.size() > 300) {
incrByPipeline(recordList);
recordList = new ArrayList<>();
}
} catch (Exception e) {
System.out.println(e);
}
}
if (!CollectionUtils.isEmpty(recordList)) {
incrByPipeline(recordList);
recordList = new ArrayList<>();
}
}
stopWatch.stop();
System.out.println(stopWatch.prettyPrint());
}
private void incrByPipeline(List<Integer> recordList) {
stringRedisTemplate.executePipelined(new RedisCallback<Object>() {
@Override
public Object doInRedis(RedisConnection connection) throws DataAccessException {
try {
for (Integer record : recordList) {
byte[] key = (PREFIX + record).getBytes();
connection.incrBy(key, 1);
}
} catch (Exception e) {
System.out.println(e);
}
return null;
}
});
}
}
耗用時(shí)間: 11 位 ,單位 :ns,是單個(gè)命令耗時(shí)的 1/6。

到此這篇關(guān)于SpringBoot整合Redis管道的示例代碼的文章就介紹到這了,更多相關(guān)SpringBoot整合Redis管道內(nèi)容請搜索腳本之家以前的文章或繼續(xù)瀏覽下面的相關(guān)文章希望大家以后多多支持腳本之家!
- 詳解redis大幅性能提升之使用管道(PipeLine)和批量(Batch)操作
- .NET客戶端實(shí)現(xiàn)Redis中的管道(PipeLine)與事物(Transactions)
- Redis基礎(chǔ)學(xué)習(xí)之管道機(jī)制詳析
- Python redis操作實(shí)例分析【連接、管道、發(fā)布和訂閱等】
- redis批量操作pipeline管道操作方法
- Redis內(nèi)存碎片產(chǎn)生原因及Pipeline管道原理解析
- Springboot下使用Redis管道(pipeline)進(jìn)行批量操作
- Redis中pipeline(管道)的實(shí)現(xiàn)示例
- Redis中管道操作的項(xiàng)目實(shí)踐
相關(guān)文章
五分鐘帶你了解Java的接口數(shù)據(jù)校驗(yàn)
這篇文章主要介紹了五分鐘帶你了解Java的接口數(shù)據(jù)校驗(yàn),文中通過示例代碼介紹的非常詳細(xì),對大家的學(xué)習(xí)或者工作具有一定的參考學(xué)習(xí)價(jià)值,需要的朋友們下面隨著小編來一起學(xué)習(xí)學(xué)習(xí)吧2020-12-12
Go反射底層原理及數(shù)據(jù)結(jié)構(gòu)解析
這篇文章主要介紹了Go反射底層原理及數(shù)據(jù)結(jié)構(gòu)解析,反射的實(shí)現(xiàn)和interface的組成很相似,都是由“類型”和“數(shù)據(jù)值”構(gòu)成,下面小編分享更多相關(guān)內(nèi)容需要的小伙伴可以參考一下2022-06-06
Spring中ImportBeanDefinitionRegistrar源碼和使用方式
Spring容器擴(kuò)展流程總結(jié):1. 定義Mapper層,2. 通過FactoryBean創(chuàng)建代理對象,3. 使用ImportBeanDefinitionRegistrar修改Bean定義,4. 應(yīng)用自定義注解@LuoyanImportBeanDefinitionRegistrar,5. 配置類中執(zhí)行后置處理器,6. 啟動(dòng)類中查看源碼,希望對大家有所幫助2024-11-11
Mybatis基于注解形式的sql語句生成實(shí)例代碼
這篇文章主要介紹了 Mybatis基于注解形式的sql語句生成實(shí)例代碼,需要的朋友可以參考下2017-09-09
Spring實(shí)現(xiàn)IoC和DI的方法詳解
IoC全稱Inversion of Control (控制反轉(zhuǎn)) ,這里的控制其實(shí)是控制權(quán)的意思,可以理解為對象的獲取權(quán)力和方式發(fā)生了發(fā)轉(zhuǎn),DI依賴注?是?個(gè)過程,是指IoC容器在創(chuàng)建Bean時(shí), 去提供運(yùn)?時(shí)所依賴的資源,?資源指的就是對象,本文介紹了Spring實(shí)現(xiàn)IoC和DI的方法2024-08-08

