Jedis客戶端以及redis中的pipeline批量操作

来源:https://www.cnblogs.com/yulinfeng/archive/2020/02/24/12358603.html
-Advertisement-
Play Games

關註公眾號:CoderBuff,回覆“redis”獲取《Redis5.x入門教程》完整版PDF。 《Redis5.x入門教程》目錄 "第一章 · 準備工作" "第二章 · 數據類型" "第三章 · ​命令" "第四章 ​· 配置" "第五章 · Java客戶端(上)" 第六章 · 事務 第七章 · ...


關註公眾號:CoderBuff,回覆“redis”獲取《Redis5.x入門教程》完整版PDF。

有關本章的源碼:https://github.com/yu-linfeng/redis5.x_tutorial/tree/master/code/jedis

前面的章節介紹了redis的安裝、還有命令配置等內容,我們在實際使用時大部分情況都是利用現成的Java客戶端對redis進行操作。當然命令並不是沒用,它極有可能在你排查問題時排上用場,因為你有可能會直接連入redis服務端通過命令行來排查是否是redis緩存的問題。

redis的Java客戶端最常用的是jedis開源庫,本章我們也將圍繞jedis的對redis進行一些簡單的操作,jedis的GitHub地址:https://github.com/xetorthio/jedis

package com.coderbuff.jedis.simple;

import redis.clients.jedis.Jedis;

/**
 * @author okevin
 * @date 2020/2/12 23:08
 */
public class Demo {
    public static void main(String[] args) {
        Jedis jedis = new Jedis("localhost");
        jedis.set("redis-client", "jedis");
        System.out.println(jedis.get("redis-client"));
        jedis.close();
    }
}

這是一個簡單的jedis連接示例,使用MySQL的經驗告訴我們:類似有socket連接的,我們最好是通過“池化”技術,一是更好的管理我們的連接;二是能更好的利用連接資源。所以當我們在使用jedis時,最好是使用jedis提供的池化技術。

package com.codrbuff.jedis.client;

import redis.clients.jedis.Jedis;
import redis.clients.jedis.JedisPool;
import redis.clients.jedis.JedisPoolConfig;

/**
 * redis客戶端連接
 * @author okevin
 * @date 2020/2/12 23:17
 */
public class RedisClient {

    /**
     * redis伺服器地址
     */
    private static final String HOST = "localhost";

    /**
     * jedis連接池
     */
    private static JedisPool jedisPool = new JedisPool(new JedisPoolConfig(), HOST);

    private RedisClient() {

    }

    /**
     * 從jedispool中獲取一個jedis連接
     * @return jedis連接
     */
    public static Jedis getJedis() {
        return jedisPool.getResource();
    }
}
package com.coderbuff.jedis.util;

import com.codrbuff.jedis.client.RedisClient;
import redis.clients.jedis.Jedis;

/**
 * redis工具類
 * @author okevin
 * @date 2020/2/12 23:13
 */
public class RedisUtil {

    //###########字元串(string)數據類型相關操作############

    /**
     * 字元串寫入
     * @param key key
     * @param value 值
     * @return 寫入的值
     */
    public static String set(String key, String value) {
        try (Jedis jedis = RedisClient.getJedis()){
            jedis.set(key, value);
            return value;
        }
    }

    public static String get(String key) {
        try (Jedis jedis = RedisClient.getJedis()) {
            return jedis.get(key);
        }
    }
}

當然我不准備在這裡把所有的命令都展示出來,關於SDK的使用大可查看官方文檔。

redis中有一個重要的功能——pipeline(管道),我們在操作大量數據時,redis的吞吐量性能可能較低,此時我們可以通過pipeline進行批量操作。這個功能在redis的命令中並沒有,但redis是支持的。所以本章將重點介紹pipeline的使用,這在實際應用中非常常用。

pipeline(管道)

pipeline提供了命令的批量提交,當我們有批量查詢或者寫入操作時,單個命令的“往返時間”是1ms,那麼10個命令就會消耗10ms,如果我們使用pipeline批量操作後可以一次性提交10個命令,redis的響應時間將會大大減小。吞吐量也自然提高。

實際上,之所以採用pipeline批量提交主要是為了控制網路開銷,10個命令就會有10次網路開銷,網路開銷對於處於異地機房的影響尤為明顯。所以在進行批量操作時,儘量使用pipeline管道操作。下麵的例子是1萬次字元串類型的寫入,反映了非pipeline和pipeline的性能對比。

package com.coderbff.jedis.test;

import com.coderbuff.jedis.util.RedisUtil;
import com.codrbuff.jedis.client.RedisClient;
import org.junit.Test;
import redis.clients.jedis.Pipeline;

/**
 * @author okevin
 * @date 2020/2/12 23:32
 */
public class JedisTests {

    @Test
    public void testPipeline() {
        long setStart = System.currentTimeMillis();
        for (int i = 0; i < 10000; i++) {
            RedisUtil.set("key_" + i, String.valueOf(i));
        }
        long setEnd = System.currentTimeMillis();
        System.out.println("非pipeline操作10000次字元串數據類型set寫入,耗時:" + (setEnd - setStart) + "毫秒");

        long pipelineStart = System.currentTimeMillis();
        Pipeline pipeline = RedisClient.getJedis().pipelined();
        for (int i = 0; i < 10000; i++) {
            pipeline.set("key_" + i, String.valueOf(i));
        }
        pipeline.sync();
        long pipelineEnd = System.currentTimeMillis();
        System.out.println("pipeline操作10000次字元串數據類型set寫入,耗時:" + (pipelineEnd - pipelineStart) + "毫秒");
    }
}

控制台輸出結果:

非pipeline操作10000次字元串數據類型set寫入,耗時:1843毫秒
pipeline操作10000次字元串數據類型set寫入,耗時:205毫秒

可以看到,通過pipeline管道批量操作,吞吐量性能大大提到。

重要

使用pipeline有幾個值得註意的地方:

  1. 它相比較於redis原生的字元串數據類型的批量操作命令,pipeline是非原子性的,mset原子性的。mset批量操作要麼都成功要麼都失敗,而pipeline則不能保證。
  2. mset只是set一個命令的批量操作,而pipeline則可以批量發送多個命令,這裡就存在事務的問題。

針對問題一,我們在進行批量操作時應儘可能的把批量操作拆分成小粒度的pipeline。

針對問題二,要保證多個命令的事務,就需要使用redis提供的事務相關的命令,但redis中的事務是“假事務”,因為它仍然不能保證原子性。在下一章中,會詳細介紹redis原生的簡單事務(不保證原子性),以及如何在redis中保證事務的原子性。

關註公眾號:CoderBuff,回覆“redis”獲取《Redis5.x入門教程》完整版PDF。
這是一個能給程式員加buff的公眾號 (CoderBuff)


您的分享是我們最大的動力!

-Advertisement-
Play Games
更多相關文章
  • 5種PHP生成圖片驗證碼實例,包括數字驗證碼、數字+字母驗證碼、中文驗證碼、仿google驗證碼和算術驗證碼,PHP生成驗證碼的原理:通過GD庫,生成一張帶驗證碼的圖片,並將驗證碼保存在Session中。 js驗證 1 $(function() { 2 $("#getcode_num").click ...
  • 一、前言 Xlinx的ZYNQ系列SOC集成了APU、各種專用外設資源和傳統的FPGA邏輯,為ARM+FPGA的應用提供助力,降低功耗和硬體設計難度的同時極大提高兩者間傳輸的帶寬。之前在研究生課題中使用過ZYNQ搭建環路系統對演算法進行板級驗證,但並沒有深入使用和理解這個異構平臺,今天算是對入門的總結 ...
  • 文件的基本操作 文件讀寫: 文件的讀寫滿足以下3個步驟: 1).打開文件 2).操作數據(讀、寫) 3).關閉文件 --> 不要忘記 1).打開文件: python的open() 方法用於打開一個文件,並返迴文件對象,在對文件進行處理過程都需要使用到這個函數,如果該文件無法被打開,會拋出 OSErr ...
  • 一.filter函數簡介 filter函數主要用來篩選數據,過濾掉不符合條件的元素,並返回一個迭代器對象,如果要轉換為列表list或者元祖tuple,可以使用內置函數list() 或者內置函數tuple()來轉換; filter函數接收兩個參數,第一個為函數,第二個為序列,序列的每個元素作為參數傳遞 ...
  • 一、反射: 1、反射指可以在運行時載入、探知、使用編譯期間完全未知的類。 2、程式在運行狀態中,可以動態載入一個只有名稱的類,對於任意一個已載入的類,都能夠知道這個類的所有屬性和方法; 對於任意一個對象,都能調用它的任意一個方法和屬性。 3、載入完類後,在堆記憶體中產生一個Class類型的對象(一個類 ...
  • 我們說的環境變數,一般是指的是Path環境變數。 第一步:點擊“我的電腦”,右鍵,“屬性” 第二步:點擊“高級系統設置”,彈出的視窗選“高級”選項卡,點擊“環境變數” 第三步:找到“系統變數”,滾動環境變數列表,找到“Path”這個環境變數,點擊“編輯” 第四步:添加你要讓cmd去搜尋的路徑,比如你 ...
  • 原創文章首發於公眾號:「碼農富哥」,歡迎收藏和關註,如轉載請註明出處! 什麼是HTTP緩存 HTTP 緩存可以說是HTTP性能優化中簡單高效的一種優化方式了,緩存是一種保存資源副本併在下次請求時直接使用該副本的技術,當 web 緩存發現請求的資源已經被存儲,它會攔截請求,返回該資源的拷貝,而不會去源 ...
  • 我碰到有很多測試同事,操作命令行界面的東西,總是不夠嫻熟, 操作過程中,經常出現找不到此文件,No such file or directory, 我認為這種問題,主要是路徑問題導致的, 就要從理解到當前路徑這個知識點入手。。。 當前路徑 也稱為當前工作路徑(文件夾), 一般來說,用戶只能操作當前路 ...
一周排行
    -Advertisement-
    Play Games
  • GoF之工廠模式 @目錄GoF之工廠模式每博一文案1. 簡單說明“23種設計模式”1.2 介紹工廠模式的三種形態1.3 簡單工廠模式(靜態工廠模式)1.3.1 簡單工廠模式的優缺點:1.4 工廠方法模式1.4.1 工廠方法模式的優缺點:1.5 抽象工廠模式1.6 抽象工廠模式的優缺點:2. 總結:3 ...
  • 新改進提供的Taurus Rpc 功能,可以簡化微服務間的調用,同時可以不用再手動輸出模塊名稱,或調用路徑,包括負載均衡,這一切,由框架實現並提供了。新的Taurus Rpc 功能,將使得服務間的調用,更加輕鬆、簡約、高效。 ...
  • 本章將和大家分享ES的數據同步方案和ES集群相關知識。廢話不多說,下麵我們直接進入主題。 一、ES數據同步 1、數據同步問題 Elasticsearch中的酒店數據來自於mysql資料庫,因此mysql數據發生改變時,Elasticsearch也必須跟著改變,這個就是Elasticsearch與my ...
  • 引言 在我們之前的文章中介紹過使用Bogus生成模擬測試數據,今天來講解一下功能更加強大自動生成測試數據的工具的庫"AutoFixture"。 什麼是AutoFixture? AutoFixture 是一個針對 .NET 的開源庫,旨在最大程度地減少單元測試中的“安排(Arrange)”階段,以提高 ...
  • 經過前面幾個部分學習,相信學過的同學已經能夠掌握 .NET Emit 這種中間語言,並能使得它來編寫一些應用,以提高程式的性能。隨著 IL 指令篇的結束,本系列也已經接近尾聲,在這接近結束的最後,會提供幾個可供直接使用的示例,以供大伙分析或使用在項目中。 ...
  • 當從不同來源導入Excel數據時,可能存在重覆的記錄。為了確保數據的準確性,通常需要刪除這些重覆的行。手動查找並刪除可能會非常耗費時間,而通過編程腳本則可以實現在短時間內處理大量數據。本文將提供一個使用C# 快速查找並刪除Excel重覆項的免費解決方案。 以下是實現步驟: 1. 首先安裝免費.NET ...
  • C++ 異常處理 C++ 異常處理機制允許程式在運行時處理錯誤或意外情況。它提供了捕獲和處理錯誤的一種結構化方式,使程式更加健壯和可靠。 異常處理的基本概念: 異常: 程式在運行時發生的錯誤或意外情況。 拋出異常: 使用 throw 關鍵字將異常傳遞給調用堆棧。 捕獲異常: 使用 try-catch ...
  • 優秀且經驗豐富的Java開發人員的特征之一是對API的廣泛瞭解,包括JDK和第三方庫。 我花了很多時間來學習API,尤其是在閱讀了Effective Java 3rd Edition之後 ,Joshua Bloch建議在Java 3rd Edition中使用現有的API進行開發,而不是為常見的東西編 ...
  • 框架 · 使用laravel框架,原因:tp的框架路由和orm沒有laravel好用 · 使用強制路由,方便介面多時,分多版本,分文件夾等操作 介面 · 介面開發註意欄位類型,欄位是int,查詢成功失敗都要返回int(對接java等強類型語言方便) · 查詢介面用GET、其他用POST 代碼 · 所 ...
  • 正文 下午找企業的人去鎮上做貸後。 車上聽同事跟那個司機對罵,火星子都快出來了。司機跟那同事更熟一些,連我在內一共就三個人,同事那一手指桑罵槐給我都聽愣了。司機也是老社會人了,馬上聽出來了,為那個無辜的企業經辦人辯護,實際上是為自己辯護。 “這個事情你不能怪企業。”“但他們總不能讓銀行的人全權負責, ...