什麼是Redis Redis 是一個開源(BSD許可)的,記憶體中的數據結構存儲系統,它可以用作資料庫、緩存和消息中間件。 它支持多種類型的數據結構,如字元串, 散列, 列表, 集合, 有序集合與範圍查詢, bitmaps, hyperloglogs 和 地理空間(geospatial) 索引半徑查詢 ...
什麼是Redis
Redis 是一個開源(BSD許可)的,記憶體中的數據結構存儲系統,它可以用作資料庫、緩存和消息中間件。
它支持多種類型的數據結構,如字元串, 散列, 列表, 集合, 有序集合與範圍查詢, bitmaps, hyperloglogs 和 地理空間(geospatial) 索引半徑查詢。
Redis 內置了複製,LUA腳本, LRU驅動事件,事務和不同級別的磁碟持久化, 並通過 Redis哨兵(Sentinel)和自動分區(Cluster)提供高可用性。
以上來自redis.cn 上的介紹,簡單的說,Redis是一個支持多種數據結構並且能夠持久化的高性能NoSQL 資料庫。
Redis 的存儲實現
Redis作為一個性能高達10萬qps的key/value存儲類型的NoSQL資料庫,大致的存儲實現體系如下:
一個RedisServer包含了N個redisDb,redisDb有dict的指針和失效時間的指針,核心是dictEntry 指針鏈表的指針,每一個具體的dictEntry鏈表節點存儲了任意類型的key 和 value,不論是key還是value 都可以是redisObject。可以認為,指針鏈表的特性對redis的性能做出重要的作用。
Redis 中的數據結構與存儲實現關係如下:
INT壓縮存儲String,常量數字對象是共用的。SDS 存儲string,變長的字元數組以及共用的常用字元串等。雙端列表LINKEDLIST來存儲list,支持雙向遍歷。HT是hash表,存儲set和hash,根據填充率縮放,支持事件觸發。INTSET壓縮存儲set,編碼為int16_t/ int32_t/ int64_t。SKIPLIST存儲有序集,聯合dict處理zset。ZIPLIST通過雙端指針壓縮存儲hash、list和zset。
Redis存儲實現中的網路模型支持Epoll/Select/Kqueue等,事件模型主要是TimeEvent/FileEvent。由於FileEvent處理器是單線程的,所以 redis 是單線程的模型。Redis 單線程模型是純記憶體操作,核心是基於非阻塞的 IO 多路復用機制,單線程反而避免了多線程的頻繁上下文切換問題,因而整體的存儲實現性能很高。
Redis 的常見命令集
Redis 簡潔易用,為了方便記憶,命令集分類如下:
訪問Redis的客戶端類型豐富,幾乎涵蓋了大多數的主流編程語言:
Redis 的集群部署
Redis 自2.4 版本開始就可以在生產環境上穩定可用了,在2.6版本引入了Lua腳本和Watch dog,2.8版本對主從同步進行了優化,並開始支持Sentinel 和 HyperLog。Redis 2.x 的集群主要是通過主從同步實現的,數據是非同步複製和增量同步。
有限狀態機在主從同步和數據持久化方面起到了重要的作用。數據持久化是通過快照實現的,通信協議是RESP,一種便於實現和理解的二進位安全協議。AOF 最終通過fsync寫入磁碟實現數據的持久化。
從3.0開始,Redis 支持cluster,cluster內部的各節點間採用的Gossip分散式協議。通過多數原則判斷節點是否宕機,由gossip協議傳播判活信息,選舉出新的替代者,由gossip協議傳播選舉結果。
Redis 集群可以實現自動故障切換,副本遷移和線上的重新分片。分片變化,數據遷移同樣通過gossip協議達成一致。
然而,Redis cluster 同樣存在著不足,例如隨著節點的增加,故障切換會有大幅的增加,gossip傳播信息需要一段時間,整機房切換比較慢。按key同步阻塞的遷移對讀寫影響較大,Gossip協議的調試非常困難,給故障的排除會帶來諸多的不便。
關註redis 的官方網站,可以看到redis 4.0 以來的諸多新變化。
Redis 的常見應用
Redis 的應用十分廣泛,在key/value 的NoSQL中有著突出的性能體現,甚至和文檔型NoSQL——MongoDB 在某些方面有著類似的作用。Redis, Memcache和MongoDB 的對比如下圖所示:
根據用戶標識獲取用戶的相關數據在互聯網應用中是一種常見的場景,這類數據具有讀寫量大,但單條數據不長,並且對某些欄位經常進行更新等特點,一般都會使用redis 這樣類型key/value 資料庫來實現。Redis在記憶體中對數字進行遞增或遞減的操作實現的非常好。集合(Set)和有序集合(Sorted Set)也使得在執行這些操作時非常簡單,Redis正好提供了這兩種數據結構,因而對排行榜類的場景
對於分散式鎖的業務,Redis 可以提供高性能的分散式鎖服務,例如電商業務的秒殺場景,全局自增ID等等。
對於系統架構而言, Redis 有時候甚至成為了緩存的代名詞,關於Redis 在分散式緩存方面的各種應用,可以參考《深入分散式緩存——從原理到應用》一書中的諸多章節。
深入Redis,還可以發現很多有趣的用法,例如將redis 作為消息隊列等等,一文難以描述Redis,但可以作為全棧需要掌握的一個基礎。
最後
私信回覆 資料 領取一線大廠Java面試題總結+阿裡巴巴泰山手冊+各知識點學習思維導+一份300頁pdf文檔的Java核心知識點總結!
這些資料的內容都是面試時面試官必問的知識點,篇章包括了很多知識點,其中包括了有基礎知識、Java集合、JVM、多線程併發、spring原理、微服務、Netty 與RPC 、Kafka、日記、設計模式、Java演算法、資料庫、Zookeeper、分散式緩存、數據結構等等。
作者: 半吊子全棧工匠