翻譯|使用 StatefulSet 運行資料庫應用

来源:https://www.cnblogs.com/radondb/archive/2022/08/24/16618841.html
-Advertisement-
Play Games

本文介紹 Kubernetes 支持資料庫等有狀態應用的常見解決方案:StatefulSet。 在構建機器學習向量管理層時,我們面臨的一個重要問題:如何持久化數據以避免數據丟失? 在閱讀了許多資料庫企業發佈的博客後,我們認為 StatefulSet[1] 是實現這個目標的可行方法。 我們研究了不同的 ...


本文介紹 Kubernetes 支持資料庫等有狀態應用的常見解決方案:StatefulSet。

在構建機器學習向量管理層時,我們面臨的一個重要問題:如何持久化數據以避免數據丟失?

在閱讀了許多資料庫企業發佈的博客後,我們認為 StatefulSet[1] 是實現這個目標的可行方法。

我們研究了不同的資料庫,包括 Cockroach、MySQL、MongoDB、Cassandra、PostgreSQL、Dgraph 和 Redis。我們還研究了 Kafka 和 Zookeeper,因為它們都需要持久化狀態。我們選擇這些資料庫是基於兩方面:

  • 它們是業界廣泛使用的資料庫解決方案,並可以部署在 Kubernetes 上。其中一些是雲原生資料庫,如 Cockroach。
  • 這些有狀態應用是不同類型的,比如 MySQL 是關係型資料庫,MongoDB 是非關係型資料庫。研究不同類型的資料庫讓我們對使用 StatefulSet 方案更加自信。

下麵列出了一些關於如何使用 StatefulSet 在 Kubernetes 中部署不同資料庫或有狀態應用程式的文章。

Cockroach

  • 3 ways to master stateful apps in Kubernetes[2],

Kubernetes 有兩種方法管理狀態:DaemonSet 和 StatefulSet,但是 Cockroach 強烈建議使用 StatefulSet。

  • How to Run CockroachDB on Kubernetes[3]Deploy a Local Cluster with Kubernetes[4]

MySQL

  • Run a Replicated Stateful Application[5]
  • Kubernetes StatefulSet — Example & Best Practices[6]

這篇文章介紹了使用 Kubernetes StatefulSet 部署 MySQL 的端到端流程。

MongoDB

  • Running MongoDB on Kubernetes with StatefulSets[7]
  • How to Run MongoDB on Kubernetes[8]

Cassandra

  • Deploying Cassandra with a StatefulSet[9]

PostgreSQL

  • Deploying PostgreSQL as a StatefulSet in Kubernetes[10]

Dgraph[11]

Redis

  • Deploying Redis Cluster on Kubernetes[12]

Kafka

  • Set-up Kafka Cluster Using Kubernetes StatefulSet[13]

Zookeeper

  • Running Zookeeper, A Distributed System Coordinator[14]

基於上述文章,我們將開始使用 StatefulSet,看看它是否能夠滿足我們的應用場景。

原文鏈接:https://medium.com/@junxie2/kubernetes-statefulset-for-db-applications-7fd186c6ccb9

參考引用

1.StatefulSet: https://kubernetes.io/zh-cn/docs/tutorials/stateful-application/basic-stateful-set/

2.3 ways to master stateful apps in Kubernetes:https://www.cockroachlabs.com/blog/kubernetes-orchestrate-sql-with-cockroachdb/

3.How to Run CockroachDB on Kubernetes:https://www.cockroachlabs.com/blog/running-cockroachdb-on-kubernetes/

4.Deploy a Local Cluster with Kubernetes:https://www.cockroachlabs.com/docs/stable/orchestrate-a-local-cluster-with-kubernetes.html

5.Run a Replicated Stateful Application:https://kubernetes.io/docs/tasks/run-application/run-replicated-stateful-application/

6.Kubernetes StatefulSet — Example & Best Practices:https://loft.sh/blog/kubernetes-statefulset-examples-and-best-practices/

7.Running MongoDB on Kubernetes with StatefulSets:https://kubernetes.io/blog/2017/01/running-mongodb-on-kubernetes-with-statefulsets/

8.How to Run MongoDB on Kubernetes:https://kubernetes.io/blog/2017/01/running-mongodb-on-kubernetes-with-statefulsets/

9.Deploying Cassandra with a StatefulSet:https://kubernetes.io/docs/tutorials/stateful-application/cassandra/

10.Deploying PostgreSQL as a StatefulSet in Kubernetes:https://www.bmc.com/blogs/kubernetes-postgresql/

11.Dgraph:https://dgraph.io/docs/deploy/kubernetes/

12.Deploying Redis Cluster on Kubernetes:https://www.containiq.com/post/deploy-redis-cluster-on-kubernetes

13.Set-up Kafka Cluster Using Kubernetes StatefulSet:https://medium.com/@knoldus/set-up-kafka-cluster-using-kubernetes-statefulset-30d73d25864b

14.Running Zookeeper, A Distributed System Coordinator:https://kubernetes.io/docs/tutorials/stateful-application/zookeeper/


您的分享是我們最大的動力!

-Advertisement-
Play Games
更多相關文章
  • 一、困境頻生 前端代碼管理何解? 前端代碼管理一直是困擾不少前端開發團隊的難題,從開發到發佈的整體工作流程中,除了常規的技術問題外,往往還伴隨著溝通成本、維護成本及協作效率等問題。這些問題在團隊規模較小的時候可能不太明顯,但是當團隊規模變大時就矛盾越發凸顯。 數棧前端開發團隊負責著離線開發,實時開發 ...
  • 前面已經講了MySQL的其他查詢性能優化方式,沒看過可以去瞭解一下: MySQL查詢性能優化七種武器之索引潛水 MySQL查詢性能優化七種武器之鏈路追蹤 今天要講的是MySQL的另一種查詢性能優化方式 — 索引下推(Index Condition Pushdown,簡稱ICP),是MySQL5.6版... ...
  • RadonDB MySQL Kubernetes[1] 於近日正式發佈新版本 2.2.1[2]。該版本主要在用戶管理、高可用組件等進行了優化,並修複一些問題。 致謝 感謝 @runkecheng @acekingke @zhl003 @qianfen2021 @hayleyling 提交的修改。 新 ...
  • NVIDIA InfiniBand是一種被廣泛使用的網路互聯技術,基於IBTA(InfiniBand Trade Association)而定義的高帶寬、低延時、低CPU占用率、大規模易擴展的通信技術,是世界領先的超級電腦的互連首選,為高性能計算、人工智慧、雲計算、存儲等眾多數據密集型應用提供了強 ...
  • ORC文件是以二進位的方式存儲的,不可以直接讀取,但由於ORC的自描述特性,其讀寫不依賴於 Hive Metastore 或任何其他外部元數據。本身存儲了文件數據、數據類型及編碼信息。因為文件是自包含的,所以讀取ORC文件數據無需考慮用戶使用環境。 ...
  • ps:此隨筆基於mysql 5.7.*版本。 已知root賬戶密碼進行登錄 格式:mysql [-h地址] [-p埠] -u用戶名 -p密碼 省略不寫地址或埠則自動使用預設。(地址:localhost;埠:3306) 兩種方式進行登錄。方式1: 方式2: 忘記root賬戶密碼進行登錄(修改r ...
  • 騰訊雲資料庫一直致力於推動資料庫基礎研究創新、資料庫產學研合作生態建設,助力國產資料庫學術人才培養和技術創新生態建設發展。 為讓更多資料庫從業者瞭解資料庫領域的最新研究成果,熟悉更多行業前沿發展趨勢,更好地探索前沿技術創新,8月16日下午,騰訊雲資料庫邀請到華南師範大學二級教授 湯庸、長江學者 毛睿 ...
  • 在7月28日的袋鼠雲2022產品發佈會上,基於對現在與未來的暢想,袋鼠雲產研負責人思樞正式發佈了全新的四大產品體系。 其中的數棧DTinsight,相信大家都很熟悉了,不同於數駒這位新朋友,數棧作為袋鼠雲和大家經常見面的“老朋友”,在保持初心的同時,這次也有了一些不一樣的變化。 作為袋鼠雲打造的一站 ...
一周排行
    -Advertisement-
    Play Games
  • 移動開發(一):使用.NET MAUI開發第一個安卓APP 對於工作多年的C#程式員來說,近來想嘗試開發一款安卓APP,考慮了很久最終選擇使用.NET MAUI這個微軟官方的框架來嘗試體驗開發安卓APP,畢竟是使用Visual Studio開發工具,使用起來也比較的順手,結合微軟官方的教程進行了安卓 ...
  • 前言 QuestPDF 是一個開源 .NET 庫,用於生成 PDF 文檔。使用了C# Fluent API方式可簡化開發、減少錯誤並提高工作效率。利用它可以輕鬆生成 PDF 報告、發票、導出文件等。 項目介紹 QuestPDF 是一個革命性的開源 .NET 庫,它徹底改變了我們生成 PDF 文檔的方 ...
  • 項目地址 項目後端地址: https://github.com/ZyPLJ/ZYTteeHole 項目前端頁面地址: ZyPLJ/TreeHoleVue (github.com) https://github.com/ZyPLJ/TreeHoleVue 目前項目測試訪問地址: http://tree ...
  • 話不多說,直接開乾 一.下載 1.官方鏈接下載: https://www.microsoft.com/zh-cn/sql-server/sql-server-downloads 2.在下載目錄中找到下麵這個小的安裝包 SQL2022-SSEI-Dev.exe,運行開始下載SQL server; 二. ...
  • 前言 隨著物聯網(IoT)技術的迅猛發展,MQTT(消息隊列遙測傳輸)協議憑藉其輕量級和高效性,已成為眾多物聯網應用的首選通信標準。 MQTTnet 作為一個高性能的 .NET 開源庫,為 .NET 平臺上的 MQTT 客戶端與伺服器開發提供了強大的支持。 本文將全面介紹 MQTTnet 的核心功能 ...
  • Serilog支持多種接收器用於日誌存儲,增強器用於添加屬性,LogContext管理動態屬性,支持多種輸出格式包括純文本、JSON及ExpressionTemplate。還提供了自定義格式化選項,適用於不同需求。 ...
  • 目錄簡介獲取 HTML 文檔解析 HTML 文檔測試參考文章 簡介 動態內容網站使用 JavaScript 腳本動態檢索和渲染數據,爬取信息時需要模擬瀏覽器行為,否則獲取到的源碼基本是空的。 本文使用的爬取步驟如下: 使用 Selenium 獲取渲染後的 HTML 文檔 使用 HtmlAgility ...
  • 1.前言 什麼是熱更新 游戲或者軟體更新時,無需重新下載客戶端進行安裝,而是在應用程式啟動的情況下,在內部進行資源或者代碼更新 Unity目前常用熱更新解決方案 HybridCLR,Xlua,ILRuntime等 Unity目前常用資源管理解決方案 AssetBundles,Addressable, ...
  • 本文章主要是在C# ASP.NET Core Web API框架實現向手機發送驗證碼簡訊功能。這裡我選擇是一個互億無線簡訊驗證碼平臺,其實像阿裡雲,騰訊雲上面也可以。 首先我們先去 互億無線 https://www.ihuyi.com/api/sms.html 去註冊一個賬號 註冊完成賬號後,它會送 ...
  • 通過以下方式可以高效,並保證數據同步的可靠性 1.API設計 使用RESTful設計,確保API端點明確,並使用適當的HTTP方法(如POST用於創建,PUT用於更新)。 設計清晰的請求和響應模型,以確保客戶端能夠理解預期格式。 2.數據驗證 在伺服器端進行嚴格的數據驗證,確保接收到的數據符合預期格 ...