GeminiDB全面聯動MySQL:熱點數據,一鍵加速

来源:https://www.cnblogs.com/huaweiyun/p/18268343
-Advertisement-
Play Games

華為雲記憶體加速的“全自動主動緩存方案”,可通過界面可視化配置,支持用戶將MySQL表數據映射為GeminiDB中的Hash等結構,同時還支持數據過濾及過期等功能,配置完成後即可實現自動同步,不僅簡單易用還能提升效率。 ...


華為雲記憶體加速的“全自動主動緩存方案”,可通過界面可視化配置,支持用戶將MySQL表數據映射為GeminiDB中的Hash等結構,同時還支持數據過濾及過期等功能,配置完成後即可實現自動同步,不僅簡單易用還能提升效率。

什麼是記憶體加速

傳統的MySQL+Cache架構,用戶把數據寫入MySQL後,同時還需要將數據更新到緩存中,開發效率低。為了優化MySQL“傳統被動緩存方案”,GeminiDB Redis介面推出了記憶體加速功能。

該功能能夠實現MySQL到GeminiDB的數據聯動,用戶只需在MySQL中寫入一次數據, 便可以從GeminiDB Redis介面中加速數據讀取,實現數據的自動同步, 極大提升開發效率。

如下圖所示,“傳統被動緩存方案”效率低、不可靠,而華為雲記憶體加速的“全自動主動緩存方案”,可通過界面可視化配置,支持用戶將MySQL表數據映射為GeminiDB中的Hash等結構,同時還支持數據過濾及過期等功能,配置完成後即可實現自動同步,不僅簡單易用還能提升效率。

如何使用記憶體加速

在已有的 MySQL 實例內開啟記憶體加速需要兩步:創建GeminiDB實例和創建映射規則。

第一步:創建GeminiDB實例。

  • 登錄管理控制台;
  • 在服務列表中選擇“資料庫 > 雲資料庫RDS for MySQL”;
  • 在“實例管理”頁面,選擇指定的實例,單擊實例名稱;
  • 在左側導航樹,單擊“記憶體加速”;
  • 如果沒有開啟記憶體加速,那麼“記憶體加速”頁面顯示如下;此時需要單擊“創建GeminiDB實例”按鈕開啟記憶體加速。

 

第二步:創建映射規則。

GeminiDB實例創建完成後,記憶體加速會變成如下的界面,點擊“創建映射規則”進一步配置;

使用示例

1. 首先在源實例 MySQL 中創建一個 db1 資料庫,併在 db1 中創建一個 students 表,具體的 SQL 如下:

mysql> CREATE DATABASE db1;
Query OK, 1 row affected (0.00 sec)
mysql> CREATE TABLE db1.students(
 -> sid INT UNSIGNED PRIMARY KEY AUTO_INCREMENT NOT NULL,
 -> sname VARCHAR(20),
 -> sclass INT,
 -> sgender VARCHAR(10),
 -> sbirthday DATE
 -> );
Query OK, 0 rows affected (0.00 sec)
mysql> DESC db1.students;
+-----------+--------------+------+-----+---------+----------------+
| Field | Type | Null | Key | Default | Extra |
+-----------+--------------+------+-----+---------+----------------+
| sid | int unsigned | NO | PRI | NULL | auto_increment |
| sname | varchar(20) | YES | | NULL | |
| sclass | int | YES | | NULL | |
| sgender | varchar(10) | YES | | NULL | |
| sbirthday | date | YES | | NULL | |
+-----------+--------------+------+-----+---------+----------------+
5 rows in set (0.00 sec)

2. 建表後,在“記憶體加速”界面,創建一條映射規則,將students表中的每一行記錄轉換為一個Redis的hash key。

該 hash 的鍵(key)由”資料庫名:數據表名:sid:<sid的值>”構成,而域-值(field-value)由選中的“sname,sclass,sgender,sbirthday”構成。

3. 映射規則創建成功後,可以在映射規則列表中看到該規則以及對應的運行狀態:

4. 在 MySQL 側對 students 表插入一條新數據:

mysql> INSERT INTO db1.students (sname, sclass, sgender, sbirthday) VALUES ('zhangsan', 1, 'male', '2015-05-20');
Query OK, 1 row affected (0.01 sec)
mysql> SELECT * FROM db1.students;
+-----+----------+--------+---------+------------+
| sid | sname | sclass | sgender | sbirthday |
+-----+----------+--------+---------+------------+
| 1 | zhangsan | 1 | male | 2015-05-20 |
+-----+----------+--------+---------+------------+
1 row in set (0.00 sec)

由於已配置映射規則,會把MySQL該數據自動同步到 GeminiDB 中,此時在 GeminiDB 中使用hash命令可以查詢到該key

127.0.0.1:6379> HGETALL db1:students:sid:1
1) "sbirthday"
2) "2015-05-20"
3) "sclass"
4) "1"
5) "sgender"
6) "male"
7) "sname"
8) "zhangsan"

同理,在MySQL中更新數據、刪除數據也會及時在GeminiDB中更新,更多示例可參考官網文檔:管理映射規則

常見問題:

1. 記憶體加速功能,會把所有數據全部緩存到GeminiDB嗎?還是什麼策略?

不是,需要用戶通過界面操作:指定MySQL表空間(db)、表名(table)、欄位(field)到GeminiDB的轉換規則。配置好後,符合規則的數據會自動同步到GeminiDB。

2. GeminiDB數據會不斷增長膨大,需要擴容嗎?如何進行緩存數據管理?

GeminiDB預設每條數據設置30天過期時間,用戶也可以靈活調整;如果數據不斷增長,需要及時擴容GeminiDB存儲空間。

3. RDS for MySQL到GeminiDB數據延遲大概在多少?都受哪些因素影響?

可以做到實時同步,建議用戶實測。

時延可能受到以下因素限制:

  • RDS for MySQL到GeminiDB本身的物理距離,通常建議同Region;
  • 避免GeminiDB的實例規格過小,通常建議同CPU規格。

4. 對源端MySQL影響如何?

主要工作原理是訂閱MySQL的binlog,對源端幾乎無影響。

當前記憶體加速功能已經在公測,公測範圍:北京四、上海一、廣州,用戶可以創建免費GeminiDB規格,快來試用吧!

公測公告:https://support.huaweicloud.com/bulletin-nosql/nosql_OBTnotice_003.html

 

點擊關註,第一時間瞭解華為雲新鮮技術~

 


您的分享是我們最大的動力!

-Advertisement-
Play Games
更多相關文章
  • 本篇實際上對博客園大佬【酷酷的洛克】的教程的細分講解,原文鏈接:NavicatPremium16破解 使用Windows系統的同學第一步是先關掉系統安全防護,不然破解工具會被視為病毒,OS自動就給你刪掉了。關閉方法請參考此文:臨時關閉Windows安全中心 之後按照正常流程先將Navicat_Pre ...
  • 《誰說菜鳥不會數據分析(SPSS篇)》繼續採用職場三人行的方式來構建內容,細緻梳理了準專業數據分析的常見問題,並且挑選出企業實踐中最容易碰到的案例,以最輕鬆直白的方式來講好數據分析的故事。 ...
  • 在當下的企業管理中,由於數據量的激增,管理方式逐漸從基於經驗轉向基於數據。在此過程中,我們能夠通過數據探查業務情況、分析數據,從而獲取更優的決策支持數據。這通常通過數據報表或分析平臺來實現,對於臨時性場景,則會基於日常取數方式進行臨時數據分析。 但在此過程中,由於數據源的多樣性、數據結果呈現的多樣性 ...
  • 官方文檔地址:https://dolphinscheduler.apache.org/zh-cn/docs/3.1.9 DolphinScheduler簡介 摘自官網:Apache DolphinScheduler 是一個分散式易擴展的可視化DAG工作流任務調度開源系統。適用於企業級場景,提供了一個 ...
  • 本系列文章是 DolphinScheduler 由淺入深的教程,涵蓋搭建、二開迭代、核心原理解讀、運維和管理等一系列內容。適用於想對 DolphinScheduler瞭解或想要加深理解的讀者。 祝開卷有益。 本系列教程基於 DolphinScheduler 2.0.5 做的優化。(穩定版推薦使 ...
  • 6月19-20日,由中國通信標準化協會主辦,中國通信標準化協會大數據技術標準推進委員會(CCSA TC601)承辦的首屆“數據智能大會”隆重召開。會議期間,天翼雲科技有限公司攜手中國信息通信研究院雲計算與大數據研究所共同發佈《大數據平臺雲化改造實踐指南(2024年)》 ...
  • 在當今數據驅動的時代,企業對數據的實施性能力提出了前所未有的高要求。為了應對這一挑戰,構建高效、靈活且可擴展的實時湖倉成為數字化轉型的關鍵。本文將深入探討袋鼠雲數棧如何通過三大核心實踐——ChunJun 融合 Flink CDC、MySQL 一鍵入湖至 Paimon 的實踐,以及湖倉一體治理 Pai ...
  • 分享是最有效的學習方式。 博客:https://blog.ktdaddy.com/ 故事 梅雨季,悶熱的夜,令人窒息,窗外一道道閃電劃破漆黑的夜幕,小貓塞著耳機聽著恐怖小說,輾轉反側,終於睡意來了,然而挨千刀的手機早不振晚不振,偏偏這個時候振動了一下,一個激靈,沒有按捺住對內容的好奇,點開了簡訊,卧 ...
一周排行
    -Advertisement-
    Play Games
  • 移動開發(一):使用.NET MAUI開發第一個安卓APP 對於工作多年的C#程式員來說,近來想嘗試開發一款安卓APP,考慮了很久最終選擇使用.NET MAUI這個微軟官方的框架來嘗試體驗開發安卓APP,畢竟是使用Visual Studio開發工具,使用起來也比較的順手,結合微軟官方的教程進行了安卓 ...
  • 前言 QuestPDF 是一個開源 .NET 庫,用於生成 PDF 文檔。使用了C# Fluent API方式可簡化開發、減少錯誤並提高工作效率。利用它可以輕鬆生成 PDF 報告、發票、導出文件等。 項目介紹 QuestPDF 是一個革命性的開源 .NET 庫,它徹底改變了我們生成 PDF 文檔的方 ...
  • 項目地址 項目後端地址: https://github.com/ZyPLJ/ZYTteeHole 項目前端頁面地址: ZyPLJ/TreeHoleVue (github.com) https://github.com/ZyPLJ/TreeHoleVue 目前項目測試訪問地址: http://tree ...
  • 話不多說,直接開乾 一.下載 1.官方鏈接下載: https://www.microsoft.com/zh-cn/sql-server/sql-server-downloads 2.在下載目錄中找到下麵這個小的安裝包 SQL2022-SSEI-Dev.exe,運行開始下載SQL server; 二. ...
  • 前言 隨著物聯網(IoT)技術的迅猛發展,MQTT(消息隊列遙測傳輸)協議憑藉其輕量級和高效性,已成為眾多物聯網應用的首選通信標準。 MQTTnet 作為一個高性能的 .NET 開源庫,為 .NET 平臺上的 MQTT 客戶端與伺服器開發提供了強大的支持。 本文將全面介紹 MQTTnet 的核心功能 ...
  • Serilog支持多種接收器用於日誌存儲,增強器用於添加屬性,LogContext管理動態屬性,支持多種輸出格式包括純文本、JSON及ExpressionTemplate。還提供了自定義格式化選項,適用於不同需求。 ...
  • 目錄簡介獲取 HTML 文檔解析 HTML 文檔測試參考文章 簡介 動態內容網站使用 JavaScript 腳本動態檢索和渲染數據,爬取信息時需要模擬瀏覽器行為,否則獲取到的源碼基本是空的。 本文使用的爬取步驟如下: 使用 Selenium 獲取渲染後的 HTML 文檔 使用 HtmlAgility ...
  • 1.前言 什麼是熱更新 游戲或者軟體更新時,無需重新下載客戶端進行安裝,而是在應用程式啟動的情況下,在內部進行資源或者代碼更新 Unity目前常用熱更新解決方案 HybridCLR,Xlua,ILRuntime等 Unity目前常用資源管理解決方案 AssetBundles,Addressable, ...
  • 本文章主要是在C# ASP.NET Core Web API框架實現向手機發送驗證碼簡訊功能。這裡我選擇是一個互億無線簡訊驗證碼平臺,其實像阿裡雲,騰訊雲上面也可以。 首先我們先去 互億無線 https://www.ihuyi.com/api/sms.html 去註冊一個賬號 註冊完成賬號後,它會送 ...
  • 通過以下方式可以高效,並保證數據同步的可靠性 1.API設計 使用RESTful設計,確保API端點明確,並使用適當的HTTP方法(如POST用於創建,PUT用於更新)。 設計清晰的請求和響應模型,以確保客戶端能夠理解預期格式。 2.數據驗證 在伺服器端進行嚴格的數據驗證,確保接收到的數據符合預期格 ...