MySQL優化(6):分表和讀寫分離

来源:https://www.cnblogs.com/xuyiqing/archive/2020/03/11/12463110.html
-Advertisement-
Play Games

分表 通常指:通過應用程式層,將數據劃分到不同的表中進行存儲 對比分區,分區是在伺服器層完成的分區演算法 分表會導致客戶端明顯的改變,在伺服器端出現結構相同的多張表,甚至可以把多張表分到不同的伺服器上 以賬單表為例:資料庫可能會有這樣的情況 create table bill201710( id in ...


分表

通常指:通過應用程式層,將數據劃分到不同的表中進行存儲

對比分區,分區是在伺服器層完成的分區演算法

分表會導致客戶端明顯的改變,在伺服器端出現結構相同的多張表,甚至可以把多張表分到不同的伺服器上

 

以賬單表為例:資料庫可能會有這樣的情況

create table bill201710(
id int unsigned auto_increment primary key,
user_ud int unsigned,
amount decimal(10,2),
date int
);
create table bill201711(
id int unsigned auto_increment primary key,
user_ud int unsigned,
amount decimal(10,2),
date int
);
create table bill201712(
id int unsigned auto_increment primary key,
user_ud int unsigned,
amount decimal(10,2),
date int
);

 

而是又Java等代碼進行處理,區分應該選擇哪一張表,根據傳遞的時間參數進行劃分

實際中,有一個比較麻煩的問題,主鍵ID的問題,理論上ID是不可以重覆的

解決方案:

(1)代碼層面,手動做一個自增ID,不穩妥

(2)利用資料庫,新建一張獨立地表,一張生成ID地表

create table billid(
id int unsigned auto_increment primary key
)

在插入真正的賬單之前,先去ID表取一個ID,這種方式也是常用的方式

 

分表的原因:

(1)為資料庫減壓

(2)資料庫分區演算法的局限性,也是最重要的原因

(3)數據的支持不完善,老版本mysql不支持分區

 

分區和分表都稱之為水平分割,於是有了垂直分割:

 

垂直分割:

每個表記錄數量一直,但是欄位不一致

這種方式其實不是太推薦的

無論垂直還是水平分割,本質都是把大的單位劃分為小的單位

 

橫向擴展MySQL伺服器:

由多台MySQL伺服器提供數據存儲伺服器

橫向擴展是從根本上提升資料庫性能的手段,受限於單台電腦的性能,使用多台電腦完成同一個服務的支持

比較典型的概念是:讀寫分離,負載均衡

 

讀寫分離:

由一部分MySQL伺服器提供讀操作:SELECT

另一些MySQL伺服器提供寫操作:UPDATE,DELETE,INSERT

 

以前有寫過在Java的SSM中如何配置讀寫分離:

https://www.cnblogs.com/xuyiqing/p/10648103.html

 

以及在Windows中配置MySQL的主從同步:

https://www.cnblogs.com/xuyiqing/p/10647133.html

 

負載均衡:

當存在多台伺服器提供一個任務時,需要從其中選擇某台完成當前任務,就是選擇負載均衡

負載均衡技術有很多,不如Nginx,Zuul等等,不過和MySQL不在一個層次

在mysql架構中,往往採用的是一寫多讀的架構,這裡的多台讀伺服器就需要做負載均衡

典型的負載均衡演算法有:平均輪詢,加權輪詢,負載分配

負載均衡的實現可以用中間件,也可以在Java代碼中實現

比如SpringBoot配置多個數據源,SpringCloud多謝幾個DAO層的服務,並且每個服務調用不同的數據源即可解決

 


您的分享是我們最大的動力!

-Advertisement-
Play Games
更多相關文章
  • 原文鏈接: "https://xiaoheidiannao.com/articles/Optimization For Desktop.html" 相信大家電腦用久了以後, "桌面" 肯定是亂得無法想象, "文檔" 、安裝包、 "視頻" 、 "照片" 等都放在 "桌面" 上,導致圖標占滿了整個 "桌 ...
  • LVM簡介LVM是邏輯盤捲管理(LogicalVolumeManager)的簡稱,它是Linux環境下對磁碟分區進行管理的一種機制,LVM是建立在硬碟和 分區之上的一個邏輯層,來提高磁碟分區管理的靈活性。通過LVM系統管理員可以輕鬆管理磁碟分區,如:將若幹個磁碟分區連接為一個整塊的捲組 (volum ...
  • 原帖地址:http://www.ptbird.cn/mapreduce-tempreture.html 「 Hadoop」mapreduce對溫度數據進行自定義排序、分組、分區等 一、需求說明 1、數據文件說明 hdfs中有一些存儲溫度的數據文件,以文本形式存儲,示例如下: 日期和時間中間是空格,為 ...
  • 介紹MySQL 事務的ACID特性、隔離級別以及臟讀、不可重覆讀和幻讀等內容 ...
  • 場景 Centos中Redis的下載編譯與安裝(超詳細): https://blog.csdn.net/BADAO_LIUMANG_QIZHI/article/details/103967334 Redis的啟動和關閉(前臺啟動和後臺啟動): https://blog.csdn.net/BADAO_ ...
  • DDL執行 線上伺服器執行DDL,更新表結構,需要謹慎,結構更改會導致全表被獨占鎖定(新版本有改善) 避免這種情況,使用COPY策略,而不是直接執行ALTER TABLE語句 思路:創建一個新表,滿足新要求,將舊表數據逐條導入新表,同時表上可以執行其他任務,導入的過程其他任務都記錄在日誌,導入完成後 ...
  • 關係數據結構 列:對象某一方面的特征 行:一個對象各個方面的特征 關係模型的數據結構是單一的關係,關係模型的數據結構是一張扁平的二維表,實體以及實體間的聯繫均用二維表來表示,關係模型建立在集合代數的基礎上 外碼:設F是基本關係R的一個或一組屬性,它不是R的碼,KS是基本關係S的主碼,如果F與KS相對 ...
  • NDB群集安裝 介紹 https://dev.mysql.com/doc/refman/8.0/en/mysql-cluster-basics.html NDBCLUSTER (也稱為NDB)是一種記憶體存儲引擎,提供高可用性和數據持久性功能。 的NDBCLUSTER存儲引擎可以與一系列故障切換和負載 ...
一周排行
    -Advertisement-
    Play Games
  • 移動開發(一):使用.NET MAUI開發第一個安卓APP 對於工作多年的C#程式員來說,近來想嘗試開發一款安卓APP,考慮了很久最終選擇使用.NET MAUI這個微軟官方的框架來嘗試體驗開發安卓APP,畢竟是使用Visual Studio開發工具,使用起來也比較的順手,結合微軟官方的教程進行了安卓 ...
  • 前言 QuestPDF 是一個開源 .NET 庫,用於生成 PDF 文檔。使用了C# Fluent API方式可簡化開發、減少錯誤並提高工作效率。利用它可以輕鬆生成 PDF 報告、發票、導出文件等。 項目介紹 QuestPDF 是一個革命性的開源 .NET 庫,它徹底改變了我們生成 PDF 文檔的方 ...
  • 項目地址 項目後端地址: https://github.com/ZyPLJ/ZYTteeHole 項目前端頁面地址: ZyPLJ/TreeHoleVue (github.com) https://github.com/ZyPLJ/TreeHoleVue 目前項目測試訪問地址: http://tree ...
  • 話不多說,直接開乾 一.下載 1.官方鏈接下載: https://www.microsoft.com/zh-cn/sql-server/sql-server-downloads 2.在下載目錄中找到下麵這個小的安裝包 SQL2022-SSEI-Dev.exe,運行開始下載SQL server; 二. ...
  • 前言 隨著物聯網(IoT)技術的迅猛發展,MQTT(消息隊列遙測傳輸)協議憑藉其輕量級和高效性,已成為眾多物聯網應用的首選通信標準。 MQTTnet 作為一個高性能的 .NET 開源庫,為 .NET 平臺上的 MQTT 客戶端與伺服器開發提供了強大的支持。 本文將全面介紹 MQTTnet 的核心功能 ...
  • Serilog支持多種接收器用於日誌存儲,增強器用於添加屬性,LogContext管理動態屬性,支持多種輸出格式包括純文本、JSON及ExpressionTemplate。還提供了自定義格式化選項,適用於不同需求。 ...
  • 目錄簡介獲取 HTML 文檔解析 HTML 文檔測試參考文章 簡介 動態內容網站使用 JavaScript 腳本動態檢索和渲染數據,爬取信息時需要模擬瀏覽器行為,否則獲取到的源碼基本是空的。 本文使用的爬取步驟如下: 使用 Selenium 獲取渲染後的 HTML 文檔 使用 HtmlAgility ...
  • 1.前言 什麼是熱更新 游戲或者軟體更新時,無需重新下載客戶端進行安裝,而是在應用程式啟動的情況下,在內部進行資源或者代碼更新 Unity目前常用熱更新解決方案 HybridCLR,Xlua,ILRuntime等 Unity目前常用資源管理解決方案 AssetBundles,Addressable, ...
  • 本文章主要是在C# ASP.NET Core Web API框架實現向手機發送驗證碼簡訊功能。這裡我選擇是一個互億無線簡訊驗證碼平臺,其實像阿裡雲,騰訊雲上面也可以。 首先我們先去 互億無線 https://www.ihuyi.com/api/sms.html 去註冊一個賬號 註冊完成賬號後,它會送 ...
  • 通過以下方式可以高效,並保證數據同步的可靠性 1.API設計 使用RESTful設計,確保API端點明確,並使用適當的HTTP方法(如POST用於創建,PUT用於更新)。 設計清晰的請求和響應模型,以確保客戶端能夠理解預期格式。 2.數據驗證 在伺服器端進行嚴格的數據驗證,確保接收到的數據符合預期格 ...