大型網站架構演進(7)資料庫拆分

来源:http://www.cnblogs.com/mcgrady/archive/2017/07/25/7232428.html
-Advertisement-
Play Games

能過資料庫的讀寫分離和使用NoSQL,以及搜索引擎後,能夠降低主庫的壓力,解決數據存儲方面的問題,不過隨著業務的繼續發展,我們的資料庫主庫還是會遇到性能瓶頸,所以為了減小資料庫主庫的壓力,我們有資料庫垂直拆分和水平拆分兩種方式。 資料庫拆分 資料庫拆分有兩種方法,垂直拆分和水平拆分。 垂直拆分 垂直 ...


  能過資料庫的讀寫分離和使用NoSQL,以及搜索引擎後,能夠降低主庫的壓力,解決數據存儲方面的問題,不過隨著業務的繼續發展,我們的資料庫主庫還是會遇到性能瓶頸,所以為了減小資料庫主庫的壓力,我們有資料庫垂直拆分和水平拆分兩種方式。

資料庫拆分

資料庫拆分有兩種方法,垂直拆分和水平拆分。

垂直拆分

垂直拆分的意思是把資料庫中不同業務的數據拆分到不同的資料庫中。比如我們商旅系統中原來將機票,酒店和火車票的訂單放在一個庫中,如果是垂直拆分的話,就是將機票,酒店和火車票拆分到不同的資料庫中。

這種方式解決了把所有業務數據放在一個資料庫中的壓力問題,但是同時會帶來兩個問題:

1,應用需要配置多個數據源。

2,如何處理原來單機的跨業務的事務問題,常用的解決方案是使用分散式事務,而另一種解決方案是,去掉事務或者不去追求強事務支持。

那麼,使用垂直拆分後的架構如下圖:

 

水平拆分

水平拆分一般是在某個數據表的數據量達到了單個資料庫的瓶頸,這時可以把這個數據表拆分到兩個或多個資料庫中。

資料庫水平拆分與資料庫讀寫分離的區別是,讀寫分離解決的是讀壓力大的問題,對於數據量大或者更新量大的情形並不會有效果,資料庫水平拆分與垂直拆分的區別是,垂直拆分是把不同的數據表拆分到不同的資料庫中,而水平拆分是把同一個表拆分到不同的資料庫中。

水平拆分解決了單表數據量過大的問題,但同時帶來了以下幾個問題:

1,要解決sql路由的問題,比如現在用戶信息被分在了兩個資料庫中,在進行資料庫操作的時候需要知道數據在哪個資料庫中。

2,數據表主鍵的處理問題,原來使用自增欄位作為主鍵的現在變得不適用了,因為有可能重覆。

3,當某個查詢需要從兩個或多個資料庫中獲取數據時,就比較難處理了。

先來看下使用水平拆分後的架構圖:

總結:雖然使用資料庫拆分可以有效地減輕資料庫主庫的壓力,但是同時帶來很多的問題,比如事務的問題,實現起來比較困難,應用程式也要做比較大的改動,相對於資料庫拆分,更常見的做法是業務拆分,請看下一篇總結。


您的分享是我們最大的動力!

-Advertisement-
Play Games
更多相關文章
  • 首先創建 WPF Server 端,新建一個 WPF 項目 安裝 Nuget 包 替換 MainWindows 的Xaml代碼 替換 MainWindows 後臺代碼 創建 WPF Client 端,新建一個 WPF 項目 安裝 Nuget 包 替換 MainWindow 的前臺 xmal 文件 替 ...
  • 100多行代碼實現6秒完成50萬條多線程併發日誌文件寫入,支持日誌文件分隔 日誌工具類代碼: using System; using System.Collections.Concurrent; using System.Collections.Generic; using System.IO; u ...
  • 隨著業務越拆越小,而且各個應用又是獨立部署和維護的,這樣的架構存在以下問題: 1,資料庫連接數的問題,如果各個應用都連接現有資料庫,當使用集群和併發訪問量大的情形下,就會導致資料庫連接數超過限制。當然,如果各個應用都有自己的資料庫,則不存在這個問題。 2,代碼復用的問題,有些基礎信息在各個應用中都存 ...
  • Elasticsearch,Kibana,Logstash,NLog實現ASP.NET Core 分散式日誌系統,一定有你想看的東西。 ...
  • 基本配置及說明 版本控制有助於及時推出功能,而不會破壞現有系統。 它還可以幫助為選定的客戶提供額外的功能。 API版本可以通過不同的方式完成,例如在URL中添加版本或通過自定義標頭和通過Accept Header作為查詢字元串參數。 在這篇文章中,我們來看看如何支持多版本的ASP.NET Core ...
  • 大型網站為了應對日益複雜的業務需求,通過使用分而治之的手段將整個網站的業務分成不同的產品線,然後交給不同的開發團隊負責。這樣一方面方便應用的擴展和維護,同時不同的應用對應不同的資料庫,也減小了原來所有業務數據都在一個資料庫的壓力。 業務拆分 原來一個網站拆分成多個不同的應用後,每個應用都是獨立部署維 ...
  • /// /// 顏色擴展類 /// public static class ColorExtensions { /// /// .NET預定義的系統顏色緩存列表 /// private static readonly Dictionary ColorCache; /// /// 擁有相同顏色代碼值的... ...
  • 單例模式是設計模式中最簡單的形式之一。這一模式的目的是使得類的一個對象成為系統中的唯一實例。對於系統中的某些類來說,只有一個實例很重要,例如,一個系統中可以存在多個列印任務,但是只能有一個正在工作的任務;一個系統只能有一個視窗管理器或文件系統;一個系統只能有一個計時工具或ID(序號)生成器。 顯然單 ...
一周排行
    -Advertisement-
    Play Games
  • 移動開發(一):使用.NET MAUI開發第一個安卓APP 對於工作多年的C#程式員來說,近來想嘗試開發一款安卓APP,考慮了很久最終選擇使用.NET MAUI這個微軟官方的框架來嘗試體驗開發安卓APP,畢竟是使用Visual Studio開發工具,使用起來也比較的順手,結合微軟官方的教程進行了安卓 ...
  • 前言 QuestPDF 是一個開源 .NET 庫,用於生成 PDF 文檔。使用了C# Fluent API方式可簡化開發、減少錯誤並提高工作效率。利用它可以輕鬆生成 PDF 報告、發票、導出文件等。 項目介紹 QuestPDF 是一個革命性的開源 .NET 庫,它徹底改變了我們生成 PDF 文檔的方 ...
  • 項目地址 項目後端地址: https://github.com/ZyPLJ/ZYTteeHole 項目前端頁面地址: ZyPLJ/TreeHoleVue (github.com) https://github.com/ZyPLJ/TreeHoleVue 目前項目測試訪問地址: http://tree ...
  • 話不多說,直接開乾 一.下載 1.官方鏈接下載: https://www.microsoft.com/zh-cn/sql-server/sql-server-downloads 2.在下載目錄中找到下麵這個小的安裝包 SQL2022-SSEI-Dev.exe,運行開始下載SQL server; 二. ...
  • 前言 隨著物聯網(IoT)技術的迅猛發展,MQTT(消息隊列遙測傳輸)協議憑藉其輕量級和高效性,已成為眾多物聯網應用的首選通信標準。 MQTTnet 作為一個高性能的 .NET 開源庫,為 .NET 平臺上的 MQTT 客戶端與伺服器開發提供了強大的支持。 本文將全面介紹 MQTTnet 的核心功能 ...
  • Serilog支持多種接收器用於日誌存儲,增強器用於添加屬性,LogContext管理動態屬性,支持多種輸出格式包括純文本、JSON及ExpressionTemplate。還提供了自定義格式化選項,適用於不同需求。 ...
  • 目錄簡介獲取 HTML 文檔解析 HTML 文檔測試參考文章 簡介 動態內容網站使用 JavaScript 腳本動態檢索和渲染數據,爬取信息時需要模擬瀏覽器行為,否則獲取到的源碼基本是空的。 本文使用的爬取步驟如下: 使用 Selenium 獲取渲染後的 HTML 文檔 使用 HtmlAgility ...
  • 1.前言 什麼是熱更新 游戲或者軟體更新時,無需重新下載客戶端進行安裝,而是在應用程式啟動的情況下,在內部進行資源或者代碼更新 Unity目前常用熱更新解決方案 HybridCLR,Xlua,ILRuntime等 Unity目前常用資源管理解決方案 AssetBundles,Addressable, ...
  • 本文章主要是在C# ASP.NET Core Web API框架實現向手機發送驗證碼簡訊功能。這裡我選擇是一個互億無線簡訊驗證碼平臺,其實像阿裡雲,騰訊雲上面也可以。 首先我們先去 互億無線 https://www.ihuyi.com/api/sms.html 去註冊一個賬號 註冊完成賬號後,它會送 ...
  • 通過以下方式可以高效,並保證數據同步的可靠性 1.API設計 使用RESTful設計,確保API端點明確,並使用適當的HTTP方法(如POST用於創建,PUT用於更新)。 設計清晰的請求和響應模型,以確保客戶端能夠理解預期格式。 2.數據驗證 在伺服器端進行嚴格的數據驗證,確保接收到的數據符合預期格 ...