9種高性能可用高併發的技術架構

来源:http://www.cnblogs.com/tpniu/archive/2017/11/30/7927840.html
-Advertisement-
Play Games

對於大型網站,分層和分隔的一個主要目的是為了切分後的模塊便於分散式部署,即將不同模塊部署在不同的伺服器上,通過遠程調用協同工作。分散式意味著可以使用更多的電腦完同樣的工作,電腦越多,CPU、記憶體、存儲資源就越多,能過處理的併發訪問和數據量就越大,進而能夠為更多的用戶提供服務。 ...


1、分層

  分層是企業應用系統中最常見的一種架構模式,將系統在橫向維度上切分成幾個部分,每個部分負責一部分相對簡單並比較單一的職責,然後通過上層對下層的依賴和調度組成一個完整的系統。

  在網站的分層架構中,常見的為3層,即應用層、服務層、數據層。應用層具體負責業務和視圖的展示;服務層為應用層提供服務支持;資料庫提供數據存儲訪問服務,如資料庫、緩存、文件、搜索引擎等。

  分層架構是邏輯上的,在物理部署上,三層架構可以部署在同一個物理機器上,但是隨著網站業務的發展,必然需要對已經分層的模塊分離部署,即三層結構分別部署在不同的伺服器上,是網站擁有更多的計算資源以應對越來越多的用戶訪問。

  所以雖然分層架構模式最初的目的是規劃軟體清晰的邏輯結構以便於開發維護,但在網站的發展過程中,分層結構對網站支持高併發向分散式方向的發展至關重要。

「架構技術專題」這9種高性能高可用高併發的技術架構你還不知道?

2、冗餘

  網站需要7×24小時連續運行,那麼就得有相應的冗餘機制,以防某台機器宕掉時無法訪問,而冗餘則可以通過部署至少兩台伺服器構成一個集群實現服務高可用。資料庫除了定期備份還需要實現冷熱備份。甚至可以在全球範圍內部署災備數據中心。

  3、分隔

  如果說分層是將軟體在橫向方面進行切分,那麼分隔就是在縱向方面對軟體進行切分。

  網站越大,功能越複雜,服務和數據處理的種類也越多,將這些不同的功能和服務分隔開來,包裝成高內聚低耦合的模塊單元,不僅有助於軟體的開發維護也便於不同模塊的分散式部署,提高網站的併發處理能力和功能擴展能力。

  大型網站分隔的粒度可能會很小。比如在應用層,將不同業務進行分隔,例如將購物、論壇、搜索、廣告分隔成不同的應用,有對立的團隊負責,部署在不同的伺服器上。

  4、非同步

  使用非同步,業務之間的消息傳遞不是同步調用,而是將一個業務操作分成多個階段,每個階段之間通過共用數據的方法非同步執行進行協作。

  具體實現則在單一伺服器內部可用通過多線程共用記憶體對了的方式處理;在分散式系統中可用通過分散式消息隊列來實現非同步。

  非同步架構的典型就是生產者消費者方式,兩者不存在直接調用。

  5、分散式

  對於大型網站,分層和分隔的一個主要目的是為了切分後的模塊便於分散式部署,即將不同模塊部署在不同的伺服器上,通過遠程調用協同工作。分散式意味著可以使用更多的電腦完同樣的工作,電腦越多,CPU、記憶體、存儲資源就越多,能過處理的併發訪問和數據量就越大,進而能夠為更多的用戶提供服務。

  在網站應用中,常用的分散式方案有一下幾種.

  分散式應用和服務:將分層和分隔後的應用和服務模塊分散式部署,可以改善網站性能和併發性、加快開發和發佈速度、減少資料庫連接資源消耗。

  分散式靜態資源:網站的靜態資源如JS、CSS、Logo圖片等資源對立分散式部署,並採用獨立的功能變數名稱,即人們常說的動靜分離。靜態資源分散式部署可以減輕應用伺服器的負載壓力;通過使用獨立功能變數名稱加快瀏覽器併發載入的速度。

  分散式數據和存儲:大型網站需要處理以P為單位的海量數據,單台電腦無法提供如此大的存儲空間,這些資料庫需要分散式存儲。

  分散式計算:目前網站普遍使用Hadoop和MapReduce分散式計算框架進行此類批處理計算,其特點是移動計算而不是移動數據,將計算程式分發到數據所在的位置以加速計算和分散式計算。

images/dZ2KsChfe2JYNTzSByQ4RGdTamFxPHDJ.png

       

      6、安全

  網站在安全架構方面有許多模式:通過密碼和手機校驗碼進行身份認證;登錄、交易需要對網路通信進行加密;為了防止機器人程式濫用資源,需要使用驗證碼進行識別;對常見的XSS攻擊、SQL註入需要編碼轉換;垃圾信息需要過濾等。

  7、自動化

  具體有自動化發佈過程,自動化代碼管理、自動化測試、自動化安全檢測、自動化部署、自動化監控、自動化報警、自動化失效轉移、自動化失效恢復等。

  8、集群

  對於用戶訪問集中的模塊需要將獨立部署的伺服器集群化,即多台伺服器部署相同的應用構成一個集群,通過負載均衡設備共同對外提供服務。

  伺服器集群能夠為相同的服務提供更多的併發支持,因此當有更多的用戶訪問時,只需要向集群中加入新的機器即可;另外可以實現當其中的某台伺服器發生故障時,可以通過負載均衡的失效轉移機制將請求轉移至集群中其他的伺服器上,因此可以提高系統的可用性。

「架構技術專題」這9種高性能高可用高併發的技術架構你還不知道?

9、緩存

  緩存目的就是減輕伺服器的計算,使數據直接返回給用戶。在現在的軟體設計中,緩存已經無處不在。具體實現有CDN、反向代理、本地緩存、分散式緩存等。

  使用緩存有兩個條件:訪問數據熱點不均衡,即某些頻繁訪問的數據需要放在緩存中;數據在某個時間段內有效,不過很快過期,否在會因為數據過期而臟讀,影響數據的正確性。

「架構技術專題」這9種高性能高可用高併發的技術架構你還不知道?


您的分享是我們最大的動力!

-Advertisement-
Play Games
更多相關文章
  • 查看原文 ...
  • 平常工作中String字元串對象用的那麼多,但是真的瞭解String嗎? 源碼淺析先從String開刀。 想要真正瞭解一個類,首先得從源碼入手。(本文JDK源碼版本1.7.0_75) 先看類信息: 由源碼可以看出: final修飾了String類,表明該類不能被其他類繼承。 String 實現了Se ...
  • numpy.eye(N, M=None, k=0, dtype=<type ‘float’>) 生成對角矩陣 列數N 行數M 寫一個代表行數等於列數 k代表偏移量正數向上偏移,負數向下偏移 如numpy.eye(3,k=1,dtyle=int) 0 1 0 0 0 1 0 0 0 numpy.sha ...
  • 基本概念 1.操作系統中heap和stack的區別。 2.什麼是對象/關係映射集成模塊? 3.什麼是Java的反射機制? 4.什麼是ACID? 5.B/S和C/S的聯繫與區別? 6.cookie和session的區別? 7.interface與抽象類的區別. 8.IOC的優點是什麼? 9.IO和NI ...
  • 先導入模塊: from django.core.paginator import Paginator, EmptyPage, PageNotAnInteger 分頁器的使用(views函數中的代碼): templates中的代碼 ...
  • 熔斷是當某個服務調用慢或者有大量超時現象(過載),系統停止後續針對該服務的調用而直接返回,直至情況好轉才恢復調用。這通常是為防止造成整個系統故障而採取的一種保護措施,也稱過載保護。很多時候剛開始,可能只是出現了局部小規模系統故障,但後來故障影響的範圍越來越大,最終導致了全局性的後果。 ...
  • 這是曾經的一個面試題,正好引出狀態機編程思想。挺不錯的一個例子。 題目描述 給定一個字元串,它由以下字元組成: 左括弧“(” 右括弧“)” 下劃線“_” 大小寫字母構成的字元串(單字母也算作字元串) 該字元串組成有以下規則限定: 括弧成對出現且不會嵌套,保證語法正確 字元串可以出現在括弧內,也可以出 ...
  • 閑暇之餘,開發了一款休閑類app,雖然用戶量不多,但確實花了不少心血在這上面。然而,開發出來的結果,與之前想好的架構,還是有不少區別。 下麵,記錄下這款app架構的演變: 最初,只想寫個app,能與機器人進行聊天。架構隨意搭(或者說沒有架構),快速開發出來就好: 最初(無架構)版本 很簡單,按照代碼 ...
一周排行
    -Advertisement-
    Play Games
  • 移動開發(一):使用.NET MAUI開發第一個安卓APP 對於工作多年的C#程式員來說,近來想嘗試開發一款安卓APP,考慮了很久最終選擇使用.NET MAUI這個微軟官方的框架來嘗試體驗開發安卓APP,畢竟是使用Visual Studio開發工具,使用起來也比較的順手,結合微軟官方的教程進行了安卓 ...
  • 前言 QuestPDF 是一個開源 .NET 庫,用於生成 PDF 文檔。使用了C# Fluent API方式可簡化開發、減少錯誤並提高工作效率。利用它可以輕鬆生成 PDF 報告、發票、導出文件等。 項目介紹 QuestPDF 是一個革命性的開源 .NET 庫,它徹底改變了我們生成 PDF 文檔的方 ...
  • 項目地址 項目後端地址: https://github.com/ZyPLJ/ZYTteeHole 項目前端頁面地址: ZyPLJ/TreeHoleVue (github.com) https://github.com/ZyPLJ/TreeHoleVue 目前項目測試訪問地址: http://tree ...
  • 話不多說,直接開乾 一.下載 1.官方鏈接下載: https://www.microsoft.com/zh-cn/sql-server/sql-server-downloads 2.在下載目錄中找到下麵這個小的安裝包 SQL2022-SSEI-Dev.exe,運行開始下載SQL server; 二. ...
  • 前言 隨著物聯網(IoT)技術的迅猛發展,MQTT(消息隊列遙測傳輸)協議憑藉其輕量級和高效性,已成為眾多物聯網應用的首選通信標準。 MQTTnet 作為一個高性能的 .NET 開源庫,為 .NET 平臺上的 MQTT 客戶端與伺服器開發提供了強大的支持。 本文將全面介紹 MQTTnet 的核心功能 ...
  • Serilog支持多種接收器用於日誌存儲,增強器用於添加屬性,LogContext管理動態屬性,支持多種輸出格式包括純文本、JSON及ExpressionTemplate。還提供了自定義格式化選項,適用於不同需求。 ...
  • 目錄簡介獲取 HTML 文檔解析 HTML 文檔測試參考文章 簡介 動態內容網站使用 JavaScript 腳本動態檢索和渲染數據,爬取信息時需要模擬瀏覽器行為,否則獲取到的源碼基本是空的。 本文使用的爬取步驟如下: 使用 Selenium 獲取渲染後的 HTML 文檔 使用 HtmlAgility ...
  • 1.前言 什麼是熱更新 游戲或者軟體更新時,無需重新下載客戶端進行安裝,而是在應用程式啟動的情況下,在內部進行資源或者代碼更新 Unity目前常用熱更新解決方案 HybridCLR,Xlua,ILRuntime等 Unity目前常用資源管理解決方案 AssetBundles,Addressable, ...
  • 本文章主要是在C# ASP.NET Core Web API框架實現向手機發送驗證碼簡訊功能。這裡我選擇是一個互億無線簡訊驗證碼平臺,其實像阿裡雲,騰訊雲上面也可以。 首先我們先去 互億無線 https://www.ihuyi.com/api/sms.html 去註冊一個賬號 註冊完成賬號後,它會送 ...
  • 通過以下方式可以高效,並保證數據同步的可靠性 1.API設計 使用RESTful設計,確保API端點明確,並使用適當的HTTP方法(如POST用於創建,PUT用於更新)。 設計清晰的請求和響應模型,以確保客戶端能夠理解預期格式。 2.數據驗證 在伺服器端進行嚴格的數據驗證,確保接收到的數據符合預期格 ...