分散式系統概述

来源:http://www.cnblogs.com/ganchuanpu/archive/2016/11/20/6082030.html
-Advertisement-
Play Games

1.存儲與文件系統 存儲設備 存儲設備(常見的是磁碟/硬碟,固態硬碟) 文件系統 文件系統是操作系統用於存儲設備或分區上的文件的方法和數據結構 分散式文件系統 文件系統管理的物理存儲資源不一定直接連接在本地節點上,而是通過網路與節點相連 2.分散式文件系統 3.常見的分散式文件系統有: GFS: G ...


1.存儲與文件系統

存儲設備 存儲設備(常見的是磁碟/硬碟,固態硬碟)

文件系統 文件系統是操作系統用於存儲設備或分區上的文件的方法和數據結構

分散式文件系統 文件系統管理的物理存儲資源不一定直接連接在本地節點上,而是通過網路與節點相連

2.分散式文件系統

 

3.常見的分散式文件系統有:

GFS: Google基於Linux的專有分散式文件系統
HDFS: Hadoop 實現了一個分散式文件系統
Lustre:大規模的、安全可靠的,具備高可用性的集群文件系統 由SUN公司開發和維護的。
Ceph :性能最高,C++編寫的代碼,支持Fuse,並且沒有單點故障
GridFS :MongoDB是一種知名的NoSql資料庫,GridFS是 MongoDB的一個內置功能
mogileFS :由memcahed的開發公司danga一款perl開發的產品, 目前國內使用mogielFS的有圖片托管網站yupoo等。
TFS :淘寶的一個高可擴展、高可用、高性能、面向互聯網服務的分散式文件系統 
    官網 : http://code.taobao.org/p/tfs/wiki/index/ 
FastDFS :一個開源的輕量級分散式文件系統,特別適合相冊網站、視頻網站。 
   官方論壇 http://bbs.chinaunix.net/forum-240-1.html

分散式文件系統各自適用於不同的領域。 它們都不是系統級的分散式文件系統,而是應用級的分散式文件存儲服務。

4.分散式文件系統特點

1.擴展能力: 毫無疑問,擴展能力是一個分散式文件系統最重要的特點 存儲海量數據是分散式系統的重要特性

2.高可用性: 在分散式文件系統中,高可用性包含兩層, 一是整個文件系統的可用性,二是數據的完整和一致性。

3.協議和介面: 分散式文件系統提供給應用的介面多種多樣,Http RestFul介面

4.彈性存儲: 可以根據業務需要靈活地增加或縮減數據存儲以及增刪存儲池中的資源

5.壓縮、加密、去重、緩存和存儲配額: 這些功能的提供往往考驗一個 分散式文件系統是否具有可擴展性,一個分散式文件系統如果能方便的 進行功能的添加而不影響總體的性能

 


您的分享是我們最大的動力!

-Advertisement-
Play Games
更多相關文章
  •   本文主要講如何自定義NSOperation,以及自定義NSOperation的一些註意事項,以下載圖片為例。 新建一個類,繼承於NSOperation。 CustomOperation.h 代碼 CustomOperation.m 分析 :1.自定義NSOperation都要 ...
  • 介紹Apk去掉簽名的方法以及用JDK自帶jarsigner重新簽名的方法。 ...
  • 1、配置URLSchemes 被跳轉至的應用要配置URLSchemes,其他應用根據此應用的URLSchemes跳轉至此應用。 一個APP可以配置多個URLSchemes,這樣其他APP無論寫哪個URLSchemes,都能跳轉至此應用。 方式1:配置Info信息,其實本質修改的還是Info.plis ...
  • 生命周期對程式員很重要,特別當我們瞭解,就可以寫出更流暢的程式,更好的來避規性能瓶頸,讓我們的APP擁有更好的用戶體驗。我們繼續來分享“活動狀態及生存周期”,活動狀態:運行狀態,暫停狀態,停止狀態,銷毀狀態。活動的生成周期分別為:onCreate()、onSart()、onResme()、onPau... ...
  • 內容提供者ContentProvider,是Android 的四大組件之一。 ...
  • 1.自定義listview,首先在activity.xml中插入一個listview,可以用android:divider=“”設置分割線顏色樣式,android:dividerHeight=""設置分割線高度。 2.新建viewholder_item.xml設計每行Item顯示的樣式佈局。 3.自 ...
  • Intent在活動的操作 作用: Itent是Android程式中各個組件直接交換的一個重要方式可以指定當前組件要執行任務同時也可以給各個組件直接進行數據交互 同時Intent啟動往往可以啟動活動,啟動服務,以及發送廣播等場景 分類 1.顯示Intent和隱示Intent 顯示Intent操作 1. ...
  • 1.Hadoop是什麼? 適合大數據的分散式存儲與計算平臺 HDFS: Hadoop Distributed File System分散式文件系統 MapReduce:並行計算框架 2.Hadoop生態圈 ①HBase Google Bigtable的開源實現 列式資料庫 可集群化 可以使用shel ...
一周排行
    -Advertisement-
    Play Games
  • 移動開發(一):使用.NET MAUI開發第一個安卓APP 對於工作多年的C#程式員來說,近來想嘗試開發一款安卓APP,考慮了很久最終選擇使用.NET MAUI這個微軟官方的框架來嘗試體驗開發安卓APP,畢竟是使用Visual Studio開發工具,使用起來也比較的順手,結合微軟官方的教程進行了安卓 ...
  • 前言 QuestPDF 是一個開源 .NET 庫,用於生成 PDF 文檔。使用了C# Fluent API方式可簡化開發、減少錯誤並提高工作效率。利用它可以輕鬆生成 PDF 報告、發票、導出文件等。 項目介紹 QuestPDF 是一個革命性的開源 .NET 庫,它徹底改變了我們生成 PDF 文檔的方 ...
  • 項目地址 項目後端地址: https://github.com/ZyPLJ/ZYTteeHole 項目前端頁面地址: ZyPLJ/TreeHoleVue (github.com) https://github.com/ZyPLJ/TreeHoleVue 目前項目測試訪問地址: http://tree ...
  • 話不多說,直接開乾 一.下載 1.官方鏈接下載: https://www.microsoft.com/zh-cn/sql-server/sql-server-downloads 2.在下載目錄中找到下麵這個小的安裝包 SQL2022-SSEI-Dev.exe,運行開始下載SQL server; 二. ...
  • 前言 隨著物聯網(IoT)技術的迅猛發展,MQTT(消息隊列遙測傳輸)協議憑藉其輕量級和高效性,已成為眾多物聯網應用的首選通信標準。 MQTTnet 作為一個高性能的 .NET 開源庫,為 .NET 平臺上的 MQTT 客戶端與伺服器開發提供了強大的支持。 本文將全面介紹 MQTTnet 的核心功能 ...
  • Serilog支持多種接收器用於日誌存儲,增強器用於添加屬性,LogContext管理動態屬性,支持多種輸出格式包括純文本、JSON及ExpressionTemplate。還提供了自定義格式化選項,適用於不同需求。 ...
  • 目錄簡介獲取 HTML 文檔解析 HTML 文檔測試參考文章 簡介 動態內容網站使用 JavaScript 腳本動態檢索和渲染數據,爬取信息時需要模擬瀏覽器行為,否則獲取到的源碼基本是空的。 本文使用的爬取步驟如下: 使用 Selenium 獲取渲染後的 HTML 文檔 使用 HtmlAgility ...
  • 1.前言 什麼是熱更新 游戲或者軟體更新時,無需重新下載客戶端進行安裝,而是在應用程式啟動的情況下,在內部進行資源或者代碼更新 Unity目前常用熱更新解決方案 HybridCLR,Xlua,ILRuntime等 Unity目前常用資源管理解決方案 AssetBundles,Addressable, ...
  • 本文章主要是在C# ASP.NET Core Web API框架實現向手機發送驗證碼簡訊功能。這裡我選擇是一個互億無線簡訊驗證碼平臺,其實像阿裡雲,騰訊雲上面也可以。 首先我們先去 互億無線 https://www.ihuyi.com/api/sms.html 去註冊一個賬號 註冊完成賬號後,它會送 ...
  • 通過以下方式可以高效,並保證數據同步的可靠性 1.API設計 使用RESTful設計,確保API端點明確,並使用適當的HTTP方法(如POST用於創建,PUT用於更新)。 設計清晰的請求和響應模型,以確保客戶端能夠理解預期格式。 2.數據驗證 在伺服器端進行嚴格的數據驗證,確保接收到的數據符合預期格 ...