使用 Async Rust 構建簡單的 P2P 節點

来源:https://www.cnblogs.com/QiaoPengjun/archive/2023/05/21/17418735.html
-Advertisement-
Play Games

# 使用 Async Rust 構建簡單的 P2P 節點 ### P2P 簡介 - P2P:peer-to-peer - P2P 是一種網路技術,可以在不同的電腦之間共用各種計算資源,如 CPU、網路帶寬和存儲。 - P2P 是當今用戶線上共用文件(如音樂、圖像和其他數字媒體)的一種非常常用的方法 ...


使用 Async Rust 構建簡單的 P2P 節點

P2P 簡介

  • P2P:peer-to-peer
  • P2P 是一種網路技術,可以在不同的電腦之間共用各種計算資源,如 CPU、網路帶寬和存儲。
  • P2P 是當今用戶線上共用文件(如音樂、圖像和其他數字媒體)的一種非常常用的方法。
    • Bittorrent 和 Gnutella 是流行的文件共用 p2p 應用程式的例子。以及比特幣和以太坊等區塊鏈網路。
    • 它們不依賴中央伺服器或中介來連接多個客戶端。
    • 最重要的是,它們利用用戶的電腦作為客戶端和伺服器,從而將計算從中央伺服器上卸載下來。
  • 傳統的分散式系統使用 Client-Server 範式來部署
  • P2P 是另一種分散式系統
    • 在 P2P 中,一組節點(或對等點,Peer)彼此直接交互以共同提供公共服務,而無需中央協調器或管理員
    • P2P 系統中的每個節點(或 Peer)都可以充當客戶端(從其他節點請求信息)和伺服器(存儲/檢索數據並響應客戶端請求執行必要的計算)。
    • P2P 網路中的所有節點不必完全相同,一個關鍵特征將 Client-Server 網路與 P2P 網路區分開來:缺乏具有唯一許可權的專用伺服器。在開放、無許可的 P2P 網路中,任何節點都可以決定提供與 P2P 節點相關的全部或部分服務集。

P2P 的特點

  • 與 Client-Server 網路相比,P2P 網路能夠在其上構建不同類別的應用程式,這些應用程式是無許可、容錯和抗審查的。
    • 無許可:因為數據和狀態是跨多個節點複製的,所以沒有伺服器可以切斷客戶機對信息的訪問。
    • 容錯性:因為沒有單點故障,例如中央伺服器。
    • 抗審查:如區塊鏈等網路。
    • P2P 計算還可以更好地利用資源。

P2P 的複雜性

  • 構建 P2P 系統要比傳統 Client-Server 的系統複雜
    • 傳輸:P2P 網路中的每個 Peer 都可以使用不同的協議,例如HTTP(s)、TCP、UDP等。
    • 身份:每個 Peer 都需要知道其想要連接併發送消息的 Peer 的身份。
    • 安全性:每個 Peer 都應該能夠以安全的方式與其他 Peer 通信,而不存在第三方攔截或修改消息的風險等。
    • 路由:每個 Peer 可以通過各種路由(例如數據包在 IP 協議中的分佈方式)從其他 Peer 接收消息,這意味著如果消息不是針對自身的,則每個 Peer 都應該能夠將消息路由到其他 Peer。
    • 消息傳遞:P2P 網路應該能夠發送點對點消息或組消息(以發佈/訂閱模式)。

P2P 的要求 - 傳輸

  • TCP/IP 和 UDP 協議無處不在,在編寫網路應用程式時非常流行。但還有其他更高級別的協議,如 HTTP(TCP上分層)和 QUIC(UDP上分層)。
  • P2P 網路中的每個 Peer 都應該能夠啟動到另一個節點的連接,並且由於網路中 peer 的多樣性,能夠通過多個協議監聽傳入的連接。

P2P 的要求 - Peer 身份

  • 與 web 開發領域不同,在 web 開發領域中,伺服器由唯一的功能變數名稱標識(例如 www.rust-lang.org,然後使用功能變數名稱服務將其解析為伺服器的IP地址)
  • P2P 網路中的節點需要唯一身份,以便其他節點可以訪問它們。
  • P2P 網路中的節點使用公鑰和私鑰對(非對稱公鑰加密)與其他節點建立通信。
    • P2P 網路中的節點的身份稱為 PeerId,是節點公鑰的加密散列。

P2P 的要求 - 安全

  • 加密密鑰對和 PeerId 使節點能夠與它的 peers 建立安全、經過身份驗證的通信通道。但這隻是安全的一個方面。
  • 節點還需要實現授權框架,該框架為哪個節點可以執行何種操作建立規則。
  • 還有需要解決的網路級安全威脅,如 sybil 攻擊(其中一個節點運營商利用不同身份啟動大量節點,以獲得網路中的優勢地位)或 eclipse 攻擊(其中一組惡意節點共謀以特定節點為目標,使後者無法到達任何合法節點)。

P2P 的要求 - Peer 路由

  • P2P 網路中的節點首先需要找到其他 peer 才能進行通信。這是通過維護 peer 路由表來實現的,該表包含對網路中其他 peer 的引用。
  • 但是,在具有數千個或更多動態變化的節點(即節點加入和離開網路)的 P2P 網路中,任何單個節點都難以為網路中的所有節點維護完整而準確的路由表。Peer 路由使節點能夠將不是給自己準備的消息路由到目標節點。

P2P 的要求 - 消息

  • P2P 網路中的節點可以向特定節點發送消息,但也可以參與廣播消息協議。
    • 例如,發佈/訂閱,其中節點註冊對特定主題的興趣(訂閱),發送該主題消息的任何節點(發佈)都由訂閱該主題的所有節點接收。這種技術通常用於將消息的內容傳輸到整個網路。

P2P 的要求 - 流多路復用

  • 流多路復用(Stream multiplexing)是通過公共通信鏈路發送多個信息流的一種方法。
  • 在 P2P 的情況下,它允許多個獨立的“邏輯”流共用一個公共 P2P 傳輸層。
    • 當考慮到一個節點與不同 peers 具有多個通信流的可能性,或者兩個遠程節點之間也可能存在多個併發連接的可能性時,這一點變得很重要。
    • 流多路復用有助於優化 peer 之間建立連接的開銷。

註意:多路復用在後端服務開發中很常見,其中客戶端可以與伺服器建立底層網路連接,然後通過底層網路連接多路復用不同的流(每個流具有唯一的埠號)。

Libp2p

  • libp2p 是一個由協議、規範和庫組成的模塊化系統,它支持 P2P 應用程式的開發。
  • 它目前支持三種語言:JS、Go、Rust
    • 未來將支持 Haskell、Java、Python等
  • 它被許多流行的項目使用,例如:IPFS、Filecoin 和 Polkadot 等。

Libp2p 的主要模塊

  • 傳輸(Transport):負責從一個 peer 到另一個 peer 的數據的實際傳輸和接收
  • 身份(Identity):libp2p 使用公鑰密鑰(PKI)作為 peer 節點身份的基礎。使用加密演算法為每個節點生成唯一的 peer id。
  • 安全(Security):節點使用其私鑰對消息進行簽名。節點之間的傳輸連接可以升級為安全的加密通道,以便遠程 peer 可以相互信任,並且沒有第三方可以攔截它們之間的通信。
  • Peer 發現(Peer Discovery):允許 peer 在 libp2p 網路中查找並相互通信。
  • Peer 路由(Peer Routing):使用其他 peer 的知識信息來實現與 peer 節點的通信。
  • 內容發現(Content Discovery):在不知道哪個 peer 節點擁有該內容的情況下,允許 peer 節點從其他 peer 節點獲取部分內容。
  • 消息(Messaging):其中發佈/訂閱:允許向對某個主題感興趣的一組 peer 發送消息。

P2P 節點的身份

P2P Node

PeerId: 12d3k.....

~/rust via 

您的分享是我們最大的動力!

-Advertisement-
Play Games
更多相關文章
  • AI框架 1. 幾種AI的設計 AI在游戲中很多,但是為什麼大家總是感覺ai編寫起來十分困難,我後來思考了一番,主要原因是使用的方法不當。之前大家編寫ai主要有幾種方案: a. 狀態機 我是不知道誰想出來這個做法的,真是無力吐槽。本來對象身上任何數據都是狀態,這種方法又要把一些狀態定義成一種新的節點 ...
  • >本文時間 2023-05-20 >作者:sugerqube漆瓷 `cd`,`vi`,`clear`這些屬於常見常用命令本文不再贅述。 # 安裝命令 `yum install vim`舉例安裝vim `rpm -ivh a.rpm b.rpm c.rpm`舉例安裝a,b,c(涉及包相互依賴) # 用 ...
  • 網上的教學視頻大部分全是以centos為教材底子——沒辦法更換系統了,這樣方便麻! 我參考的文章: https://blog.csdn.net/shengjie87/article/details/106805105#:~:text=%E7%94%A8%E6%8C%82%E8%BD%BD%E5%85 ...
  • Wayland 配置起來確實相對麻煩很多,需要註意很多細節,如果不註意就會出現問題,在這裡說一下可能的現象與解決方法。 根據觀察,這些現象在 GNOME 與 KDE 桌面環境鐘均會出現。 ## 現象 ### App 打開慢 現象為當首次打開一個圖形化的 App 時,需要等待2-3秒鐘才會打開,但是如 ...
  • 上一講我們安裝 etcd 服務端,這一講我們來一起學學如何使用 etcd 客戶端常見的命令。文章內容來源於參考資料,如若侵權,請聯繫刪除,謝謝。 > etcd可通過客戶端命令行工具 etcdctl 對etcd進行請求操作 ```sh # 幫助命令,會列出所有的命令和選項,在記不太清命令的時候,可以使 ...
  • > 本文首發於公眾號:Hunter後端 > 原文鏈接:[es筆記四之中文分詞插件安裝與使用](https://mp.weixin.qq.com/s/aQuwrUzLZDKLv_K8dKeVzw) 前面我們介紹的操作及演示都是基於英語單詞的分詞,但我們大部分使用的肯定都是中文,所以如果需要使用分詞的操 ...
  • 在上一篇博客中,我們介紹了用Python對來實現一個Scheme求值器。然而,我們跳過了部分特殊形式(special forms)和基本過程(primitive procedures)實現的介紹,如特殊形式中的delay、cons-stream,基本過程中的force、streawn-car、str... ...
  • ## 1.自定義starter的作用 在我們的日常開發工作中,經常會有一些獨立於業務之外的配置模塊,比如阿裡雲oss存儲的時候,我們需要一個工具類進行文件上傳。我們經常將其放到一個特定的包下,然後如果另一個工程需要復用這塊功能的時候,需要將代碼硬拷貝到另一個工程,重新集成一遍,這樣會非常麻煩。如果我 ...
一周排行
    -Advertisement-
    Play Games
  • 前言 在我們開發過程中基本上不可或缺的用到一些敏感機密數據,比如SQL伺服器的連接串或者是OAuth2的Secret等,這些敏感數據在代碼中是不太安全的,我們不應該在源代碼中存儲密碼和其他的敏感數據,一種推薦的方式是通過Asp.Net Core的機密管理器。 機密管理器 在 ASP.NET Core ...
  • 新改進提供的Taurus Rpc 功能,可以簡化微服務間的調用,同時可以不用再手動輸出模塊名稱,或調用路徑,包括負載均衡,這一切,由框架實現並提供了。新的Taurus Rpc 功能,將使得服務間的調用,更加輕鬆、簡約、高效。 ...
  • 順序棧的介面程式 目錄順序棧的介面程式頭文件創建順序棧入棧出棧利用棧將10進位轉16進位數驗證 頭文件 #include <stdio.h> #include <stdbool.h> #include <stdlib.h> 創建順序棧 // 指的是順序棧中的元素的數據類型,用戶可以根據需要進行修改 ...
  • 前言 整理這個官方翻譯的系列,原因是網上大部分的 tomcat 版本比較舊,此版本為 v11 最新的版本。 開源項目 從零手寫實現 tomcat minicat 別稱【嗅虎】心有猛虎,輕嗅薔薇。 系列文章 web server apache tomcat11-01-官方文檔入門介紹 web serv ...
  • C總結與剖析:關鍵字篇 -- <<C語言深度解剖>> 目錄C總結與剖析:關鍵字篇 -- <<C語言深度解剖>>程式的本質:二進位文件變數1.變數:記憶體上的某個位置開闢的空間2.變數的初始化3.為什麼要有變數4.局部變數與全局變數5.變數的大小由類型決定6.任何一個變數,記憶體賦值都是從低地址開始往高地 ...
  • 如果讓你來做一個有狀態流式應用的故障恢復,你會如何來做呢? 單機和多機會遇到什麼不同的問題? Flink Checkpoint 是做什麼用的?原理是什麼? ...
  • C++ 多級繼承 多級繼承是一種面向對象編程(OOP)特性,允許一個類從多個基類繼承屬性和方法。它使代碼更易於組織和維護,並促進代碼重用。 多級繼承的語法 在 C++ 中,使用 : 符號來指定繼承關係。多級繼承的語法如下: class DerivedClass : public BaseClass1 ...
  • 前言 什麼是SpringCloud? Spring Cloud 是一系列框架的有序集合,它利用 Spring Boot 的開發便利性簡化了分散式系統的開發,比如服務註冊、服務發現、網關、路由、鏈路追蹤等。Spring Cloud 並不是重覆造輪子,而是將市面上開發得比較好的模塊集成進去,進行封裝,從 ...
  • class_template 類模板和函數模板的定義和使用類似,我們已經進行了介紹。有時,有兩個或多個類,其功能是相同的,僅僅是數據類型不同。類模板用於實現類所需數據的類型參數化 template<class NameType, class AgeType> class Person { publi ...
  • 目錄system v IPC簡介共用記憶體需要用到的函數介面shmget函數--獲取對象IDshmat函數--獲得映射空間shmctl函數--釋放資源共用記憶體實現思路註意 system v IPC簡介 消息隊列、共用記憶體和信號量統稱為system v IPC(進程間通信機制),V是羅馬數字5,是UNI ...