分散式服務框架之遠程通訊技術及原理分析

来源:https://www.cnblogs.com/lfs2640666960/archive/2018/08/17/9495281.html
-Advertisement-
Play Games

在分散式服務框架中,一個最基礎的問題就是遠程服務是怎麼通訊的,在Java領域中有很多可實現遠程通訊的技術,例如:RMI、MINA、ESB、Burlap、Hessian、SOAP、EJB和JMS等,這些名詞之間到底是些什麼關係呢,它們背後到底是基於什麼原理實現的呢,瞭解這些是實現分散式服務框架的基礎知... ...


在分散式服務框架中,一個最基礎的問題就是遠程服務是怎麼通訊的,在Java領域中有很多可實現遠程通訊的技術,例如:RMI、MINA、ESB、Burlap、Hessian、SOAP、EJB和JMS等,這些名詞之間到底是些什麼關係呢,它們背後到底是基於什麼原理實現的呢,瞭解這些是實現分散式服務框架的基礎知識,而如果在性能上有高的要求的話,那深入瞭解這些技術背後的機制就是必須的了。

1 基本原理

要實現網路機器間的通訊,首先得來看看電腦系統網路通信的基本原理,在底層層面去看,網路通信需要做的就是將流從一臺電腦傳輸到另外一臺電腦,基於傳輸協議和網路IO來實現,其中傳輸協議比較出名的有tcp、udp等等,tcp、udp都是在基於Socket概念上為某類應用場景而擴展出的傳輸協議,網路IO,主要有bio、nio、aio三種方式,所有的分散式應用通訊都基於這個原理而實現,只是為了應用的易用,各種語言通常都會提供一些更為貼近應用易用的應用層協議。

2 消息模式

歸根結底,企業應用系統就是對數據的處理,而對於一個擁有多個子系統的企業應用系統而言,它的基礎支撐無疑就是對消息的處理。與對象不同,消息本質上是一種數據結構(當然,對象也可以看做是一種特殊的消息),它包含消費者與服務雙方都能識別的數據,這些數據需要在不同的進程(機器)之間進行傳遞,並可能會被多個完全不同的客戶端消費。消息傳遞相較文件傳遞與遠程過程調用(RPC)而言,似乎更勝一籌,因為它具有更好的平臺無關性,並能夠很好地支持併發與非同步調用。

對於Web Service與RESTful而言,則可以看做是消息傳遞技術的一種衍生或封裝。

2.1 消息通道(Message Channel)模式

我們常常運用的消息模式是Message Channel(消息通道)模式,如圖所示。

消息通道作為在客戶端(消費者,Consumer)與服務(生產者,Producer)之間引入的間接層,可以有效地解除二者之間的耦合。只要實現規定雙方需要通信的消息格式,以及處理消息的機制與時機,就可以做到消費者對生產者的“無知”。事實上,該模式可以支持多個生產者與消費者。例如,我們可以讓多個生產者向消息通道發送消息,因為消費者對生產者的無知性,它不必考慮究竟是哪個生產者發來的消息。

雖然消息通道解除了生產者與消費者之間的耦合,使得我們可以任意地對生產者與消費者進行擴展,但它又同時引入了各自對消息通道的依賴,因為它們必須知道通道資源的位置。要解除這種對通道的依賴,可以考慮引入Lookup服務來查找該通道資源。例如,在JMS中就可以通過JNDI來獲取消息通道Queue。若要做到充分的靈活性,可以將與通道相關的信息存儲到配置文件中,Lookup服務首先通過讀取配置文件來獲得通道。

消息通道通常以隊列的形式存在,這種先進先出的數據結構無疑最為適合這種處理消息的場景。微軟的MSMQ、IBM MQ、JBoss MQ以及開源的RabbitMQ、Apache ActiveMQ都通過隊列實現了Message Channel模式。因此,在選擇運用Message Channel模式時,更多地是要從質量屬性的層面對各種實現了該模式的產品進行全方位的分析與權衡。例如,消息通道對併發的支持以及在性能上的表現;消息通道是否充分地考慮了錯誤處理;對消息安全的支持;以及關於消息持久化、災備(fail over)與集群等方面的支持。

因為通道傳遞的消息往往是一些重要的業務數據,一旦通道成為故障點或安全性的突破點,對系統就會造成災難性的影響。

此處也順帶的提下jndi的機制,由於JNDI取決於具體的實現,在這裡只能是講解下jboss的jndi的實現了:

在將對象實例綁定到jboss jnp server後,當遠程端採用context.lookup()方式獲取遠程對象實例並開始調用時,jboss jndi的實現方法是從jnp server上獲取對象實例,將其序列化回本地,然後在本地進行反序列化,之後在本地進行類調用。

通過這個機制,就可以知道了,本地其實是必須有綁定到jboss上的對象實例的class的,否則反序列化的時候肯定就失敗了,而遠程通訊需要做到的是在遠程執行某動作,並獲取到相應的結果,可見純粹基於JNDI是無法實現遠程通訊的。

但JNDI也是實現分散式服務框架一個很關鍵的技術點,因為可以通過它來實現透明化的遠端和本地調用,就像ejb,另外它也是個很好的隱藏實際部署機制(就像datasource)等的方案。

2.2 發佈者-訂閱者(Publisher-Subscriber)模式

一旦消息通道需要支持多個消費者時,就可能面臨兩種模型的選擇:拉模型與推模型。拉模型是由消息的消費者發起的,主動權把握在消費者手中,它會根據自己的情況對生產者發起調用。如圖所示:

拉模型的另一種體現則由生產者在狀態發生變更時,通知消費者其狀態發生了改變。但得到通知的消費者卻會以回調方式,通過調用傳遞過來的消費者對象獲取更多細節消息。

在基於消息的分散式系統中,拉模型的消費者通常以Batch Job的形式,根據事先設定的時間間隔,定期偵聽通道的情況。一旦發現有消息傳遞進來,就會轉而將消息傳遞給真正的處理器(也可以看做是消費者)處理消息,執行相關的業務。

推模型的主動權常常掌握在生產者手中,消費者被動地等待生產者發出的通知,這就要求生產者必須瞭解消費者的相關信息。如圖所示:

對於推模型而言,消費者無需瞭解生產者。在生產者通知消費者時,傳遞的往往是消息(或事件),而非生產者自身。同時,生產者還可以根據不同的情況,註冊不同的消費者,又或者在封裝的通知邏輯中,根據不同的狀態變化,通知不同的消費者。

兩種模型各有優勢。拉模型的好處在於可以進一步解除消費者對通道的依賴,通過後臺任務去定期訪問消息通道。壞處是需要引入一個單獨的服務進程,以Schedule形式執行。而對於推模型而言,消息通道事實上會作為消費者觀察的主體,一旦發現消息進入,就會通知消費者執行對消息的處理。無論推模型,拉模型,對於消息對象而言,都可能採用類似Observer模式的機制,實現消費者對生產者的訂閱,因此這種機制通常又被稱為Publisher-Subscriber模式,如圖所示:

通常情況下,發佈者和訂閱者都會被註冊到用於傳播變更的基礎設施(即消息通道)上。發佈者會主動地瞭解消息通道,使其能夠將消息發送到通道中;消息通道一旦接收到消息,會主動地調用註冊在通道中的訂閱者,進而完成對消息內容的消費。

對於訂閱者而言,有兩種處理消息的方式。一種方式是廣播機制,這時消息通道中的消息在出列的同時,還需要複製消息對象,將消息傳遞給多個訂閱者。例如,有多個子系統都需要獲取從CRM系統傳來的客戶信息,並根據傳遞過來的客戶信息,進行相應的處理。此時的消息通道又被稱為Propagation通道。另一種方式則屬於搶占機制,它遵循同步方式,在同一時間只能有一個訂閱者能夠處理該消息。實現Publisher-Subscriber模式的消息通道會選擇當前空閑的唯一訂閱者,並將消息出列,並傳遞給訂閱者的消息處理方法。

目前,有許多消息中間件都能夠很好地支持Publisher-Subscriber模式,例如JMS介面規約中對於Topic對象提供的MessagePublisher與MessageSubscriber介面。RabbitMQ也提供了自己對該模式的實現。微軟的MSMQ雖然引入了事件機制,可以在隊列收到消息時觸發事件,通知訂閱者。但它並非嚴格意義上的Publisher-Subscriber模式實現。由微軟MVP Udi Dahan作為主要貢獻者的NServiceBus,則對MSMQ以及WCF做了進一層包裝,並能夠很好地實現這一模式。

2.3 消息路由(Message Router)模式

無論是Message Channel模式,還是Publisher-Subscriber模式,隊列在其中都扮演了舉足輕重的角色。然而,在企業應用系統中,當系統變得越來越複雜時,對性能的要求也會越來越高,此時對於系統而言,可能就需要支持同時部署多個隊列,並可能要求分散式部署不同的隊列。這些隊列可以根據定義接收不同的消息,例如訂單處理的消息,日誌信息,查詢任務消息等。這時,對於消息的生產者和消費者而言,並不適宜承擔決定消息傳遞路徑的職責。事實上,根據S單一職責原則,這種職責分配也是不合理的,它既不利於業務邏輯的重用,也會造成生產者、消費者與消息隊列之間的耦合,從而影響系統的擴展。

既然這三種對象(組件)都不宜承擔這樣的職責,就有必要引入一個新的對象專門負責傳遞路徑選擇的功能,這就是所謂的Message Router模式,如圖所示:

通過消息路由,我們可以配置路由規則指定消息傳遞的路徑,以及指定具體的消費者消費對應的生產者。例如指定路由的關鍵字,並由它來綁定具體的隊列與指定的生產者(或消費者)。路由的支持提供了消息傳遞與處理的靈活性,也有利於提高整個系統的消息處理能力。同時,路由對象有效地封裝了尋找與匹配消息路徑的邏輯,就好似一個調停者(Meditator),負責協調消息、隊列與路徑定址之間關係。

3 應用級協議

遠程服務通訊,需要達到的目標是在一臺電腦發起請求,另外一臺機器在接收到請求後進行相應的處理並將結果返回給請求端,這其中又會有諸如one way request、同步請求、非同步請求等等請求方式,按照網路通信原理,需要實現這個需要做的就是將請求轉換成流,通過傳輸協議傳輸至遠端,遠端電腦在接收到請求的流後進行處理,處理完畢後將結果轉化為流,並通過傳輸協議返回給調用端。

原理是這樣的,但為了應用的方便,業界推出了很多基於此原理之上的應用級的協議,使得大家可以不用去直接操作這麼底層的東西,通常應用級的遠程通信協議會提供:

  1. 為了避免直接做流操作這麼麻煩,提供一種更加易用或貼合語言的標準傳輸格式;
  2. 網路通信機制的實現,就是替你完成了將傳輸格式轉化為流,通過某種傳輸協議傳輸至遠端電腦,遠端電腦在接收到流後轉化為傳輸格式,併進行存儲或以某種方式通知遠端電腦。

所以在學習應用級的遠程通信協議時,我們可以帶著這幾個問題進行學習:

  1. 傳輸的標準格式是什麼?
  2. 怎麼樣將請求轉化為傳輸的流?
  3. 怎麼接收和處理流?
  4. 傳輸協議是?

不過應用級的遠程通信協議並不會在傳輸協議上做什麼多大的改進,主要是在流操作方面,讓應用層生成流和處理流的這個過程更加的貼合所使用的語言或標準,至於傳輸協議則通常都是可選的,在java領域中知名的有:RMI、XML-RPC、Binary-RPC、SOAP、CORBA、JMS、HTTP,來具體的看看這些遠程通信的應用級協議。

3.1 RMI(遠程方法調用)

RMI是個典型的為java定製的遠程通信協議,我們都知道,在single vm中,我們可以通過直接調用java object instance來實現通信,那麼在遠程通信時,如果也能按照這種方式當然是最好了,這種遠程通信的機製成為RPC(Remote Procedure Call),RMI正是朝著這個目標而誕生的。

RMI 採用stubs 和 skeletons 來進行遠程對象(remote object)的通訊。stub 充當遠程對象的客戶端代理,有著和遠程對象相同的遠程介面,遠程對象的調用實際是通過調用該對象的客戶端代理對象stub來完成的,通過該機制RMI就好比它是本地工作,採用tcp/ip協議,客戶端直接調用服務端上的一些方法。優點是強類型,編譯期可檢查錯誤,缺點是只能基於JAVA語言,客戶機與伺服器緊耦合。

來看下基於RMI的一次完整的遠程通信過程的原理:

  1. 客戶端發起請求,請求轉交至RMI客戶端的stub類;
  2. stub類將請求的介面、方法、參數等信息進行序列化;
  3. 基於socket將序列化後的流傳輸至伺服器端;
  4. 伺服器端接收到流後轉發至相應的skelton類;
  5. skelton類將請求的信息反序列化後調用實際的處理類;
  6. 處理類處理完畢後將結果返回給skelton類;
  7. Skelton類將結果序列化,通過socket將流傳送給客戶端的stub;
  8. stub在接收到流後反序列化,將反序列化後的Java Object返回給調用者。

根據原理來回答下之前學習應用級協議帶著的幾個問題:

  1. 傳輸的標準格式是什麼?是Java ObjectStream。
  2. 怎麼樣將請求轉化為傳輸的流?基於Java串列化機制將請求的java object信息轉化為流。
  3. 怎麼接收和處理流?根據採用的協議啟動相應的監聽埠,當有流進入後基於Java串列化機制將流進行反序列化,並根據RMI協議獲取到相應的處理對象信息,進行調用並處理,處理完畢後的結果同樣基於java串列化機制進行返回。
  4. 傳輸協議是?Socket。

3.2 XML-RPC

RPC使用C/S方式,採用http協議,發送請求到伺服器,等待伺服器返回結果。這個請求包括一個參數集和一個文本集,通常形成“classname.methodname”形式。優點是跨語言跨平臺,C端、S端有更大的獨立性,缺點是不支持對象,無法在編譯器檢查錯誤,只能在運行期檢查。

XML-RPC也是一種和RMI類似的遠程調用的協議,它和RMI的不同之處在於它以標準的xml格式來定義請求的信息(請求的對象、方法、參數等),這樣的好處是什麼呢,就是在跨語言通訊的時候也可以使用。

來看下XML-RPC協議的一次遠程通信過程:

  1. 客戶端發起請求,按照XML-RPC協議將請求信息進行填充;
  2. 填充完畢後將xml轉化為流,通過傳輸協議進行傳輸;
  3. 接收到在接收到流後轉換為xml,按照XML-RPC協議獲取請求的信息併進行處理;
  4. 處理完畢後將結果按照XML-RPC協議寫入xml中並返回。

同樣來回答問題:

  1. 傳輸的標準格式是?標準格式的XML。
  2. 怎麼樣將請求轉化為傳輸的流?將XML轉化為流。
  3. 怎麼接收和處理流?通過監聽的埠獲取到請求的流,轉化為XML,並根據協議獲取請求的信息,進行處理並將結果寫入XML中返回。
  4. 傳輸協議是?Http。

3.3 Binary-RPC

Binary-RPC看名字就知道和XML-RPC是差不多的了,不同之處僅在於傳輸的標準格式由XML轉為了二進位的格式。

同樣來回答問題:

  1. 傳輸的標準格式是?標準格式的二進位文件。
  2. 怎麼樣將請求轉化為傳輸的流?將二進位格式文件轉化為流。
  3. 怎麼接收和處理流?通過監聽的埠獲取到請求的流,轉化為二進位文件,根據協議獲取請求的信息,進行處理並將結果寫入XML中返回。
  4. 傳輸協議是?Http。

3.4 SOAP

SOAP原意為Simple Object Access Protocol,是一個用於分散式環境的、輕量級的、基於XML進行信息交換的通信協議,可以認為SOAP是XML RPC的高級版,兩者的原理完全相同,都是http+XML,不同的僅在於兩者定義的XML規範不同,SOAP也是Webservice採用的服務調用協議標準,因此在此就不多加闡述了。

Web Service提供的服務是基於web容器的,底層使用http協議,類似一個遠程的服務提供者,比如天氣預報服務,對各地客戶端提供天氣預報,是一種請求應答的機制,是跨系統跨平臺的。就是通過一個servlet,提供服務出去。

首先客戶端從伺服器獲得WebService的WSDL,同時在客戶端生成一個代理類(Proxy Class),這個代理類負責與WebService伺服器進行Request和Response。當一個數據(XML格式的)被封裝成SOAP格式的數據流發送到伺服器端的時候,就會生成一個進程對象並且把接收到這個Request的SOAP包進行解析,然後對事物進行處理,處理結束以後再對這個計算結果進行SOAP包裝,然後把這個包作為一個Response發送給客戶端的代理類(Proxy Class),同樣地,這個代理類也對這個SOAP包進行解析處理,繼而進行後續操作。這就是WebService的一個運行過程。

Web Service大體上分為5個層次:

  1. Http傳輸通道;
  2. XML的數據格式;
  3. SOAP封裝格式;
  4. WSDL的描述方式;
  5. UDDI UDDI是一種目錄服務,企業可以使用它對Webservices進行註冊和搜索;

3.5 JMS

JMS是實現java領域遠程通信的一種手段和方法,基於JMS實現遠程通信時和RPC是不同的,雖然可以做到RPC的效果,但因為不是從協議級別定義的,因此我們不認為JMS是個RPC協議,但它確實是個遠程通信協議,在其他的語言體系中也存在著類似JMS的東西,可以統一的將這類機制稱為消息機制,而消息機制呢,通常是高併發、分散式領域推薦的一種通信機制,這裡的主要一個問題是容錯。

JMS是Java的消息服務,JMS的客戶端之間可以通過JMS服務進行非同步的消息傳輸。JMS支持兩種消息模型:Point-to-Point(P2P)和Publish/Subscribe(Pub/Sub),即點對點和發佈訂閱模型

來看JMS中的一次遠程通信的過程:

  1. 客戶端將請求轉化為符合JMS規定的Message;
  2. 通過JMS API將Message放入JMS Queue或Topic中;
  3. 如為JMS Queue,則發送中相應的目標Queue中,如為Topic,則發送給訂閱了此Topic的JMS Queue。
  4. 處理端則通過輪訓JMS Queue,來獲取消息,接收到消息後根據JMS協議來解析Message並處理。

同樣來回答問題:

  1. 傳輸的標準格式是?JMS規定的Message。
  2. 怎麼樣將請求轉化為傳輸的流?將參數信息放入Message中即可。
  3. 怎麼接收和處理流?輪訓JMS Queue來接收Message,接收到後進行處理,處理完畢後仍然是以Message的方式放入Queue中發送或Multicast。
  4. 傳輸協議是?不限。

基於JMS也是常用的實現遠程非同步調用的方法之一。

4 之間的區別

4.1 RPC與RMI

  1. RPC跨語言,而RMI只支持Java。
  2. RMI調用遠程對象方法,允許方法返回Java對象以及基本數據類型,而RPC不支持對象的概念,傳送到RPC服務的消息由外部數據表示 (External Data Representation, XDR) 語言表示,這種語言抽象了位元組序類和數據類型結構之間的差異。只有由 XDR 定義的數據類型才能被傳遞,可以說 RMI 是面向對象方式的Java RPC。
  3. 在方法調用上,RMI中,遠程介面使每個遠程方法都具有方法簽名。如果一個方法在伺服器上執行,但是沒有相匹配的簽名被添加到這個遠程介面上,那麼這個新方法就不能被RMI客戶方所調用。在RPC中,當一個請求到達RPC伺服器時,這個請求就包含了一個參數集和一個文本值,通常形成“classname.methodname”的形式。這就向RPC伺服器表明,被請求的方法在為 “classname”的類中,名叫“methodname”。然後RPC伺服器就去搜索與之相匹配的類和方法,並把它作為那種方法參數類型的輸入。這裡的參數類型是與RPC請求中的類型是匹配的。一旦匹配成功,這個方法就被調用了,其結果被編碼後返回客戶方。
  4. RPC本身沒有規範,但基本的工作機制是一樣的,即:serialization/deserialization+stub+skeleton,寬泛的講,只要能實現遠程調用,都是RPC,如:rmi .net-remoting ws/soap/rest hessian xmlrpc thrift potocolbuffer。
  5. 在Java里提供了完整的sockets通訊介面,但sockets要求客戶端和服務端必須進行應用級協議的編碼交換數據,採用sockets是非常麻煩的。一個代替Sockets的協議是RPC(Remote Procedure Call), 它抽象出了通訊介面用於過程調用,使得編程者調用一個遠程過程和調用本地過程同樣方便。RPC 系統採用XDR來編碼遠程調用的參數和返回值。但RPC並不支持對象,所以,面向對象的遠程調用RMI(Remote Method Invocation)成為必然選擇。採用RMI,調用遠程對象和調用本地對象同樣方便。RMI 採用JRMP(Java Remote Method Protocol)通訊協議,是構建在TCP/IP協議上的一種遠程調用方法。

4.2 JMS與RMI

  1. 採用JMS服務,對象是在物理上被非同步從網路的某個JVM 上直接移動到另一個JVM 上(是消息通知機制),而RMI對象是綁定在本地JVM 中,只有函數參數和返回值是通過網路傳送的(是請求應答機制)。
  2. RMI一般都是同步的,也就是說,當client調用Server的一個方法的時候,需要等到對方的返回,才能繼續執行client端,這個過程調用本地方法感覺上是一樣的,這也是RMI的一個特點。JMS 一般只是一個點發出一個Message到Message Server,發出之後一般不會關心誰用了這個message。所以,一般RMI的應用是緊耦合,JMS的應用相對來說是鬆散耦合應用。

4.3 Webservice與RMI

RMI是在tcp協議上傳遞可序列化的java對象,只能用在java虛擬機上,綁定語言,客戶端和服務端都必須是java。webservice沒有這個限制,webservice是在http協議上傳遞xml文本文件,與語言和平臺無關。

4.4 Webservice與JMS

Webservice專註於遠程服務調用,jms專註於信息交換。

大多數情況下Webservice是兩系統間的直接交互(Consumer Producer),而大多數情況下jms是三方系統交互(Consumer Producer)。當然,JMS也可以實現request-response模式的通信,只要Consumer或Producer其中一方兼任broker即可。

JMS可以做到非同步調用完全隔離了客戶端和服務提供者,能夠抵禦流量洪峰;WebService服務通常為同步調用,需要有複雜的對象轉換,相比SOAP,現在JSON,rest都是很好的http架構方案;

JMS是java平臺上的消息規範。一般jms消息不是一個xml,而是一個java對象,很明顯,jms沒考慮異構系統,說白了,JMS就沒考慮非java的東西。但是好在現在大多數的jms provider(就是JMS的各種實現產品)都解決了異構問題。相比WebService的跨平臺各有千秋吧。

5 可選實現技術

目前java領域可用於實現遠程通訊的框架或library,知名的有:JBoss-Remoting、Spring-Remoting、Hessian、Burlap、XFire(Axis)、ActiveMQ、Mina、Mule、EJB3等等,來對每種做個簡單的介紹和評價,其實呢,要做分散式服務框架,這些東西都是要有非常深刻的瞭解的,因為分散式服務框架其實是包含瞭解決分散式領域以及應用層面領域兩方面問題的。

當然,你也可以自己根據遠程網路通信原理(transport protocol+Net IO)去實現自己的通訊框架或library。

那麼在瞭解這些遠程通訊的框架或library時,會帶著什麼問題去學習呢?

  1. 是基於什麼協議實現的?
  2. 怎麼發起請求?
  3. 怎麼將請求轉化為符合協議的格式的?
  4. 使用什麼傳輸協議傳輸?
  5. 響應端基於什麼機制來接收請求?
  6. 怎麼將流還原為傳輸格式的?
  7. 處理完畢後怎麼回應?

5.1 Spring-Remoting

Spring-remoting是Spring提供java領域的遠程通訊框架,基於此框架,同樣也可以很簡單的將普通的spring bean以某種遠程協議的方式來發佈,同樣也可以配置spring bean為遠程調用的bean。

  1. 是基於什麼協議實現的?作為一個遠程通訊的框架,Spring通過集成多種遠程通訊的library,從而實現了對多種協議的支持,例如rmi、http+io、xml-rpc、binary-rpc等。
  2. 怎麼發起請求?在Spring中,由於其對於遠程調用的bean採用的是proxy實現,發起請求完全是通過服務介面調用的方式。
  3. 怎麼將請求轉化為符合協議的格式的?Spring按照協議方式將請求的對象信息轉化為流,例如Spring Http Invoker是基於Spring自己定義的一個協議來實現的,傳輸協議上採用的為http,請求信息是基於java串列化機制轉化為流進行傳輸。
  4. 使用什麼傳輸協議傳輸?支持多種傳輸協議,例如rmi、http等等。
  5. 響應端基於什麼機制來接收請求?響應端遵循協議方式來接收請求,對於使用者而言,則只需通過spring的配置方式將普通的spring bean配置為響應端或者說提供服務端。
  6. 怎麼將流還原為傳輸格式的?按照協議方式來進行還原。
  7. 處理完畢後怎麼回應?處理完畢後直接返回即可,spring-remoting將根據協議方式來做相應的序列化。

5.2 Hessian

Hessian是由caucho提供的一個基於binary-RPC實現的遠程通訊library。

  1. 是基於什麼協議實現的?基於Binary-RPC協議實現。
  2. 怎麼發起請求?需通過Hessian本身提供的API來發起請求。
  3. 怎麼將請求轉化為符合協議的格式的?Hessian通過其自定義的串列化機制將請求信息進行序列化,產生二進位流。
  4. 使用什麼傳輸協議傳輸?Hessian基於Http協議進行傳輸。
  5. 響應端基於什麼機制來接收請求?響應端根據Hessian提供的API來接收請求。
  6. 怎麼將流還原為傳輸格式的?Hessian根據其私有的串列化機制來將請求信息進行反序列化,傳遞給使用者時已是相應的請求信息對象了。
  7. 處理完畢後怎麼回應?處理完畢後直接返回,hessian將結果對象進行序列化,傳輸至調用端。

5.3 Burlap

Burlap也是有caucho提供,它和hessian的不同在於,它是基於XML-RPC協議的。

  1. 是基於什麼協議實現的?基於XML-RPC協議實現。
  2. 怎麼發起請求?根據Burlap提供的API。
  3. 怎麼將請求轉化為符合協議的格式的?將請求信息轉化為符合協議的XML格式,轉化為流進行傳輸。
  4. 使用什麼傳輸協議傳輸?Http協議。
  5. 響應端基於什麼機制來接收請求?監聽Http請求。
  6. 怎麼將流還原為傳輸格式的?根據XML-RPC協議進行還原。
  7. 處理完畢後怎麼回應?返回結果寫入XML中,由Burlap返回至調用端。

5.4 XFire、Axis

XFire、Axis是Webservice的實現框架,WebService可算是一個完整的SOA架構實現標準了,因此採用XFire、Axis這些也就意味著是採用webservice方式了。

  1. 是基於什麼協議實現的?基於SOAP協議。
  2. 怎麼發起請求?獲取到遠端service的proxy後直接調用。
  3. 怎麼將請求轉化為符合協議的格式的?將請求信息轉化為遵循SOAP協議的XML格式,由框架轉化為流進行傳輸。
  4. 使用什麼傳輸協議傳輸?Http協議。
  5. 響應端基於什麼機制來接收請求?監聽Http請求。
  6. 怎麼將流還原為傳輸格式的?根據SOAP協議進行還原。
  7. 處理完畢後怎麼回應?返回結果寫入XML中,由框架返回至調用端。

5.5 ActiveMQ

ActiveMQ是JMS的實現,基於JMS這類消息機制實現遠程通訊是一種不錯的選擇,畢竟消息機制本身的功能使得基於它可以很容易的去實現同步/非同步/單向調用等,而且消息機制從容錯角度上來說也是個不錯的選擇,這是Erlang能夠做到容錯的重要基礎。

  1. 是基於什麼協議實現的?基於JMS協議。
  2. 怎麼發起請求?遵循JMS API發起請求。
  3. 怎麼將請求轉化為符合協議的格式的?不太清楚,猜想應該是二進位流。
  4. 使用什麼傳輸協議傳輸?支持多種傳輸協議,例如socket、http等等。
  5. 響應端基於什麼機制來接收請求?監聽符合協議的埠。
  6. 怎麼將流還原為傳輸格式的?同問題3。
  7. 處理完畢後怎麼回應?遵循JMS API生成消息,並寫入JMS Queue中。

5.6 Mina

Mina是Apache提供的通訊框架,在之前一直沒有提到網路IO這塊,之前提及的框架或library基本都是基於BIO的,而Mina是採用NIO的,NIO在併發量增長時對比BIO而言會有明顯的性能提升,而java性能的提升,與其NIO這塊與OS的緊密結合是有不小的關係的。

  1. 是基於什麼協議實現的?基於純粹的Socket+NIO。
  2. 怎麼發起請求?通過Mina提供的Client API。
  3. 怎麼將請求轉化為符合協議的格式的?Mina遵循java串列化機制對請求對象進行序列化。
  4. 使用什麼傳輸協議傳輸?支持多種傳輸協議,例如socket、http等等。
  5. 響應端基於什麼機制來接收請求?以NIO的方式監聽協議埠。
  6. 怎麼將流還原為傳輸格式的?遵循java串列化機制對請求對象進行反序列化。
  7. 處理完畢後怎麼回應?遵循Mina API進行返回。

MINA是NIO方式的,因此支持非同步調用是毫無懸念的。

6 RPC框架的發展與現狀

RPC(Remote Procedure Call)是一種遠程調用協議,簡單地說就是能使應用像調用本地方法一樣的調用遠程的過程或服務,可以應用在分散式服務、分散式計算、遠程服務調用等許多場景。說起 RPC 大家並不陌生,業界有很多開源的優秀 RPC 框架,例如 Dubbo、Thrift、gRPC、Hprose 等等。下麵先簡單介紹一下 RPC 與常用遠程調用方式的特點,以及一些優秀的開源 RPC 框架。

RPC 與其它遠程調用方式比較,RPC 與 HTTP、RMI、Web Service 都能完成遠程調用,但是實現方式和側重點各有不同。

6.1 RPC與HTTP

HTTP(HyperText Transfer Protocol)是應用層通信協議,使用標準語義訪問指定資源(圖片、介面等),網路中的中轉伺服器能識別協議內容。HTTP 協議是一種資源訪問協議,通過 HTTP 協議可以完成遠程請求並返回請求結果。

HTTP 的優點是簡單、易用、可理解性強且語言無關,在遠程服務調用中包括微博有著廣泛應用。HTTP 的缺點是協議頭較重,一般請求到具體伺服器的鏈路較長,可能會有 DNS 解析、Nginx 代理等。

RPC 是一種協議規範,可以把 HTTP 看作是一種 RPC 的實現,也可以把 HTTP 作為 RPC 的傳輸協議來應用。RPC 服務的自動化程度比較高,能夠實現強大的服務治理功能,和語言結合更友好,性能也十分優秀。與 HTTP 相比,RPC 的缺點就是相對複雜,學習成本稍高。

6.2 RPC與RMI

RMI(Remote Method Invocation)是指 Java 語言中的遠程方法調用,RMI 中的每個方法都具有方法簽名,RMI 客戶端和伺服器端通過方法簽名進行遠程方法調用。RMI 只能在 Java 語言中使用,可以把 RMI 看作面向對象的 Java RPC。

6.3 RPC與Web Service

Web Service 是一種基於 Web 進行服務發佈、查詢、調用的架構方式,重點在於服務的管理與使用。Web Service 一般通過 WSDL 描述服務,使用 SOAP通過 HTTP 調用服務。

RPC 是一種遠程訪問協議,而 Web Service 是一種體繫結構,Web Service 也可以通過 RPC 來進行服務調用,因此 Web Service 更適合同一個 RPC 框架進行比較。當 RPC 框架提供了服務的發現與管理,並使用 HTTP 作為傳輸協議時,其實就是 Web Service。

相對 Web Service,RPC 框架可以對服務進行更細粒度的治理,包括流量控制、SLA 管理等,在微服務化、分散式計算方面有更大的優勢。

RPC 可基於 HTTP 或 TCP 協議,Web Service 就是基於 HTTP 協議的 RPC,它具有良好的跨平臺性,但其性能卻不如基於 TCP 協議的 RPC。會兩方面會直接影響 RPC 的性能,一是傳輸方式,二是序列化。

眾所周知,TCP 是傳輸層協議,HTTP 是應用層協議,而傳輸層較應用層更加底層,在數據傳輸方面,越底層越快,因此,在一般情況下,TCP 一定比 HTTP 快。

7 總結

在遠程通訊領域中,涉及的知識點還是相當的多的,例如有:通信協議(Socket/tcp/http/udp/rmi/xml-rpc etc.)、消息機制、網路IO(BIO/NIO/AIO)、MultiThread、本地調用與遠程調用的透明化方案(涉及Java Classloader、Dynamic Proxy、Unit Test etc.)、非同步與同步調用、網路通信處理機制(自動重連、廣播、異常、池處理等等)、Java Serialization (各種協議的私有序列化機制等)、各種框架的實現原理(傳輸格式、如何將傳輸格式轉化為流的、如何將請求信息轉化為傳輸格式的、如何接收流的、如何將流還原為傳輸格式的等等),要精通其中的哪些東西,得根據實際需求來決定了,只有在瞭解了原理的情況下才能很容易的做出選擇,甚至可以根據需求做私有的遠程通訊協議,對於從事分散式服務平臺或開發較大型的分散式應用的人而言,我覺得至少上面提及的知識點是需要比較瞭解的。


您的分享是我們最大的動力!

-Advertisement-
Play Games
更多相關文章
  • const的用法,特別是用在函數後面 在普通的非 const成員函數中,this的類型是一個指向類類型的 const指針。可以改變this所指向的值,但不能改變 this所保存的地址。 在 const成員函數中,this的類型是一個指向 const類類型對象的 const指針。既不能改變 this所... ...
  • 常用排序 名稱 複雜度 說明 備註 冒泡排序Bubble Sort O(N*N) 將待排序的元素看作是豎著排列的“氣泡”,較小的元素比較輕,從而要往上浮 插入排序 Insertion sort O(N*N) 逐一取出元素,在已經排序的元素序列中從後向前掃描,放到適當的位置 起初,已經排序的元素序列為 ...
  • 首先確定要爬取的笑話網站,我是直接百度笑話搜到的第一個網站,網址是http://www.jokeji.cn/,點進去發現網頁構建在我看來還是比較複雜的,由於還是初學者,首先得先找到網頁資源集中所在,找出其中的規律,然後才好有針對性的爬取資源。對於這個網址,我發現在左邊側欄有一個笑話大全的分類框。這個 ...
  • 基礎內容請自行谷歌..廢話不多說,直接上乾貨!! “ 代碼 一 ”: 1 import sys, locale 2 3 s = "小甲" 4 print(s) 5 print(type(s)) 6 print(sys.getdefaultencoding()) 7 print(locale.getd ...
  • 14.wx.showToast交互反饋 "wx.showToast文檔" post detail.js添加個消息提示框 效果 15.音樂播放功能 "音樂播放API文檔" 在posts data.js裡面給每篇文章添加一個music屬性 post detail.wxml 沒播放音樂就顯示文章圖片,播放 ...
  • 回顧: ACID:DBMS在寫入或更新資料的過程中,為保證事務正確可靠,具有的四個特性:原子性(不可分割性)、一致性、隔離性(獨立性)、持久性 一個事務:一系列資料庫操作組成的一個完整的邏輯過程 原子性:一個事務中的所有操作,要麼全部完成、要麼全部不完成,若發生錯誤,回滾(RollBack) 一致性 ...
  • 1.split:切割 使用split不會返回被切割的字元 結果為:['', 'as', 'asf', 'asf', 'a'] 要想返回被切割的數字,需要在正則表達式前後加( ) 結果為:['', '5', 'as', '46', 'asf', '46', 'asf', '46', 'a'] 2.分組 ...
  • 本章內容 一、數據類型 在記憶體中存儲的數據可以有多種類型。 在 Python 有五個標準的數據類型 數字 Python 支持四種不同的數字類型 int (有符號整數) long (長整型) float (浮點型) complex (複數) 字元串 字元串或串(String)是由數字、字母、下劃線組成 ...
一周排行
    -Advertisement-
    Play Games
  • 移動開發(一):使用.NET MAUI開發第一個安卓APP 對於工作多年的C#程式員來說,近來想嘗試開發一款安卓APP,考慮了很久最終選擇使用.NET MAUI這個微軟官方的框架來嘗試體驗開發安卓APP,畢竟是使用Visual Studio開發工具,使用起來也比較的順手,結合微軟官方的教程進行了安卓 ...
  • 前言 QuestPDF 是一個開源 .NET 庫,用於生成 PDF 文檔。使用了C# Fluent API方式可簡化開發、減少錯誤並提高工作效率。利用它可以輕鬆生成 PDF 報告、發票、導出文件等。 項目介紹 QuestPDF 是一個革命性的開源 .NET 庫,它徹底改變了我們生成 PDF 文檔的方 ...
  • 項目地址 項目後端地址: https://github.com/ZyPLJ/ZYTteeHole 項目前端頁面地址: ZyPLJ/TreeHoleVue (github.com) https://github.com/ZyPLJ/TreeHoleVue 目前項目測試訪問地址: http://tree ...
  • 話不多說,直接開乾 一.下載 1.官方鏈接下載: https://www.microsoft.com/zh-cn/sql-server/sql-server-downloads 2.在下載目錄中找到下麵這個小的安裝包 SQL2022-SSEI-Dev.exe,運行開始下載SQL server; 二. ...
  • 前言 隨著物聯網(IoT)技術的迅猛發展,MQTT(消息隊列遙測傳輸)協議憑藉其輕量級和高效性,已成為眾多物聯網應用的首選通信標準。 MQTTnet 作為一個高性能的 .NET 開源庫,為 .NET 平臺上的 MQTT 客戶端與伺服器開發提供了強大的支持。 本文將全面介紹 MQTTnet 的核心功能 ...
  • Serilog支持多種接收器用於日誌存儲,增強器用於添加屬性,LogContext管理動態屬性,支持多種輸出格式包括純文本、JSON及ExpressionTemplate。還提供了自定義格式化選項,適用於不同需求。 ...
  • 目錄簡介獲取 HTML 文檔解析 HTML 文檔測試參考文章 簡介 動態內容網站使用 JavaScript 腳本動態檢索和渲染數據,爬取信息時需要模擬瀏覽器行為,否則獲取到的源碼基本是空的。 本文使用的爬取步驟如下: 使用 Selenium 獲取渲染後的 HTML 文檔 使用 HtmlAgility ...
  • 1.前言 什麼是熱更新 游戲或者軟體更新時,無需重新下載客戶端進行安裝,而是在應用程式啟動的情況下,在內部進行資源或者代碼更新 Unity目前常用熱更新解決方案 HybridCLR,Xlua,ILRuntime等 Unity目前常用資源管理解決方案 AssetBundles,Addressable, ...
  • 本文章主要是在C# ASP.NET Core Web API框架實現向手機發送驗證碼簡訊功能。這裡我選擇是一個互億無線簡訊驗證碼平臺,其實像阿裡雲,騰訊雲上面也可以。 首先我們先去 互億無線 https://www.ihuyi.com/api/sms.html 去註冊一個賬號 註冊完成賬號後,它會送 ...
  • 通過以下方式可以高效,並保證數據同步的可靠性 1.API設計 使用RESTful設計,確保API端點明確,並使用適當的HTTP方法(如POST用於創建,PUT用於更新)。 設計清晰的請求和響應模型,以確保客戶端能夠理解預期格式。 2.數據驗證 在伺服器端進行嚴格的數據驗證,確保接收到的數據符合預期格 ...