輕量級分布式 RPC 框架

一、什么是RPC框架？

RPC，全稱為Remote Procedure Call，即遠程過程調(diào)用，是一種計算機通信協(xié)議。

比如現(xiàn)在有兩臺機器：A機器和B機器，并且分別部署了應(yīng)用A和應(yīng)用B。假設(shè)此時位于A機器上的A應(yīng)用想要調(diào)用位于B機器上的B應(yīng)用提供的函數(shù)或是方法，由于A應(yīng)用和B應(yīng)用不在一個內(nèi)存空間里面，所以不能直接調(diào)用，此時就需要通過網(wǎng)絡(luò)來表達調(diào)用的方式和傳輸調(diào)用的數(shù)據(jù)。也即所謂的遠程調(diào)用。

二、RPC框架的實現(xiàn)原理？

主要有以下幾個步驟：

1、建立通信

首先要解決通訊的問題：即A機器想要調(diào)用B機器，首先得建立起通信連接。主要是通過在客戶端和服務(wù)器之間建立TCP連接，遠程過程調(diào)用的所有相關(guān)的數(shù)據(jù)都在這個連接里面進行傳輸交換。

通常這個連接可以是按需連接（需要調(diào)用的時候就先建立連接，調(diào)用結(jié)束后就立馬斷掉），也可以是長連接（客戶端和服務(wù)器建立起連接之后保持長期持有，不管此時有無數(shù)據(jù)包的發(fā)送，可以配合心跳檢測機制定期檢測建立的連接是否存活有效），多個遠程過程調(diào)用共享同一個連接。

2、服務(wù)尋址

解決尋址的問題：即A機器上的應(yīng)用A要調(diào)用B機器上的應(yīng)用B，那么此時對于A來說如何告知底層的RPC框架所要調(diào)用的服務(wù)具體在哪里呢？

通常情況下我們需要提供B機器（主機名或IP地址）以及特定的端口，然后指定調(diào)用的方法或者函數(shù)的名稱以及入?yún)⒊鰠⒌刃畔?，這樣才能完成服務(wù)的一個調(diào)用。比如基于Web服務(wù)協(xié)議棧的RPC，就需要提供一個endpoint URI，或者是從UDDI服務(wù)上進行查找。如果是RMI調(diào)用的話，還需要一個RMI Registry來注冊服務(wù)的地址。

3、網(wǎng)絡(luò)傳輸

3.1、序列化

當A機器上的應(yīng)用發(fā)起一個RPC調(diào)用時，調(diào)用方法和其入?yún)⒌刃畔⑿枰ㄟ^底層的網(wǎng)絡(luò)協(xié)議如TCP傳輸?shù)紹機器，由于網(wǎng)絡(luò)協(xié)議是基于二進制的，所有我們傳輸?shù)膮?shù)數(shù)據(jù)都需要先進行序列化（Serialize）或者編組（marshal）成二進制的形式才能在網(wǎng)絡(luò)中進行傳輸。然后通過尋址操作和網(wǎng)絡(luò)傳輸將序列化或者編組之后的二進制數(shù)據(jù)發(fā)送給B機器。

3.2、反序列化

當B機器接收到A機器的應(yīng)用發(fā)來的請求之后，又需要對接收到的參數(shù)等信息進行反序列化操作（序列化的逆操作），即將二進制信息恢復(fù)為內(nèi)存中的表達方式，然后再找到對應(yīng)的方法（尋址的一部分）進行本地調(diào)用（一般是通過生成代理Proxy去調(diào)用, 通常會有JDK動態(tài)代理、CGLIB動態(tài)代理、Javassist生成字節(jié)碼技術(shù)等），之后得到調(diào)用的返回值。

4、服務(wù)調(diào)用

B機器進行本地調(diào)用（通過代理Proxy）之后得到了返回值，此時還需要再把返回值發(fā)送回A機器，同樣也需要經(jīng)過序列化操作，然后再經(jīng)過網(wǎng)絡(luò)傳輸將二進制數(shù)據(jù)發(fā)送回A機器，而當A機器接收到這些返回值之后，則再次進行反序列化操作，恢復(fù)為內(nèi)存中的表達方式，最后再交給A機器上的應(yīng)用進行相關(guān)處理（一般是業(yè)務(wù)邏輯處理操作）。

通常，經(jīng)過以上四個步驟之后，一次完整的RPC調(diào)用算是完成了，另外可能因為網(wǎng)絡(luò)抖動等原因需要重試等。

三、為什么需要RPC？

主要就是因為在幾個進程內(nèi)（應(yīng)用分布在不同的機器上），無法共用內(nèi)存空間，或者在一臺機器內(nèi)通過本地調(diào)用無法完成相關(guān)的需求，比如不同的系統(tǒng)之間的通訊，甚至不同組織之間的通訊。此外由于機器的橫向擴展，需要在多臺機器組成的集群上部署應(yīng)用等等。

四、RPC支持哪些協(xié)議？

最早的CORBA，WebService方式的RPC風格， Hessian, Thrift甚至Rest API。

五、RPC的實現(xiàn)基礎(chǔ)？

1、需要有非常高效的網(wǎng)絡(luò)通信，比如一般選擇Netty作為網(wǎng)絡(luò)通信框架

2、需要有比較高效的序列化框架，比如谷歌的Protobuf序列化框架

3、可靠的尋址方式（主要是提供服務(wù)的發(fā)現(xiàn)），比如可以使用Zookeeper來注冊服務(wù)等等

4、如果是帶會話（狀態(tài)）的RPC調(diào)用，還需要有會話和狀態(tài)保持的功能

六、RPC調(diào)用過程？

6.1 一個基本的RPC架構(gòu)里面應(yīng)該至少包含以下4個組件：

1、客戶端（Client）:服務(wù)調(diào)用方（服務(wù)消費者）

2、客戶端存根（Client Stub）:存放服務(wù)端地址信息，將客戶端的請求參數(shù)數(shù)據(jù)信息打包成網(wǎng)絡(luò)消息，再通過網(wǎng)絡(luò)傳輸發(fā)送給服務(wù)端

3、服務(wù)端存根（Server Stub）:接收客戶端發(fā)送過來的請求消息并進行解包，然后再調(diào)用本地服務(wù)進行處理

4、服務(wù)端（Server）:服務(wù)的真正提供者

6.2 具體的調(diào)用過程如下：

1、服務(wù)消費者（client客戶端）通過本地調(diào)用的方式調(diào)用服務(wù)

2、客戶端存根（client stub）接收到調(diào)用請求后負責將方法、入?yún)⒌刃畔⑿蛄谢ńM裝）成能夠進行網(wǎng)絡(luò)傳輸?shù)南Ⅲw

3、客戶端存根（client stub）找到遠程的服務(wù)地址，并且將消息通過網(wǎng)絡(luò)發(fā)送給服務(wù)端

4、服務(wù)端存根（server stub）收到消息后進行解碼（反序列化操作）

5、服務(wù)端存根（server stub）根據(jù)解碼結(jié)果調(diào)用本地的服務(wù)進行相關(guān)處理

6、本地服務(wù)執(zhí)行具體業(yè)務(wù)邏輯并將處理結(jié)果返回給服務(wù)端存根（server stub）

7、服務(wù)端存根（server stub）將返回結(jié)果重新打包成消息（序列化）并通過網(wǎng)絡(luò)發(fā)送至消費方

8、客戶端存根（client stub）接收到消息，并進行解碼（反序列化）

9、服務(wù)消費方得到最終結(jié)果

而RPC框架的實現(xiàn)目標則是將上面的第2-10步完好地封裝起來，也就是把調(diào)用、編碼/解碼的過程給封裝起來，讓用戶感覺上像調(diào)用本地服務(wù)一樣的調(diào)用遠程服務(wù)。

七、RPC框架需要解決的問題？

1、如何確定客戶端和服務(wù)端之間的通信協(xié)議？

2、如何更高效地進行網(wǎng)絡(luò)通信？

3、服務(wù)端提供的服務(wù)如何暴露給客戶端？

4、客戶端如何發(fā)現(xiàn)這些暴露的服務(wù)？

5、如何更高效地對請求對象和響應(yīng)結(jié)果進行序列化和反序列化操作？

八、使用了哪些技術(shù)？

8.1、動態(tài)代理

生成Client Stub（客戶端存根）和Server Stub（服務(wù)端存根）的時候需要用到php動態(tài)代理技術(shù)。

8.2、序列化

在網(wǎng)絡(luò)中，所有的數(shù)據(jù)都將會被轉(zhuǎn)化為字節(jié)進行傳送，所以為了能夠使參數(shù)對象在網(wǎng)絡(luò)中進行傳輸，需要對這些參數(shù)進行序列化和反序列化操作。

序列化：把對象轉(zhuǎn)換為字節(jié)序列的過程稱為對象的序列化，也就是編碼的過程。

反序列化：把字節(jié)序列恢復(fù)為對象的過程稱為對象的反序列化，也就是解碼的過程。

目前比較高效的開源序列化框架：如Kryo、fastjson和Protobuf等。

8.3、NIO通信

出于并發(fā)性能的考慮，傳統(tǒng)的阻塞式 IO 顯然不太合適，因此我們需要異步的 IO，即 NIO。

8.4、服務(wù)注冊中心

可選：Redis、Zookeeper、Consul 、Etcd。

一般使用ZooKeeper提供服務(wù)注冊與發(fā)現(xiàn)功能，解決單點故障以及分布式部署的問題(注冊中心)。

實現(xiàn)RPC框架

參考?

https://my.oschina.net/huangyong/blog/361751

github代碼?

https://github.com/hu1991die/netty-rpc

原文參考：

1.https://www.zhihu.com/question/25536695

2.http://www.importnew.com/22003.html

3.http://blog.jobbole.com/92290/