RPC框架之Thrift分析

1、簡介 java

一、Thrift是Facebook開發的跨語言的RPC服務框架。隨後貢獻給Apache開源組織。成爲RPC服務的主流框架。 python

二、特色:
 優勢:
      跨語言,支持java、c/c++、python等多種編程語言
      IDL定義接口函數和數據類型
      支持二進制傳輸,效率高
      支持多種工做模型,單線程模型、線程池模型、非阻塞模型
 
 缺點:
      文檔很少

      各版本不兼容,升級不方便 c++

2、分析 git



Thrift分爲服務端(server)和客戶端(Client)兩個對應的部分。代碼分層設計,分爲Transport(傳輸層)、Protocol(協議層)、Processor(處理層)和Server(服務層)。 github

一、主要的處理流程: 編程

各部分類圖: 設計模式

傳輸層 數組

TTransport:客戶端傳輸層抽象基礎類,主要方法:read、write、flush、open、close。read、write方法爲核心
TSocket TNonBlockingSocket:分別是基於BIO和NIO客戶端傳輸類。 TSocket持有Socket,設置輸入輸出流使用1K的BufferedStream,
TNonBlockingSocket持有SocketChannel,read和write方法裏的byte會每次被wrap成一個ByteBuffer。
TServerSocket TNonBlockingServerSocket:分別是基於BIO和NIO服務端傳輸類。TServerSocket持有ServerSocket,TNonBlockingServerSocket持有ServerSocketChannel。
TFramedTransport與TFastFramedTransport:將數據封裝Frame(幀)實現的, TFastFramedTransport效率內存使用率高,使用了自動擴展長度的buffer
TZlibTransport:讀取時按1K爲單位將數據讀出並調用JDK的zip函數進行解壓再放到Buffer,寫入時,在flush時先zip再寫入。
TSaslClientTransport與TSaslServerTransport:提供SSL校驗



協議層: 框架

1)IDL 定義支持類型:
   基本類型: i16,i32,i64, double, boolean,byte,byte[], String。
   容器類型: List,Set,Map,TList/TSet/TMap類包含其元素的類型與元素的總個數。
   Struct類型:即面向對象的Class,繼承於TBase。TStruct類有Name屬性,還含有一系列的Field。TField類有本身的Name,類型,順序id屬性。
   Exception類型:Struct,繼承於TException這個checked exception。
   Enum類型:傳輸時是個i32。
   Message類型:封裝往返的RPC消息。TMessage類包含Name,類型(請求,返回,異常,ONEWAY)與seqId屬性。

2) 類分析:
TProtocol:基礎抽象類,擁有對IDL定義支持類型read和write方法,對於結構類型先readxxBegin()(或writexxBegin()),結束時調用readxxEnd() (或readxxEnd())方法。
TBinaryProtocol:二進制流傳輸協議類,把各種型轉換成byte數組,交給TTransport傳輸。
TCompactProtocol:壓縮方法二進制協議類,將Integer按照ZigZag
TTupleProtocol:繼承TCompactProtocol,Struct使用時更省空間
TJSONProtocol:Json格式協議類,將數據封裝成Json格式,再轉爲byte數組交給傳輸層。
TSimpleJSONProtocol:Json格式協議類,但只支持寫的功能。
TProtocolFactory:TProtocol的工廠基礎類,每一個TProtocol實現類均有一個工廠實現。


Server層 異步



TServer 基礎抽象類,實際上相似一個容器,持有TProcessor、TTransport、TProtocol的工廠對象,AbstractServerArgs做爲參數抽象類,提供一個serve()方法,用於啓動服務,stop()方法中止服務。
TSimpleServer :單線程阻塞式服務,只用於作測試的簡單服務類。
TNonblockingServer:支持非阻塞單線程服務模型,基於NIO的Select實現。
THsHaServer:繼承TNonblockingServer。單線程處理I/O,線程池請求的處理。
TThreadedSelectorServer: 繼承AbstractNonblockingServer。維持兩個線程池,一個線程池處理I/O,另外一個線程池處理請求。  TThreadPoolServer:專門的線程接受請求並交給線程池處理,完成後線程池鏈接釋放。請求處理線程和I/O線程爲同一線程。阻塞式線程池模型。
以上五種模型參見:
https://github.com/m1ch1/mapkeeper/wiki/Thrift-Java-Servers-Compared
http://blog.csdn.net/houjixin/article/details/42779915



Processer層



TProcessor:基礎接口,抽象方法process(TProtocol in, TProtocol out)
TBaseProcessor 基礎抽象類,持有processMap對象,key爲方法名標示,value爲方法(ProcessFunction的實例),實現TProcessor的方法process,in.readMessageBegin()拿到傳過來的方法名,若是存在則準備交給具體業務類執行,不然拋出無效方法的異常。
Processor:IDL生成,實現TProcessor接口並繼承TBaseProcessor類。
TAsyncProcessor:異步處理接口,抽象方法process(final AsyncFrameBuffer fb) TBaseAsyncProcessor:異步處理抽象類,持有processMap對象,key爲方法名標示,value爲方法(AsyncProcessFunction的實例),實現TAsyncProcessor的方法process(final AsyncFrameBuffer fb),AsyncProcessFunction的getResultHandler方法拿到一個AsyncMethodCallback,帶執行start方法後經過sendResponse方法返回。 AsyncProcessor 由IDL生成,實現TAsyncProcessor接口並繼承TAsyncProcessor類。
TProcessorFactory: 構建 TProcessor的工廠類


總結


Thrift代碼分析,能夠借鑑和學習的方面:
一、代碼分層設計,Thrift分傳輸層、協議層、處理層、服務層四個層設計,上層只依賴下層,方便擴展和維護。 二、基於接口編程和多用抽象工廠設計,每層之間都有一個核心的接口,各個實體初始化基本是使用工廠設計模式,下降耦合。
三、基於BIO和NIO,知足不一樣情景,便於性能調優。
相關文章
相關標籤/搜索