hadoop中的序列化與Writable接口

簡介 序列化和反序列化就是結構化對象和字節流之間的轉換,主要用在內部進程的通訊和持久化存儲方面。 通訊格式需求 hadoop在節點間的內部通訊使用的是RPC,RPC協議把消息翻譯成二進制字節流發送到遠程節點,遠程節點再通過反序列化把二進制流轉成原始的信息。RPC的序列化需要實現以下幾點: 1.壓縮,可以起到壓縮的效果,佔用的寬帶資源要小。 2.快速,內部進程爲分佈式系統構建了高速鏈路,因此在序列化
相關文章
相關標籤/搜索