MessagePack Jackson 數據大小

咱們在使用 MessagePack 對 List 對象數據進行序列化的時候,發現序列化之後的二進制數組數據偏大的狀況。java

請注意,不是全部的 List 對象都會出現這種狀況,這個根據你 List 對象中存儲的內容有關。git

有關本問題的測試源代碼請參考:https://github.com/cwiki-us-demo/serialize-deserialize-demo-java/blob/master/src/test/java/com/insight/demo/serialize/MessagePackDataTest.java 中的內容。github

考察下面的代碼:數組

List<MessageData> dataList = MockDataUtils.getMessageDataList(600000);
 
ObjectMapper objectMapper = new ObjectMapper(new MessagePackFactory());
raw = objectMapper.writeValueAsBytes(dataList);
 
FileUtils.byteCountToDisplaySize(raw.length);
logger.debug("Raw Size: [{}]", FileUtils.byteCountToDisplaySize(raw.length));

咱們會發現,針對這個 60 萬個對象的 List 的序列化後的數據達到了 33MB。app

若是咱們再定義  ObjectMapper 對象的時候添加一部分參數,咱們會發現大小將會有顯著改善。測試

請參考下面的代碼:debug

List<MessageData> dataList = MockDataUtils.getMessageDataList(600000);
 
ObjectMapper objectMapper = new ObjectMapper(new MessagePackFactory());
objectMapper.configure(JsonParser.Feature.ALLOW_SINGLE_QUOTES, true);
objectMapper.configure(DeserializationFeature.FAIL_ON_UNKNOWN_PROPERTIES, false);
objectMapper.setSerializationInclusion(JsonInclude.Include.NON_NULL);
objectMapper.setAnnotationIntrospector(new JsonArrayFormat());
 
rawJsonArray = objectMapper.writeValueAsBytes(dataList);
logger.debug("rawJsonArray Size: [{}]", FileUtils.byteCountToDisplaySize(rawJsonArray.length));

若是你運行上面的代碼,你會看到程序的輸出字符串將會下降到 23MB。code

這裏面主要是 objectMapper.setAnnotationIntrospector(new JsonArrayFormat()); 這句話起了做用。orm

在正常的場景中,咱們能夠經過 註解 JsonIgnore, 將其加到屬性上,即解析時即會過濾到屬性。對象

而實際實現,則是由類 JacksonAnnotationIntrospector 中 的 hasIgnoreMarker 來完成,則就是經過讀取註解來判斷屬性是否應該被exclude掉。ObjectMapper中默認的 AnnotationIntrospector 便是 JacksonAnnotationIntrospector 來完成,但咱們能夠經過 方法 ObjectMapper.setAnnotationIntrospector 來從新指定自定義的實現。

 

https://www.cwiki.us/display/Serialization/MessagePack+Jackson+Data+Size

相關文章
相關標籤/搜索