十年網(wǎng)站開發(fā)經(jīng)驗(yàn) + 多家企業(yè)客戶 + 靠譜的建站團(tuán)隊(duì)
量身定制 + 運(yùn)營維護(hù)+專業(yè)推廣+無憂售后,網(wǎng)站問題一站解決
我們?cè)谑褂?MessagePack 對(duì) List 對(duì)象數(shù)據(jù)進(jìn)行序列化的時(shí)候,發(fā)現(xiàn)序列化以后的二進(jìn)制數(shù)組數(shù)據(jù)偏大的情況。
請(qǐng)注意,不是所有的 List 對(duì)象都會(huì)出現(xiàn)這種情況,這個(gè)根據(jù)你 List 對(duì)象中存儲(chǔ)的內(nèi)容有關(guān)。
有關(guān)本問題的測試源代碼請(qǐng)參考:https://github.com/cwiki-us-demo/serialize-deserialize-demo-java/blob/master/src/test/java/com/insight/demo/serialize/MessagePackDataTest.java?中的內(nèi)容。
考察下面的代碼:
List?dataList?=?MockDataUtils.getMessageDataList(600000); ? ObjectMapper?objectMapper?=?new?ObjectMapper(new?MessagePackFactory()); raw?=?objectMapper.writeValueAsBytes(dataList); ? FileUtils.byteCountToDisplaySize(raw.length); logger.debug("Raw?Size:?[{}]",?FileUtils.byteCountToDisplaySize(raw.length));
我們會(huì)發(fā)現(xiàn),針對(duì)這個(gè) 60 萬個(gè)對(duì)象的 List 的序列化后的數(shù)據(jù)達(dá)到了 33MB。
如果我們?cè)俣x??ObjectMapper 對(duì)象的時(shí)候添加一部分參數(shù),我們會(huì)發(fā)現(xiàn)大小將會(huì)有顯著改善。
請(qǐng)參考下面的代碼:
List?dataList?=?MockDataUtils.getMessageDataList(600000); ? ObjectMapper?objectMapper?=?new?ObjectMapper(new?MessagePackFactory()); objectMapper.configure(JsonParser.Feature.ALLOW_SINGLE_QUOTES,?true); objectMapper.configure(DeserializationFeature.FAIL_ON_UNKNOWN_PROPERTIES,?false); objectMapper.setSerializationInclusion(JsonInclude.Include.NON_NULL); objectMapper.setAnnotationIntrospector(new?JsonArrayFormat()); ? rawJsonArray?=?objectMapper.writeValueAsBytes(dataList); logger.debug("rawJsonArray?Size:?[{}]",?FileUtils.byteCountToDisplaySize(rawJsonArray.length));
如果你運(yùn)行上面的代碼,你會(huì)看到程序的輸出字符串將會(huì)降低到 23MB。
這里面主要是?objectMapper.setAnnotationIntrospector(new JsonArrayFormat());
?這句話起了作用。
在正常的場景中,我們可以通過 注解 JsonIgnore, 將其加到屬性上,即解析時(shí)即會(huì)過濾到屬性。
而實(shí)際實(shí)現(xiàn),則是由類?JacksonAnnotationIntrospector
?中 的?hasIgnoreMarker
?來完成,則就是通過讀取注解來判斷屬性是否應(yīng)該被exclude掉。ObjectMapper
中默認(rèn)的?AnnotationIntrospector
?即是?JacksonAnnotationIntrospector
?來完成,但我們可以通過 方法?ObjectMapper.setAnnotationIntrospector
?來重新指定自定義的實(shí)現(xiàn)。
https://www.cwiki.us/display/Serialization/MessagePack+Jackson+Data+Size
另外有需要云服務(wù)器可以了解下創(chuàng)新互聯(lián)scvps.cn,海內(nèi)外云服務(wù)器15元起步,三天無理由+7*72小時(shí)售后在線,公司持有idc許可證,提供“云服務(wù)器、裸金屬服務(wù)器、高防服務(wù)器、香港服務(wù)器、美國服務(wù)器、虛擬主機(jī)、免備案服務(wù)器”等云主機(jī)租用服務(wù)以及企業(yè)上云的綜合解決方案,具有“安全穩(wěn)定、簡單易用、服務(wù)可用性高、性價(jià)比高”等特點(diǎn)與優(yōu)勢,專為企業(yè)上云打造定制,能夠滿足用戶豐富、多元化的應(yīng)用場景需求。