歷時兩週,將我司的Hadoop2升級到Hadoop3,踩了幾個大坑...

文末有贈書福利 繼一次超萬億規模的Hadoop NameNode性能故障排查過程之後,雖然解決了Hadoop2.6.0版本在項目中的問題,但客戶依然比較擔心,一是擔心版本過老,還存在其他未發現的問題;二是按目前每天近千億條的數據增長,終究會遇到NameNode的第二次瓶頸。 基於上述原因,我們決定將當前集羣由Hadoop2.6.0版本升級到Hadoop3.2.1版本,且啓用聯邦模式。歷時2周,我們
相關文章
相關標籤/搜索