使用Hive SQL插入動態分區的Parquet表OOM異常分析

  1.異常描述 當運行「INSERT ... SELECT」語句向Parquet或者ORC格式的表中插入數據時，如果啓用了動態分區，你可能會碰到以下錯誤，而導致作業無法正常執行。 Hive客戶端： Task with the most failures(4): Diagnostic Messages for this Task: Error: GC overhead limit exceeded

>>阅读原文<<