hadoop profiling

和debug task一樣，profiling一個運行在分佈式hadoop環境下的mapredeuce job是比較困難的。但在hadoop中，是可以讓用戶針對某些tasks進行profiling採集的，當這些task執行完後，將這些 profiling日誌保存的文件發送到作業的提交client機器上，然後用戶就可以用自己熟悉的工具來分析這些profiling日誌，進行 tasks執行瓶頸的分析。

>>阅读原文<<