MapReduce程序調試工具--MRUnit簡介與使用

MRUnit簡介:         當hadoop的MapReduce做業提交到集羣環境中運行,對於出問題的定位比較是比較麻煩的,有時須要一遍遍的修改代碼和打印出日誌來排查一個很小的問題,若是數據量大的話調試起來至關耗時間。所以有必要使用良好的單元測試手段來儘早的消除明顯的bug。然而作MapReduce的單元測試會有一個障礙,好比Map和Reduce一些參數對象是在運行時由hadoop框架傳入的
相關文章
相關標籤/搜索