使用MRUnit對MapReduce進行單元測試

1. 爲什麼需要單元測試 　　一旦MapReduce項目提交到集羣之後，若是出現問題是很難定位和修改的，只能通過打印日誌的方式進行篩選。又如果數據和項目較大時，修改起來則更加麻煩。所以，在將MapReduce項目提交到集羣上之前，我們需要先對其進行單元測試。 2. 使用什麼框架進行單元測試 　　MRUnit是Cloudera公司專爲Hadoop MapReduce寫的單元測試框架，其API非常簡潔

>>阅读原文<<