記一次mr中限流報的異常問題

在將特徵處理的項目從mr改造成spark過程中又加入了新的編碼方式，本來原始mrjob代碼什麼都沒動，結果線上跑起來就報Exception，這是在項目中使用ratelimit進行處理限速，然後配置了失敗率就涼涼了 INFO 2018-05-23 20:11:17 syncmapreduce 50 Line - 18/05/23 20:11:17 INFO mapreduce.Job: Task I

>>阅读原文<<