MaxCompute計算長尾問題

原文鏈接:http://click.aliyun.com/m/13922/ 長尾問題是分佈式計算裏最常見的問題之一,也是典型的疑難雜症。究其原因,是因爲數據分佈不均,導致各個節點的工作量不同,整個任務就需要等最慢的節點完成才能完成。處理這類問題的思路就是把工作分給多個Worker去執行,而不是一個Worker單獨抗下最重的那份工作。本文希望就平時工作中遇到的一些典型的長尾問題的場景及其解法做一些分
相關文章
相關標籤/搜索