前沿技術Spark,Flink,Beam

MapReduce的缺點:python 1.開發數據庫   wordcount程序複雜安全   只支持map和reduce方法網絡   執行效率低下框架   以做業連方式串起來執行分佈式   打包oop 2.運行速度:性能    map輸出寫到磁盤,reduce寫到hdfs,磁盤I/O,網絡I/O,序列化等壓力大學習    map任務和reduce任務以進程方式運行大數據   必定要求排序(其實有
相關文章
相關標籤/搜索