spark大數據分析實戰案列1學習 （lamda架構日誌分析流水線）

日誌實例格式 算法 當數據量較小(10MB,100MB,10GB)能夠經過Shell Python單機解決sql Linux Shell命令 :  cat access.log.10 |awk '{a[$1]++} END {for(b in a) print b"\t"a[b]} 架構 '| sort -k2 -r |head -n 10spa    日誌分析指標：3d   

>>阅读原文<<