ETL項目1:大數據採集,清洗,處理:使用MapReduce進行離線數據分析完整項目

ETL項目1:大數據採集,清洗,處理:使用MapReduce進行離線數據分析完整項目 思路分析:   1.1 log日誌生成 用curl模擬請求,nginx反向代理80端口來生成日誌. #! /bin/bash function get_user_agent(){ a0='User-Agent:MQQBrowser/26 Mozilla/5.0 (Linux; U; Andro

>>阅读原文<<