大數據方案-數倉建設

阿里雲方案 基於阿里雲日誌服務實現，拉取阿里雲日誌到本地數據庫存儲。 優點：實施速度快。 缺點：依賴阿里雲日誌服務，擴展性和靈活性較差。 自研方案 前端、雲端、Nginx等不同格式的日誌發送到Kafka消息隊列，之後做ETL數據清洗，之後可以使用Storm做實時計算或使用Hive/Spark Streaming做離線批處理，處理結果存儲在Hbase中，使用Redis做緩存，ES做索引。維度等業務數

>>阅读原文<<