實時日誌監控系統-全覽

大數據處理，大體能夠分爲兩大模塊：html 離線數據處理：好比說電商、運營商出現的大批量的日誌，能夠由flume、sqoop或者其餘路徑，導入到HDFS中，而後通過數據清洗，使用Hive進行分析和處理，對於優化服務器資源等有很好的做用；我的以爲，支付寶的年帳單就是離線數據處理的應用之處了。 實時數據處理：對於有些業務須要，可能次日或者更晚的時候進行分析可有可無，但對於一些高頻的金融交易來講，實時性

>>阅读原文<<