日誌數據從kafka到hive是如何實現的

http://www.aboutyun.com/forum.php?mod=viewthread&tid=20701 php 背景java 公司的系統是一個對外提供服務的接口，每一次調用日誌都須要保存到hive中，以便後期作數據分析。天天的調用量在億級，日誌數據量100G以上，在量級尚未這麼大的時候，採起的辦法比較原始：直接經過log4j打印到日誌文件，而後經過抽數工具同步到hive中，天天凌晨同

>>阅读原文<<