基於 Flink 的實時數倉平臺

咱們組目前負責部門的大數據平臺，既搭建平臺，也是數據開發，仍是業務開發。當前數據鏈路大概以下： 埋點數據，日誌 -》kinesis -》s3 -》presto -》mysql -》報表。還有機器學習等。mysql 這些全是依賴aws提供的服務來構建的。爲了避免影響後續的開發，須要重新梳理流程，優化流程。web 通過分析，咱們目前主要是統計分析性質的，使用presto、flink處理數據，而後彙總到

>>阅读原文<<