基於可視化配置的日誌結構化轉換實現

導讀：數據總線DBus的總體架構中主要包括六大模塊，分別是：日誌抓取模塊、增量轉換模塊、全量抽取程序、日誌算子處理模塊、心跳監控模塊、Web管理模塊。六大模塊各自的功能相互連接，構成DBus的工作原理：通過讀取RDBMS增量日誌的方式來實時獲取增量數據日誌（支持全量拉取）；基於Logstash，flume，filebeat等抓取工具來實時獲得數據，以可視化的方式對數據進行結構化輸出。本文主要介紹的

>>阅读原文<<