streamsets excel 數據處理

streamsets 有一個directory的origin 能夠方便的進行文件的處理,支持的格式也比較多,使用簡單html

pipeline flow

配置

  • excel 數據copy

    由於使用的是容器,會有數據copy 容器的一步git

容器id 結合實際查詢:
docker cp data/ containerid:/data/excel
  • 配置directory

  • local fs 配置

運行

  • excel 數據格式
  • 運行效果

參考資料

https://github.com/rongfengliang/streamsets-demos
https://streamsets.com/documentation/datacollector/latest/help/datacollector/UserGuide/Origins/Directory.html#concept_qcq_54n_jqgithub

相關文章
相關標籤/搜索