一次設計演進之旅 | 張逸

需求背景: 我們需要實現對存儲在HDFS中的Parquet文件執行數據查詢,並通過REST API暴露給前端以供調用。由於查詢的結果可能數量較大,要求API接口能夠提供分頁查詢。在第一階段,需要支持的報表有5張,需要查詢的數據表與字段存在一定差異,查詢條件也有一定差異。 每個報表的查詢都牽涉到多張表的Join。每張表都被創建爲數據集,對應爲一個Parquet文件。Parquet文件夾名就是數據集名
相關文章
相關標籤/搜索