外部數據源 之 Plugin 可插拔的方式整合到Spark中/Spark源碼中

一:概念理解 Plugin 可插拔的方式整合到Spark中/Spark源碼中 爲了在用外部數據源讀取文件的時候,原本讀取是valui 使他變成一個帶schema的df 有具體的信息 外部數據源就是把不少東西都封裝好了 BaseRelation:做用是定義了schema信息web TableScan 查表 讀表 構建RDD(Row) TableScan select a,b,c,d,e from s
相關文章
相關標籤/搜索