spark中處理dataframe往往遇到」...cannot be cast to ...」這種數據不匹配的問題

    spark處理dataframe數據時，往往遇到"...cannot be cast to ..."這種數據不匹配的問題，主要是因爲我們代碼中spark指定的數據類型和數據源類型不一致。這裏以MySQL爲數據源爲例。 一、讀取數據格式匹配 MySQL表的創建語句指定的數據類型有decimal、varchar、datetime等。 CREATE TABLE `customfieldvalue

>>阅读原文<<