sparkR調用R的執行分佈式計算

環境spark2.4.5,R3.6, install.package("SparkR"),默認sparkR提供的函數支持對應的版本爲spark2.4.5不支持2.4.0 如:將data.table,data.frame dt.score數據集轉化成sparkR中的dataframe時可以執行sparkR中提供的方法 sparkR默認會覆蓋掉R中的方法 如需要調用R中的方法需要指定調用 datafr

>>阅读原文<<