Spark自定義排序規則以及SQL高級應用-Spark商業應用實戰

本套系列博客從真實商業環境抽取案例進行總結和分享，並給出Spark商業應用實戰指導，請持續關注本套博客。版權聲明：本套Spark商業應用實戰歸做者（秦凱新）全部，禁止轉載，歡迎學習。

• 秦凱新的技術社區-大數據商業實戰系列全集目錄
• Spark商業應用實戰-Spark聚合開窗與自定義累加器的高級應用
• Spark商業應用實戰-Spark自定義排序規則以及SQL高級應用
• Spark商業應用實戰-SparkStreaming窗口滑動以及拉鍊實現轉化率的高階應用

1 Spark自定義排序規則

1.1 如何自定義排序規則：

1.2 如何自定義排序規則：

2 Spark SQL 操做Mysql

3 Spark SQL 使用高級技巧

3.1 Case when 和 row number 的高級用法

3.2 內置if的高級用法

3.3 make rdd 和 DF的轉化

4 總結

本節內容主要探討了Spark自定義排序規則以及SQL高級應用，可能部分截圖來自github公開源碼，部分是個人測試案例，若有雷同某位大神私有內容，請直接留言於我，我來從新修正案例。

秦凱新 於深圳