python實現Spark(Hive) SQL中UDF的使用

相對於使用MapReduce或者Spark Application的方式進行數據分析,使用Hive SQL或Spark SQL能爲咱們省去很多的代碼工做量,而Hive SQL或Spark SQL自己內置的各種UDF也爲咱們的數據處理提供了很多便利的工具,當這些內置的UDF不能知足於咱們的須要時,Hive SQL或Spark SQL還爲咱們提供了自定義UDF的相關接口,方便咱們根據本身的需求進行擴展
相關文章
相關標籤/搜索