Spark中的Catalyst

spark streaming依賴於 dataset dataframe，而dataset dataframe依賴於catalyst；catalyst不僅僅是sql的一個解析器引擎，應看做spark新一代的解析器引擎，擴展到spark streaming、saprk sql、graph等等；catalyst非常方便添加優化的技術，隨意擴展，spark 2.x 對dataset進行編程，datase

>>阅读原文<<