由「Beeline連接HiveServer2後如何使用指定的隊列（Yarn）運行Hive SQL語句」引發的一系列思考

背景   我們使用的HiveServer2的版本爲0.13.1-cdh5.3.2，目前的任務使用Hive SQL構建，分爲兩種類型：手動任務（臨時分析需求）、調度任務（常規分析需求），兩者均通過我們的Web系統進行提交。以前兩種類型的任務都被提交至Yarn中一個名稱爲「hive」的隊列，爲了避免兩種類型的任務之間相互受影響以及並行任務數過多導致「hive」隊列資源緊張，我們在調度系統中構建了一個任

>>阅读原文<<