Etl之HiveSql調優(union all)

相信在Etl的過程當中不可避免的實用union all來拼裝數據,那麼這就涉及到是否並行處理的問題了。html

在hive中是否適用並行map,能夠經過參數來設定:spa

set hive.exec.parallel=true; 

那麼仍是實用上一篇博客的數據,連接:http://www.cnblogs.com/liqiu/p/4873238.htmlcode

若是我們須要一些數據:htm

select * from (select sight_id from order_sight where create_time="2015-10-10" and sight_id = 9718 union all select id as sight_id from sight where id = 9718) a;

就是模擬分別從兩個表裏面獲取數據,若是不開啓並行,實用的時間是開啓時間的兩倍,因此這個地方多加註意!blog

相關文章
相關標籤/搜索