查看spark任務日誌

 spark運行的任務每每經過web來查看，可是，當運行的是sparkStreaming任務時，日誌每每會很大，web查看並不方便，所以須要定位到服務器上去看。下面將分別介紹兩種查看driver端和executor端日誌的方式。web 1、web端日誌的查看： 下面是四個yarn調度spark任務的web總界面：服務器 點擊第一個任務：application_1509845442132_3866

>>阅读原文<<