spark中動態廣播變量的使用

今天來講一下spark,動態廣播變量的用法,若是對廣播變量用法不清楚的能夠查看這個博客,在實際項目中,有時候咱們的廣播變量是動態的,好比須要一分鐘更新一次,這個也是能夠實現的,咱們知道廣播變量是在driver端初始化,在excetors端獲取這個變量,可是不能修改,因此,咱們能夠在driver端進行更新這個變量,具體的代碼實現以下所示:javascript package test import
相關文章
相關標籤/搜索