開始接觸的大數據的時候,還只是開源的hadoop,從一開始的開源版本的搭建大數據平臺,到如今有CDH、TDH...商業版的大數據平臺。從運維部署到上產上線,逐步趨近於簡單化,小編愈來愈感受到若是再不學習,恐怕程序員這個行業還會大大縮水。前幾年老是據說,大數據火啊火啊,工資高啊高,真正接觸幾年之後,才發現技術發展的太快了。從一開始的MR,一直到spark,到如今商業版的大數據幾乎不須要寫多少代碼,幾條SQL語句,底層不知道作了多少轉化,雖然是之後的趨勢吧,可是感受做爲一個猿,仍是要秉承着終身學習優良傳統,頭髮又算什麼,知識才是糧食。
說了這麼多,爲何小編這麼有感慨呢,之前搭建hadoop平臺都知道,HA過程那是比較複雜的,搞很差不是namenode常常掛,就是常常進入safemode。如今好了docker來了,k8s來了,總體上雲,基於容器,有自動容災,實時建立。小編最近就在研究基於k8s的大數據平臺,也是一個入門的小白,深深的感受到了運維哥們的不容易,公司新來的機器,上午上班就在生產上,一直到晚上纔下來。
其實說了這麼多廢話,小編我也不知道爲何寫這篇博文,但總結的,本身最近懶惰,無所事事,藉助寫這篇文章勉勵一下本身。咱也立一個flag,兩週一篇技術博,毫不拖泥帶水,全上幹活貨。最後,要有本身的態度,寫本身的博客,讓別人看去吧。.....額 這個文采還真是爛,看來要多讀讀書了。感受標題挺吸引人的,應該會有闖進來看,而後貢獻流量以後,暗罵的博友們吧,emm.... 那我只能說很差意思,今天加這一篇博文,打算寫兩篇,算了算了,廢話少說,我仍是構思下一篇博文吧。node