超人學院二期學員分享hadoop工做經驗

定於2月17日——2月23日的某一天，邀請我們學員分享一下hadoop工做經驗。對於沒工做過的同窗或者沒從事過hadoop工做的同窗，抓住機會啊，你能夠提早準備本身關心的各類問題！

具體時間請關注QQ羣（3羣261520795），超人學院其餘羣的朋友沒必要重複加到3羣，每一個羣都會發公告的。

你的將來或許由於此次聆聽而改變！

分享內容大綱原文以下：

 

1.分享內容

漫談**移動互聯網公司hadoop環境下**業務的報表研發流程、技術及其餘相關內容

2.面向觀衆

初入職場和對數據處理有興趣的同窗。提示：互聯網公司數據處理工做經驗豐富同窗請繞道，不耽誤您時間

3.本人狀況

超人學院二期學員

計算機專業研究生，即將畢業，在某大型互聯網公司實習70天

所作項目：hadoop環境下某業務報表研發（日誌拉取-預處理入hive-預聚合入mysql-前端報表展現）

4.具體分享點

1）公司報表系統現狀和報表研發組人員安排及工做分工現狀

公司目前的新舊報表系統現狀：

公司集羣說明：

本組項目介紹、人員分工狀況和工做內容說明：

2）以**業務報表研發流程爲例漫談其流程、所涉及技術、團隊項目溝通方式和軟件

a、需求產生過程及遇到的問題和注意事項：

b、報表研發過程（數據處理流程）：

<1>需求整理及確認、遇到的問題和需注意事項

<2>日誌拉取過程、所遇問題和需注意事項

<3>日誌預處理（清洗，入hive）過程、所遇問題以及需注意事項

<4>預聚合過程（指標造成過程）、所遇問題和需注意事項

c、其餘

<1>整個流程的監控機制、任務調度機制、數據正確性保證機制

<2>項目溝通方式和項目管理軟件使用狀況：

<3>所需掌握技能的我的總結

3）初入移動互聯網職場工做感悟

總之

<1>職業是很嚴謹的，思想上先認真再認真對待，不論大小事；

<2>高效執行需求不可有拖延症；

<3>大小事都需過腦子，思路清晰透徹，切不可想固然，草率了事，踏踏實實將每一件事情辦紮實；

<4>項目溝通中需精煉準確描述問題，尤爲注意不可省略問題的先後場景；面對提問，需直答問題，不可給出替代答案；

<5>造成規範的作事流程和作事方法可節約較多時間並有利於作對事情和我的能力提高；

最後

願你們都能正確評判本身所處位置並堅決好目標，而後竭盡全力的前行。