關於用Apache Beam跑WordCount

 

應老師要求,我要開始下載安裝Apache Beam了html

Apache Beam下載官網https://beam.apache.org/linux

 

 

 

昨天搗鼓到這裏(下載解壓後····)之後就整個大腦漿糊同樣了,雖然粗略掃過了一些經驗貼,仍然迷糊。apache

 

 

今天硬着頭皮不管如何仍是得往下努理解,可能並無我想象中難呢,畢竟新接觸一個歷來不知道的東西。maven

 1.查看本身的jdk看版本,百度一下https://zhidao.baidu.com/question/552591786277937532.html測試

 本人的jdk達到了1.8spa

 

 2.安裝Maven官網http://maven.apache.org/download.cgi.net

怎麼安我參照的這個經驗https://blog.csdn.net/qq_42868789/article/details/82977181xml

 

 下載完成後解壓到本身指定文件夾htm

而後開始配置環境變量,鼠標右擊個人計算機blog

 

 新建系統變量名,將安裝路徑添加到變量值,肯定

 

 

編輯Path,在變量值後面添加以下紅框內容,保存退出

 

命令窗口輸入下圖紅框全中內容測試是否安裝成功,獲得下面內容就已經成功安裝了

個人有個地方是叫runtime,網圖不知道爲何叫Java home,應該同樣的沒差吧

 

 如下網圖(來自經驗貼http://www.javashuo.com/article/p-bfkvizew-nh.html

 3.嘗試用Eclipse建立一個maven項目看看,一樣跟網上教程吧

繼續繼續,愈挫愈勇

利用Eclipse新建了一個maven項目

 

 

 難道是更新一下maven工程就好了嗎?太慢了,好想知道究竟是不是這裏的問題。

 

 放棄了。

才意識到我好像沒有在Eclipse裏面配置好Maven,以前只是下載配置好Maven了而已,並無將二者關聯起來,怎麼關聯看這裏https://blog.csdn.net/qq_36582604/article/details/80637603

序號2那裏遇到了問題,解決了http://www.javashuo.com/article/p-fgnoehow-nh.html

 缺乏的jar回來啦,但又有問題,解決辦法這裏,直接下個吧https://blog.csdn.net/ITBigGod/article/details/82862008

 

 解決這個後,maven項目中Java Resource前面莫名紅叉緣由https://blog.csdn.net/qq277798882/article/details/53790135

應該就是這裏的問題,只是怎麼這麼慢啊

 還覺得這個步驟沒用,原來從新刪除項目從新導入,紅叉就會消失(先按這個步驟檢查一遍再刪http://www.javashuo.com/article/p-qzgzduzr-kz.html)唉找問題答案要費點精力。

 。。。。。。。

嘗試在終端下運行WordCount

 

 

 

 

 失敗!再來一次

 

 

 

 

 

 

 

 

 

 建立成功了,在上面指定的路徑生成了一個文件夾C:\Users\Administrator\word-count-beam,裏面包含有以下圖的pom.xml文件

 

 根據這個經驗貼,我查看一下文件夾樹結構吧https://www.pianshen.com/article/837631349/

樹很長隨便借一張吧

如今運行WordCount,就用DirectRunner好了

出問題了

 

切換了一下當前路徑看行不行吧,有變化了

 

 又有錯誤了

這個柑橘和個人問題相似,有人回答了

 

 

 

 而後個人終端開始跑了

過了會兒,仍在下載中,這回但願成功

怎麼還沒好,再放一張截圖

 

 看到彩色的,還覺得又出岔子了,沒有沒有

 

這裏停下來了,覺得結束了。。不過又開始往下了

又有錯了,唉

 

 


 

 這是linux(CentOS6.5)上跑的過程

 

 

 

 

 

 

 

 

 

 

 

 

 

 

 

 

 

 

 

 

 

 

 

 

 

 

 

 

 


Windows 7上利用IntelliJ Ideal跑

建立了一個Maven項目,本身建的老是有問題

 

 

 直接導入別人的項目就能行,究竟是哪裏沒弄好,那個pom.xml裏面的依賴究竟是怎麼寫的呀?

 

 

 原來這裏版本不一樣,把我原來的0.4.0改爲0.5.0,而後項目右鍵maven  reimport一下就ok了

 添加依賴解決警告了https://blog.csdn.net/qq_33996921/article/details/106053625

 

相關文章
相關標籤/搜索