大快搜索數據爬蟲技術實例安裝教學

Hadoop做爲搭建大數據處理平臺的重要「基石」,關於它的分析和講解的文章已經有不少了。Hadoop自己是一分佈式的系統,所以在安裝的時候,須要多每個節點進行組建的安裝。而且因爲是開源軟件,其安裝過程相對比較複雜。這也是不少人在搭建hadoop運行環境時老是不能一次性成功的主要緣由。 hadoop每一個組建都要作不少的配置工做,若是手動去完成這個工做,工做量其實仍是很是龐大。正是這一點我以爲不少作國產發行版hadoop軟件開發的都沒有大快的DKhadoop發行版作的好。我記得在以前寫DKHadoop運行環境搭建流程的時候也提到過這個問題,DKH能夠說是把易用性作的很是好了,不管是對於老手仍是新入門者,上手速度要比其餘的一些發行版快的多。 針對hadoop每一個組建都要配置的這種狀況,DKH提供了自動化安裝應用來部署Hadoop。這就大大縮短了Hadoop的安裝時間,同時也簡化了安裝Hadoop的過程。若是你在安裝以後想要拓展節點,其實也不用擔憂。由於DKH中提供了節點管理的功能。 「節點」是集羣中的服務器。DKH集羣中的節點擔任不一樣服務的不一樣角色,協同工做。咱們能夠在DKH管理界面添加節點。 而後在相應的服務中選擇「添加角色」,那麼新添加的節點就有了該服務的功能。 一、進入管理界面(在「主機」菜單中)服務器

這裏你能夠查看節點的基本信息,而且能夠添加和刪除節點。 二、添加節點:點擊「向集羣添加主機」進入「添加節點」界面

輸入對應節點的IP地址便可。 三、爲節點指定服務:在每個服務界面中,選擇「添加角色」以下圖所示分佈式

選擇要添加的節點,點擊「繼續」便可完成添加。

相關文章
相關標籤/搜索