cloudera manager的7180 web界面訪問不了的解決辦法（圖文詳解）

時間  2019-11-07
標籤 cloudera manager web 界面 訪問 不了 解決辦法 圖文 詳解 欄目 雲服務 简体版
原文   原文鏈接

 

 

說在前面的話html

　　個人機器是總共4臺，分別爲ubuntucmbigdata一、ubuntucmbigdata二、ubuntucmbigdata3和ubuntucmbigdata4。（注意啦，如下是針對Ubuntu系統的）java

　　在ubuntucmbigdata1上執行了python

sudo apt-get install cloudera-manager-daemons  cloudera-manager-server 


sudo apt-get install cloudera-manager-daemons  cloudera-manager-agent

　　即，ubuntucmbigdata1是既作server，又作agent。mysql

 

 

　　在ubuntucmbigdata二、ubuntucmbigdata3和ubuntucmbigdata4上執行了web

sudo apt-get install cloudera-manager-daemons  cloudera-manager-agent

　　即，ubuntucmbigdata二、三、和4是隻作agent。sql

 

 

　　在ubuntucmbigdata一、ubuntucmbigdata二、ubuntucmbigdata三、ubuntucmbigdata4上shell

新建文件sudo vi /etc/apt/sources.list.d/cloudera-manager.list，複製如下內容到cloudera.list裏ubuntu

# Packages for Cloudera Manager, Version 5, on Ubuntu 14.04 x86_64
deb [arch=amd64] http://archive.cloudera.com/cm5/ubuntu/trusty/amd64/cm trusty-cm5 contrib
deb-src http://archive.cloudera.com/cm5/ubuntu/trusty/amd64/cm trusty-cm5 contrib

 

　　而且在在ubuntucmbigdata一、ubuntucmbigdata二、ubuntucmbigdata三、ubuntucmbigdata4上centos

　　向apt添加cloudera源公鑰，在全部節點執行以下命令：緩存

curl -s http://archive.cloudera.com/cm5/ubuntu/trusty/amd64/cm/archive.key | sudo apt-key add -

而後，再

sudo apt-get update

 

 

 

 

 

 　　問題詳情

 

 

 

 

 

 

 

解決辦法

　　思路1：

Starting cloudera-scm-server: * Couldn't start cloudera-scm-server的解決辦法（圖文詳解）

 

 

 

　　思路2：

 

 　　查看cloudera-scm-agent的運行日誌

複製代碼 
bigdata@ubuntucmbigdata1:/opt/cm-5.6.0/log$ ll
total 20
drwxr-xr-x 5 bigdata bigdata 4096  2月 12  2016 ./
drwxr-xr-x 8 bigdata bigdata 4096  2月 12  2016 ../
drwxr-xr-x 2 bigdata bigdata 4096  6月 25 19:53 cloudera-scm-agent/
drwxr-xr-x 2 bigdata bigdata 4096  6月 25 19:52 cloudera-scm-server/
drwxr-xr-x 2 bigdata bigdata 4096  2月 12  2016 cmf/
bigdata@ubuntucmbigdata1:/opt/cm-5.6.0/log$ cd cloudera-scm-agent/
bigdata@ubuntucmbigdata1:/opt/cm-5.6.0/log/cloudera-scm-agent$ ll
total 40
drwxr-xr-x 2 bigdata bigdata  4096  6月 25 19:53 ./
drwxr-xr-x 5 bigdata bigdata  4096  2月 12  2016 ../
-rw-r--r-- 1 root    root    14757  6月 25 19:57 cloudera-scm-agent.log
-rw-r--r-- 1 root    root      935  6月 25 19:53 cloudera-scm-agent.out
-rw-r--r-- 1 root    root      202  6月 25 19:53 cmf_listener.log
-rw-r--r-- 1 root    root      539  6月 25 19:53 supervisord.log
-rw-r--r-- 1 root    root      449  6月 25 19:53 supervisord.out
bigdata@ubuntucmbigdata1:/opt/cm-5.6.0/log/cloudera-scm-agent$ cat cloudera-scm-agent.out 
[25/Jun/2017 19:53:01 +0000] 9651 MainThread agent        INFO     SCM Agent Version: 5.6.0
[25/Jun/2017 19:53:01 +0000] 9651 MainThread util         INFO     Generating Agent UUID for the first time: '/opt/cm-5.6.0/lib/cloudera-scm-agent/uuid'
[25/Jun/2017 19:53:01 +0000] 9651 MainThread agent        INFO     Adding env vars that start with CMF_AGENT_
[25/Jun/2017 19:53:01 +0000] 9651 MainThread agent        INFO     explicitly passing env var to supervisee: MGMT_HOME: /opt/cm-5.6.0/share/cmf
[25/Jun/2017 19:53:01 +0000] 9651 MainThread agent        INFO     explicitly passing env var to supervisee: ROOT: /opt/cm-5.6.0/lib/cmf
[25/Jun/2017 19:53:01 +0000] 9651 MainThread agent        INFO     Logging to /opt/cm-5.6.0/log/cloudera-scm-agent/cloudera-scm-agent.log
Error: could not find config file /opt/cm-5.6.0/run/cloudera-scm-agent/supervisor/supervisord.conf
For help, use /opt/cm-5.6.0/lib/cmf/agent/src/cmf/agent.py -h
bigdata@ubuntucmbigdata1:/opt/cm-5.6.0/log/cloudera-scm-agent$
複製代碼

 

 

 

 


　　當cloudera-scm-server、cloudera-scm-agent start啓動成功以後，可經過http://主節點IP:7180來訪問CM，用戶名密碼都爲admin。剩下的就是一直點下一步和根據具體的需求來配置集羣了。

 

 

　注意，在此以前。

　

 　　注意，在此以前。

　　ubuntucmbigdata1機器上，則須要執行

bigdata@ubuntucmbigdata1:~$ sudo /usr/share/cmf/schema/scm_prepare_database.sh mysql scm scm scm_password

[sudo] password for bigdata: Sorry, try again. [sudo] password for bigdata: JAVA_HOME=/usr/java/jdk1.7.0_80 Verifying that we can write to /etc/cloudera-scm-server Creating SCM configuration file in /etc/cloudera-scm-server Executing: /usr/java/jdk1.7.0_80/bin/java -cp /usr/share/java/mysql-connector-java.jar:/usr/share/java/oracle-connector-java.jar:/usr/share/cmf/schema/../lib/* com.cloudera.enterprise.dbutil.DbCommandExecutor /etc/cloudera-scm-server/db.properties com.cloudera.cmf.db. [ main] DbCommandExecutor INFO Successfully connected to database. All done, your SCM database is configured correctly!

bigdata@ubuntucmbigdata1:~$ sudo service cloudera-scm-server start
[sudo] password for bigdata: 
Starting cloudera-scm-server: * cloudera-scm-server started

 
 
bigdata@ubuntucmbigdata1:~$
 
 
 
 
 
 
 
bigdata@ubuntucmbigdata1:~$ sudo service cloudera-scm-agent start
[sudo] password for bigdata: 
Starting cloudera-scm-agent: * cloudera-scm-agent started
 
 
bigdata@ubuntucmbigdata1:~$
 
 
 
 
 
 
 
 
 
 
 
 
 

 

 
 

 
 

　　而後，在ubuntucmbigdata二、ubuntucmbigdata三、ubuntucmbigdata4上
 

 
 
 
 
bigdata@ubuntucmbigdata2:~$ sudo service cloudera-scm-agent start
[sudo] password for bigdata: 
Starting cloudera-scm-agent: * cloudera-scm-agent started
 
 
 
 
bigdata@ubuntucmbigdata2:~$
 
 


 
 
bigdata@ubuntucmbigdata3:~$ sudo service cloudera-scm-agent start
[sudo] password for bigdata: 
Starting cloudera-scm-agent: * cloudera-scm-agent started
 
 
 
 
bigdata@ubuntucmbigdata3:~$
 
 
 
 
 


 
 
bigdata@ubuntucmbigdata4:~$ sudo service cloudera-scm-agent start
[sudo] password for bigdata: 
Starting cloudera-scm-agent: * cloudera-scm-agent started
 
 
 
 
bigdata@ubuntucmbigdata4:~$
 

 

 
 

 
 

 
 

　　思路3：
 

　　關閉這臺機器的防火牆
 

 

 
 
bigdata@ubuntucmbigdata1:/opt$ sudo ufw disable
Firewall stopped and disabled on system startup
bigdata@ubuntucmbigdata1:/opt$ sudo ufw status
Status: inactive
bigdata@ubuntucmbigdata1:/opt$ 
 

 

 
 

 
 

 
 

　　思路4：
 

 

 
 
bigdata@ubuntucmbigdata1:/opt/cm-5.6.0/etc$ netstat -nltp
(No info could be read for "-p": geteuid()=1000 but you should be root.)
Active Internet connections (only servers)
Proto Recv-Q Send-Q Local Address           Foreign Address         State       PID/Program name
tcp        0      0 0.0.0.0:22              0.0.0.0:*               LISTEN      -               
tcp        0      0 127.0.0.1:631           0.0.0.0:*               LISTEN      -               
tcp        0      0 127.0.0.1:19001         0.0.0.0:*               LISTEN      -               
tcp        0      0 127.0.0.1:6010          0.0.0.0:*               LISTEN      -               
tcp        0      0 127.0.0.1:6011          0.0.0.0:*               LISTEN      -               
tcp        0      0 127.0.0.1:6012          0.0.0.0:*               LISTEN      -               
tcp        0      0 127.0.1.1:9000          0.0.0.0:*               LISTEN      -               
tcp        0      0 127.0.0.1:3306          0.0.0.0:*               LISTEN      -               
tcp6       0      0 :::22                   :::*                    LISTEN      -               
tcp6       0      0 ::1:631                 :::*                    LISTEN      -               
tcp6       0      0 ::1:6010                :::*                    LISTEN      -               
tcp6       0      0 ::1:6011                :::*                    LISTEN      -               
tcp6       0      0 ::1:6012                :::*                    LISTEN      -               
 

 

 
 

 
 

 
 

　　　　思路5：
 

cloudera-scm-server啓動時出現Caused by: javax.persistence.PersistenceException: org.hibernate.exception.GenericJDBCException: Could not open connection問題解決方法（圖文詳解）
 


    

 

 
 
 
  
 
 
  
 
 
  
 　　　思路6：
 
  
　　　　時間同步
 
  
ntpdate pool.ntp.org

　　通常前面的6種思路是必定能夠解決cloudera manager的7180 web界面訪問不了
 
  
 
 
 
 

 

 
 

　　思路7：（萬不得已）
 

　　最戳的辦法，就是
 

http://www.aboutyun.com/thread-8992-1-1.html （包含centos、ubuntu、debian和rehat各版本都有）
 

　　卸載它，從新來過。
 

正用得上，剛安裝好的CDH5的CM server啓不來，只好所有四節點卸載來過。
 


　　　　
 

　　如在ubuntu系統下
 

 
 
bigdata@ubuntucmbigdata1:/opt/softwares/cm-5.6.0$ sudo rm -Rf /usr/share/cmf /var/lib/cloudera* /var/cache/yum/cloudera*
bigdata@ubuntucmbigdata1:/opt/softwares/cm-5.6.0$ sudo apt-get purge 'cloudera-manager-*'
bigdata@ubuntucmbigdata1:/opt/softwares/cm-5.6.0$ sudo apt-get purge 'cloudera-manager-*' avro-tools crunch flume-ng hadoop-hdfs-fuse hadoop-hdfs-nfs3 hadoop-httpfs hbase-solr hive-hbase hive-webhcat hue-beeswax hue-hbase hue-impala hue-pig hue-plugins hue-rdbms hue-search hue-spark hue-sqoop hue-zookeeper impala impala-shell kite llama mahout oozie pig pig-udf-datafu search sentry solr-mapreduce spark-python sqoop sqoop2 whirr


bigdata@ubuntucmbigdata1:/opt/softwares/cm-5.6.0$ sudo apt-get clean
bigdata@ubuntucmbigdata1:/opt/softwares/cm-5.6.0$ sudo rm -Rf /usr/share/cmf /var/lib/cloudera* /var/cache/yum/cloudera* /var/log/cloudera* /var/run/cloudera*
bigdata@ubuntucmbigdata1:/opt/softwares/cm-5.6.0$ sudo rm -Rf /var/cache/apt/archives/cloudera*


 

 

 
 

 
 

　　再進一步卸載完全乾淨
 

　　見
 

Cloudera Manager卸載筆記
 

 
 

 
 

 
 
1、經過管理平臺分別中止組件服務和Cloudera Management Service

2、經過管理平臺註銷並移除Parcles （在控制檯註銷並移除，不管是安裝的Parcles仍是未安裝的Parcles）

3、中止後臺服務

　　sudo service cloudera-scm-agent stop

      sudo service cloudera-scm-server stop    

　　sudo service cloudera-scm-server-db stop

      sudo service mysqld stop

4、卸載Cloudera Manager Server

    執行命令：sudo /usr/share/cmf/uninstall-cloudera-manager.sh

5、清理配置和緩存信息

     在全部agent上執行：sudo umount -v /var/run/cloudera-scm-agent/process

     在全部主機上執行：sudo rm -rf /usr/share/cmf;

                              sudo rm -rf /var/lib/cloudera*;

　　　　　　　　　　  sudo rm -rf  /var/cache/yum/x86_64/6/cloudera*;

　　　　　　　　　　  sudo rm -rf  /var/log/cloudera*;

　　　　　　　　　　  sudo rm -rf  /var/run/cloudera*  /etc/cloudera* 

6、卸載rpm安裝包

　 1）查看 rpm -qa | grep cloudera

    2）卸載 for f in `rpm -qa | grep cloudera `  ; do sudo rpm -e ${f} ; done

7、清理安裝文件

　　sudo rm -rf /var/lib/hadoop-* /var/lib/impala /var/lib/solr /var/lib/zookeeper /var/lib/hue /var/lib/oozie  /var/lib/pgsql  /var/lib/sqoop2  /data/dfs/  /data/impala/ /data/yarn/  /dfs/ /impala/ /yarn/  /var/run/hadoop-*/ /var/run/hdfs-*/ /usr/bin/hadoop* /usr/bin/zookeeper* /usr/bin/hbase* /usr/bin/hive* /usr/bin/hdfs /usr/bin/mapred /usr/bin/yarn /usr/bin/sqoop* /usr/bin/oozie /etc/hadoop* /etc/zookeeper* /etc/hive* /etc/hue /etc/impala /etc/sqoop* /etc/oozie /etc/hbase* /etc/hcatalog 

     略過其它軟件，只刪除hadoop相關

　　sudo rm -rf ` find /var/lib/alternatives/* ! -name "mta" ! -name "print" ! -name "zlibrary-ui"  -mtime -3` 

八、若是有hadoop先關進程還在，則殺死

     for u in hdfs mapred cloudera-scm hbase hue zookeeper oozie hive impala flume; do sudo kill $(ps -u $u -o pid=); done

九、清理parcel

    sudo rm -rf /opt/cloudera/parcel-cache /opt/cloudera/parcels

十、清理組件用戶

     sudo userdel hue;sudo userdel impala;sudo userdel spark;sudo userdel sentry;sudo userdel sqoop2;sudo userdel hbase;sudo userdel oozie;sudo userdel yarn;sudo userdel mapred;sudo userdel zookeeper;sudo userdel httpfs;sudo userdel solr;sudo userdel kms;sudo userdel hive;sudo userdel flume;sudo userdel hdfs;sudo userdel sqoop;sudo userdel llama;sudo userdel cloudera-scm;sudo userdel postgres;

                              
 

 

 
 

 
 

 
 

 
 

 
 

　　而後，就能夠繼續了。（這是針對bin方式來安裝）
 

 

 
 

 
 

 
 

 　　更多安裝方法，請見
 

Ubuntu14.04下完美安裝cloudermanage多種方式（圖文詳解）（博主推薦）
 

 
 

 
 

 
 

 
 

　　也許，你在卸載中，會遇到以下問題
 

Clouder Manager安裝時出現please remove the following file: /etc/cloudera-scm-server/db.properties問題解決（圖文詳解）
 

 
 

 
 

 　　最後成功！
 

 
 

 

 
 

 
 

 
 

 
 

 
 

 
 

 
 

 
 歡迎你們，加入個人微信公衆號：大數據躺過的坑        人工智能躺過的坑 

 

 
   

 


    

 


    

 

 
 
同時，你們能夠關注個人我的博客：
 
 
   http://www.cnblogs.com/zlslch/   和     http://www.cnblogs.com/lchzls/      http://www.cnblogs.com/sunnyDream/   
 
 
   詳情請見：http://www.cnblogs.com/zlslch/p/7473861.html
 
 
 
 
 
　　人生苦短，我願分享。本公衆號將秉持活到老學到老學習無休止的交流分享開源精神，匯聚於互聯網和我的學習工做的精華乾貨知識，一切來於互聯網，反饋回互聯網。
　　目前研究領域：大數據、機器學習、深度學習、人工智能、數據挖掘、數據分析。 語言涉及：Java、Scala、Python、Shell、Linux等 。同時還涉及日常所使用的手機、電腦和互聯網上的使用技巧、問題和實用軟件。 只要你一直關注和呆在羣裏，天天必須有收穫
 
 
 
 
 
      對應本平臺的討論和答疑QQ羣：大數據和人工智能躺過的坑（總羣）（161156071） 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 

 

 
 

 


        

            

        	





    

		

            
相關文章

            

                

                

                    

                

            


            
相關標籤/搜索

            
        


    

        

            

        

        

        
        

        

        

    




	

    





    

    	

    

        每日一句
    

    
    
    	每一个你不满意的现在，都有一个你没有努力的曾经。
    







    

    


    



    

        本站公眾號
    

    

           歡迎關注本站公眾號,獲取更多信息

        
    




    

    




	


	







    

        聯繫我們
        最近搜索
        最新文章
        
        沪ICP备13005482号-10

            MyBatis教程
            SQL 教程
            MySQL教程
            Java 教程
            Thymeleaf 教程
            Hibernate教程
            Spring教程 
            Redis教程