hadoop在windows10 64位系統下的安裝

由於個人電腦是windows 10系統，因此我按照網上的教程，已經查閱網上的資料解決了其中的問題。

 

前言：

須要添加環境變量的配置，這個太簡單，網上都爛大街了，因此我就很少贅述了。

 

1、配置文件

core-site.xml配置：

<configuration>
    <property>
        <name>fs.defaultFS</name>
        <value>hdfs://localhost:9000</value>
    </property>
</configuration>

hdfs-site.xml配置：

    <property>
        <name>dfs.replication</name>
        <value>1</value>
    </property>
    <property>
        <name>dfs.namenode.name.dir</name>
        <value>/I:/hadoop/hadoop-2.9.1/data/namenode</value>
    </property>
    <property>
        <name>dfs.datanode.data.dir</name>
        <value>/I:/hadoop/hadoop-2.9.1/data/datanode</value>
    </property>
    <property>
        <name>dfs.datanode.failed.volumes.tolerated</name>
        <value>0</value>
    </property>

 

mapred-site.xml配置：

    <property>
        <name>mapreduce.framework.name</name>
        <value>yarn</value>
    </property>

 

yarn-site.xml配置：

    <property>
        <name>yarn.nodemanager.aux-services</name>
        <value>mapreduce_shuffle</value>
    </property>
    <property>
        <name>yarn.nodemanager.aux-services.mapreduce.shuffle.class</name>
        <value>org.apache.hadoop.mapred.ShuffleHandler</value>
    </property>
    <property>
        <name>yarn.scheduler.minimum-allocation-mb</name>
        <value>1024</value>
    </property>
    <property>
        <name>yarn.nodemanager.resource.memory-mb</name>
        <value>4096</value>
    </property>
    <property>
        <name>yarn.nodemanager.resource.cpu-vcores</name>
        <value>2</value>
    </property>

 

2、添加文件

須要在bin目錄下添加兩個文件winutils.exe和hadoop.dll兩個文件，這兩個文件能夠去網上找，我這裏有一些，但這裏不支持上傳文件，因此這邊就不上傳了

 

3、啓動項目

在hadoop的bin目錄下執行：hadoop namenode -format

而後在hadoop下的sbin目錄下，用start-all.cmd和stop-all.cmd

 

4、驗證是否啓動成功

使用jps命令，查看hadoop啓動項

 

我是參考了網上多個資料，解決了其中的錯誤，我參考最多的是這篇博客

https://www.cnblogs.com/benfly/p/8301588.html