Hadoop的單機環(huán)境搭建方法

這篇文章主要介紹“ Hadoop的單機環(huán)境搭建方法”，在日常操作中，相信很多人在 Hadoop的單機環(huán)境搭建方法問題上存在疑惑，小編查閱了各式資料，整理出簡單好用的操作方法，希望對大家解答” Hadoop的單機環(huán)境搭建方法”的疑惑有所幫助！接下來，請跟著小編一起來學習吧！

成都創(chuàng)新互聯(lián)公司專注于萊州網(wǎng)站建設服務及定制，我們擁有豐富的企業(yè)做網(wǎng)站經(jīng)驗。 熱誠為您提供萊州營銷型網(wǎng)站建設，萊州網(wǎng)站制作、萊州網(wǎng)頁設計、萊州網(wǎng)站官網(wǎng)定制、重慶小程序開發(fā)公司服務，打造萊州網(wǎng)絡公司原創(chuàng)品牌,更為您提供萊州網(wǎng)站排名全網(wǎng)營銷落地服務。

＃Hadoop環(huán)境#

##操作系統(tǒng)## 我用的是Mac，其實Mac系統(tǒng)也是Linux的一個分支，用RedHat,CenterOS,Ubuntu等都是一樣的。不建議在windows下安裝Hadoop

##安裝前提##

  • Java

  • SSH

##獲取Hadoop安裝包##

  • 這個自己百度吧，我用的是hadoop-2.3.0

##將下載的hadoop安裝包用FTP工具上傳到Linux服務器的/usr/local目錄下

##解壓hadoop壓縮包

cd /usr/local/  
tar -zxvf hadoop-2.3.0.tar.gz

##設置環(huán)境變量

  • vi /etc/profile

  • 添加環(huán)境變量: export HADOOP_HOME=/usr/local/hadoop-2.3.0

  • 將hadoop添加到PATH變量中: PATH = $HADOOP_HOME/bin:$PATH

  • 使環(huán)境變量生效 : source /etc/profile

##修改Hadoop配置文件##

###修改hdfs-site.xml###

<configuration>
        <property>
                <name>dfs.replication</name>
                <value>1</value>
        </property>
        <property>
                <name>dfs.permissions</name>
                <value>false</value>
        </property>
</configuration>

###修改core-site.xml

<configuration>
    <property>
            <name>fs.default.name</name>
            <value>hdfs://localhost:9000</value>
    </property>
    <property>
            <name>hadoop.tmp.dir</name>
            <value>/usr/local/hadoop-2.3.0</value>
    </property>
</configuration>

###修改 mapred-site.xml

<configuration>
    <property>
            <name>mapred.job.tracker</name>
            <value>localhost:9001</value>
    </property>
</configuration>

###修改hadoop-env.sh

增加一行:(依照個人的Java安裝路徑填寫)

export JAVA_HOME=/Library/Java/JavaVirtualMachines/jdk1.8.0_25.jdk/Contents/Home

##至此，hadoop的安裝和配置已經(jīng)ok##

  • 先格式化一下HDFS系統(tǒng)：

    hadoop namenode -format

  • 然后我們可以啟動hadoop了

    cd /usr/local/hadoop-2.3.0/sbin
    ./start-all.sh

  • 如果啟動時 沒有明顯的報錯，那么說明安裝成功了。

##驗證 hadoop fs -mkdir /d1 ＃創(chuàng)建的目錄 hadoop fs -ls / ＃查看根目錄

到此，關(guān)于“ Hadoop的單機環(huán)境搭建方法”的學習就結(jié)束了，希望能夠解決大家的疑惑。理論與實踐的搭配能更好的幫助大家學習，快去試試吧！若想繼續(xù)學習更多相關(guān)知識，請繼續(xù)關(guān)注創(chuàng)新互聯(lián)網(wǎng)站，小編會繼續(xù)努力為大家?guī)砀鄬嵱玫奈恼拢?/p>

文章題目：Hadoop的單機環(huán)境搭建方法
轉(zhuǎn)載注明：http://bm7419.com/article46/jddjhg.html

成都網(wǎng)站建設公司_創(chuàng)新互聯(lián)，為您提供網(wǎng)站維護、動態(tài)網(wǎng)站、面包屑導航、品牌網(wǎng)站制作、企業(yè)網(wǎng)站制作、移動網(wǎng)站建設

廣告

聲明：本網(wǎng)站發(fā)布的內(nèi)容（圖片、視頻和文字）以用戶投稿、用戶轉(zhuǎn)載內(nèi)容為主，如果涉及侵權(quán)請盡快告知，我們將會在第一時間刪除。文章觀點不代表本網(wǎng)站立場，如需處理請聯(lián)系客服。電話：028-86922220；郵箱：631063699@qq.com。內(nèi)容未經(jīng)允許不得轉(zhuǎn)載，或轉(zhuǎn)載時需注明來源： 創(chuàng)新互聯(lián)

h5響應式網(wǎng)站建設