1.設(shè)置ip

創(chuàng)新互聯(lián)是一家集網(wǎng)站建設(shè),舞陽企業(yè)網(wǎng)站建設(shè),舞陽品牌網(wǎng)站建設(shè),網(wǎng)站定制,舞陽網(wǎng)站建設(shè)報(bào)價(jià),網(wǎng)絡(luò)營銷,網(wǎng)絡(luò)優(yōu)化,舞陽網(wǎng)站推廣為一體的創(chuàng)新建站企業(yè)，幫助傳統(tǒng)企業(yè)提升企業(yè)形象加強(qiáng)企業(yè)競爭力?？沙浞譂M足這一群體相比中小企業(yè)更為豐富、高端、多元的互聯(lián)網(wǎng)需求。同時(shí)我們時(shí)刻保持專業(yè)、時(shí)尚、前沿，時(shí)刻以成就客戶成長自我，堅(jiān)持不斷學(xué)習(xí)、思考、沉淀、凈化自己，讓我們?yōu)楦嗟钠髽I(yè)打造出實(shí)用型網(wǎng)站。

 service network restart 重啟網(wǎng)卡生效

2.關(guān)閉防火墻（在hadoop中要使用到許多端口，為了避免麻煩之間對防火墻進(jìn)行關(guān)閉）

 service iptables stop 關(guān)閉防火墻命令

 service iptables status查看防火墻狀態(tài)命令

  

 關(guān)閉防火墻的自動運(yùn)行：

     查看自動運(yùn)行的設(shè)置：chkconfig --list可以顯示所有的設(shè)置（防火墻iptables）

        

     過濾查看防火墻自動啟動設(shè)置

    chkconfig --list |（豎線） grep（過濾） iptables（過濾對象）

            管道：把左側(cè)的輸出作為右側(cè)的輸入

   將防火墻的自動啟動設(shè)置全設(shè)置為off

        chkconfig iptables off

   

  從此后防火墻不會隨著系統(tǒng)的重新啟動自動開啟了

3.設(shè)置主機(jī)名

 查看主機(jī)名命令：hostname

 修改主機(jī)名：hostname crxy（超人學(xué)院），這種方式只對當(dāng)前會話生效，重啟系統(tǒng)后還是沒有修改

 修改磁盤文件徹底改變主機(jī)名：vi /etc/sysconfig/network

 重啟機(jī)器后生效：reboot -h now(這兒可以不用重啟系統(tǒng))

  

4.ssh的配置操作：ssh是類似與telnet的在機(jī)器之間進(jìn)行遠(yuǎn)程訪問的工具，telnet是明文，ssh是加密

 ssh使用的是非對稱加密，有公鑰密鑰的問題，如圖所示中訪問ip需要進(jìn)行密碼登錄

  

 為了實(shí)現(xiàn)免密碼登錄，需要進(jìn)行如下配置：

  ssh-keygen -t rsa(先產(chǎn)生密鑰)，多次回車后找到y(tǒng)our public key has been saved in

/root/.ssh/id_rsa.pub（密鑰生成的公鑰保存在一個目錄中）

  cd /root/.ssh或者cd /root/.ssh、

  cp id_rsa.pub authorized_keys(圖中少了s)

  或者直接 cp ~/.ssh/id_rsa.pub ~/.ssh/authorized_keys

也可以ssh localhost（當(dāng)?shù)谝淮卧L問的時(shí)候需要輸入密碼，之后就不需要輸入密碼了）

對于ssh 主機(jī)名的問題解決（之所以出錯是因?yàn)橹鳈C(jī)名依賴于域名，之所以能夠在瀏覽器中輸入主機(jī)名訪問是因?yàn)榻壎擞蛎木壒剩壎╥p地址的方法：

5.ip與hostname綁定

    vi /etc/hosts(在下一行添加192.168.42.100 crxy)(分別對于linux的ip和主機(jī)名稱)

   

6.使用WinSCP工具軟件在windows和linux之間的文件傳遞

  

  

傳送文件：左側(cè)找到文件，右側(cè)打開文件，路徑中修改/root為/usr/local,(其中/usr/local是自定義的安裝目錄，也可以自己定義)，下面會話書簽點(diǎn)擊添加，之后再點(diǎn)擊共享書簽，點(diǎn)擊添加，最后確定

這樣之后local目錄下會有文件，我們可以全部選中，右鍵點(diǎn)擊刪除

然后把hadoop文件和jdk文件拖進(jìn)去即可

拖動完成后可以使用命令查看local下的文件

7.安裝jdk

 在安裝jdk之前需要對權(quán)限進(jìn)行修改，這樣之后就能夠使用tab鍵自動補(bǔ)全

 通過./jdk...進(jìn)行解壓

  

  

 

  

8.安裝hadoop

  解壓.tar.gz格式的命令:  tar -xzvf hadoop-1.1.2.tar.gz

     x表示解壓縮，z表示壓縮格式，v表示顯示信息，f表示文件

  

  

    配置環(huán)境變量

  

9.安裝偽分布

 修改hadoop/conf下的幾個配置文件

   1.hadoop-env.sh

   2.core-site.xml

     3.hdfs-site.xml

     4.mapred-site.xml

 a.修改hadoop-env.sh

  

 b.core-site.xml

   

 c.hdfs-site.xml

  

d.mapred-site.xml

  

  

這樣，hadoop的配置就算完成了，剩下的工作就是啟動hadoop

10.hadoop的啟動

  a.在啟動hadoop之前須要對hadoop文件系統(tǒng)進(jìn)行格式化（hadoop包括存儲和計(jì)算兩部分，類似其他文件系統(tǒng)一樣，當(dāng)一個存儲空間需要使用時(shí)須要對存儲空間進(jìn)行格式化）

  格式化的命令：hadoop namenode -format

  

 b.hadoop文件系統(tǒng)啟動命令：

  start-all.sh

  

  驗(yàn)證：在window的命令窗口下（windows已經(jīng)配置好了jdk的環(huán)境變量）運(yùn)行命令jps（查看java進(jìn)程的命令）就能夠查看java的運(yùn)行進(jìn)程，如果在linux中運(yùn)行jps可以查看到j(luò)ava進(jìn)程的話表示hadoop文件系統(tǒng)啟動成功（因?yàn)閔adoop是基于java開發(fā)的）

  

  

啟動時(shí)沒有NameNode的可能原因:

(1)沒有格式化

(2)環(huán)境變量設(shè)置錯誤

(3)ip與hostname綁定失敗

最后，我們可以通過瀏覽器的方式觀察hadoop啟動的狀態(tài)，即我們可以通過windows訪問：

 在windows瀏覽器中輸入http://192.168.42.100:50070(http://192.168.42.100:50070(li linux網(wǎng)址+端口號)或者直接輸入192.168.42.100:50070即可（這是因?yàn)樵趙indows中也可以ping通linux網(wǎng)絡(luò)的原因），在linux的瀏覽器中也可以看到同樣的效果（在linux瀏覽器中ip地址可以使用主機(jī)名代替，因?yàn)樗鼈冎g相互綁定了）

  

在瀏覽器查看中，50070查看的是NameNode的信息，50030查看的是MapReduce的信息

11.命令匯總：

 

另外有需要云服務(wù)器可以了解下創(chuàng)新互聯(lián)scvps.cn，海內(nèi)外云服務(wù)器15元起步，三天無理由+7*72小時(shí)售后在線，公司持有idc許可證，提供“云服務(wù)器、裸金屬服務(wù)器、高防服務(wù)器、香港服務(wù)器、美國服務(wù)器、虛擬主機(jī)、免備案服務(wù)器”等云主機(jī)租用服務(wù)以及企業(yè)上云的綜合解決方案，具有“安全穩(wěn)定、簡單易用、服務(wù)可用性高、性價(jià)比高”等特點(diǎn)與優(yōu)勢，專為企業(yè)上云打造定制，能夠滿足用戶豐富、多元化的應(yīng)用場景需求。

當(dāng)前題目：hadoop環(huán)境搭建及修改配置文件（第四講）-創(chuàng)新互聯(lián)
分享路徑：http://www.rwnh.cn/article36/cejesg.html

成都網(wǎng)站建設(shè)公司_創(chuàng)新互聯(lián)，為您提供定制網(wǎng)站、手機(jī)網(wǎng)站建設(shè)、網(wǎng)站改版、企業(yè)建站、企業(yè)網(wǎng)站制作、虛擬主機(jī)

廣告

聲明：本網(wǎng)站發(fā)布的內(nèi)容（圖片、視頻和文字）以用戶投稿、用戶轉(zhuǎn)載內(nèi)容為主，如果涉及侵權(quán)請盡快告知，我們將會在第一時(shí)間刪除。文章觀點(diǎn)不代表本網(wǎng)站立場，如需處理請聯(lián)系客服。電話：028-86922220；郵箱：631063699@qq.com。內(nèi)容未經(jīng)允許不得轉(zhuǎn)載，或轉(zhuǎn)載時(shí)需注明來源： 創(chuàng)新互聯(lián)