日韩无码专区无码一级三级片|91人人爱网站中日韩无码电影|厨房大战丰满熟妇|AV高清无码在线免费观看|另类AV日韩少妇熟女|中文日本大黄一级黄色片|色情在线视频免费|亚洲成人特黄a片|黄片wwwav色图欧美|欧亚乱色一区二区三区

RELATEED CONSULTING
相關咨詢
選擇下列產(chǎn)品馬上在線溝通
服務時間:8:30-17:00
你可能遇到了下面的問題
關閉右側工具欄

新聞中心

這里有您想知道的互聯(lián)網(wǎng)營銷解決方案
Hadoop單機模式安裝方法深入剖析

本節(jié)和大家一起學習一下Hadoop單機模式安裝方法,Hadoop單機模式安裝主要有九個步驟,相信通過本節(jié)的介紹大家對Hadoop的安裝方法有進一步的了解,讓我們一起來學習Hadoop單機模式吧。

創(chuàng)新互聯(lián)建站專注于企業(yè)成都全網(wǎng)營銷、網(wǎng)站重做改版、倉山網(wǎng)站定制設計、自適應品牌網(wǎng)站建設、H5頁面制作、商城開發(fā)、集團公司官網(wǎng)建設、成都外貿(mào)網(wǎng)站建設、高端網(wǎng)站制作、響應式網(wǎng)頁設計等建站業(yè)務,價格優(yōu)惠性價比高,為倉山等各大城市提供網(wǎng)站開發(fā)制作服務。

Hadoop單機模式安裝

實驗平臺:Ubuntu9.04,Hadoop0.20,JDK1.6

step1.ssh的安裝設置

由于Hadoop用ssh通信,因此先進行免密碼登錄設定,
$apt-getinstallssh
$ssh-keygen-trsa-P''-f~/.ssh/id_rsa
$cat~/.ssh/id_rsa.pub>>~/.ssh/authorized_keys
$sshlocalhost
完成后請登入確認不用輸入密碼,(第一次登入需按enter鍵,第二次就可以直接登入到系統(tǒng)。
~$sshlocalhost
~$exit
~$sshlocalhost
~$exit

step2.安裝java

由于SunJavaRuntime是執(zhí)行Hadoop必備的工具,因此我們需要安裝JRE或JDK。這里我們直接安裝JDK,因為后面寫程序仍舊需要用到JDK所提供的編譯程序。目前Ubuntu9.04提供的JDK套件最新版本為SunJava(TM)DevelopmentKit(JDK)6,套件名稱為sun-java6-jdk。并建議刪除原本的「gcj」。
~$sudoapt-getpurgejava-gcj-compat
~$sudoapt-getinstallsun-java6-binsun-java6-jdksun-java6-jre

step3.下載安裝Hadoop

?Hadoop單機模式時請至下載Hadoop0.20,并解開壓縮文件到/opt路徑。
?$tarzxvfhadoop-0.20.0.tar.gz
?$sudomvhadoop-0.20.0/opt/
?$sudochown-Rhadoop:hadoop/opt/hadoop-0.20.0
?$sudoln-sf/opt/hadoop-0.20.0/opt/hadoop

step4.設定hadoop-env.sh

?進入hadoop目錄,做進一步的設定。我們需要修改兩個檔案,第一個是hadoop-env.sh,需要設定JAVA_HOME,HADOOP_HOME,PATH三個環(huán)境變量。
/opt$cdhadoop/
/opt/hadoop$cat>>conf/hadoop-env.sh< 貼上以下信息
exportJAVA_HOME=/usr/lib/jvm/java-6-sun
exportHADOOP_HOME=/opt/hadoop
exportPATH=$PATH:/opt/hadoop/bin
EOF

step5.設定hadoop配置文件

 
 
 
  1. ?編輯/opt/hadoop/conf/core-site.xml  
  2.  
  3.  
  4. fs.default.name 
  5. hdfs://localhost:9000 
  6.  
  7.  
  8. hadoop.tmp.dir 
  9. /tmp/hadoop/hadoop-${user.name} 
  10.  
  11.  
  12. ?編輯/opt/hadoop/conf/hdfs-site.xml  
  13.  
  14.  
  15. dfs.replication 
  16. 1 
  17.  
  18.  
  19. ?編輯/opt/hadoop/conf/mapred-site.xml  
  20.  
  21.  
  22. mapred.job.tracker 
  23. localhost:9001 
  24.  
  25.  
  26.  

 

step6.格式化HDFS

?Hadoop單機模式安裝過程中需要格式化HDFS。以上我們已經(jīng)設定好Hadoop單機測試的環(huán)境,接著讓我們來啟動Hadoop相關服務,格式化namenode,secondarynamenode,tasktracker
?$cd/opt/hadoop
?$source/opt/hadoop/conf/hadoop-env.sh
?$hadoopnamenode-format

step7.啟動Hadoop

?接著用start-all.sh來啟動所有服務,包含namenode,datanode,
/opt/hadoop$bin/start-all.sh
執(zhí)行畫面如:
startingnamenode,loggingto/opt/hadoop/logs/hadoop-hadooper-namenode-vPro.out
localhost:startingdatanode,loggingto/opt/hadoop/logs/hadoop-hadooper-datanode-vPro.out
localhost:startingsecondarynamenode,loggingto/opt/hadoop/logs/hadoop-hadooper-secondarynamenode-vPro.out
startingjobtracker,loggingto/opt/hadoop/logs/hadoop-hadooper-jobtracker-vPro.out

step8.安裝完畢測試

?啟動之后,可以檢查以下網(wǎng)址,來觀看服務是否正常。Hadoop管理接口HadoopTaskTracker狀態(tài)HadoopDFS狀態(tài)
?http://localhost:50030/-Hadoop管理接口
注:已安裝測試成功,參考修改于http://trac.nchc.org.tw/cloud/wiki/Hadoop_Lab1,感謝NCHC。本節(jié)關于Hadoop單機模式安裝介紹到這里。


網(wǎng)頁名稱:Hadoop單機模式安裝方法深入剖析
文章鏈接:http://www.5511xx.com/article/dhodgog.html