日韩无码专区无码一级三级片|91人人爱网站中日韩无码电影|厨房大战丰满熟妇|AV高清无码在线免费观看|另类AV日韩少妇熟女|中文日本大黄一级黄色片|色情在线视频免费|亚洲成人特黄a片|黄片wwwav色图欧美|欧亚乱色一区二区三区

RELATEED CONSULTING
相關(guān)咨詢
選擇下列產(chǎn)品馬上在線溝通
服務(wù)時間:8:30-17:00
你可能遇到了下面的問題
關(guān)閉右側(cè)工具欄

新聞中心

這里有您想知道的互聯(lián)網(wǎng)營銷解決方案
CentOS7.4下Hadoop3.0單機安裝教程

相關(guān)下載
hive下載地址
http://mirrors.hust.edu.cn/apache/hive/stable-2/apache-hive-2.3.2-bin.tar.gz
 hadoop下載地址
https://mirrors.tuna.tsinghua.edu.cn/apache/hadoop/common/hadoop-3.0.0/hadoop-3.0.0.tar.gz

創(chuàng)新互聯(lián)是專業(yè)的焉耆網(wǎng)站建設(shè)公司,焉耆接單;提供成都網(wǎng)站建設(shè)、做網(wǎng)站,網(wǎng)頁設(shè)計,網(wǎng)站設(shè)計,建網(wǎng)站,PHP網(wǎng)站建設(shè)等專業(yè)做網(wǎng)站服務(wù);采用PHP框架,可快速的進(jìn)行焉耆網(wǎng)站開發(fā)網(wǎng)頁制作和功能擴展;專業(yè)做搜索引擎喜愛的網(wǎng)站,專業(yè)的做網(wǎng)站團(tuán)隊,希望更多企業(yè)前來合作!

 1. hive安裝目錄  /opt/hive/apache-hive-2.3.2-bin
 2. hadoop安裝目錄 /opt/hadoop/hadoop-3.0.0
 3. JDK安裝目錄 /usr/java/jdk1.8.0_65
 4. 環(huán)境變量配置
export  JAVA_HOME=/usr/java/jdk1.8.0_65
 export  HADOOP_HOME=/opt/hadoop/hadoop-3.0.0
 export  HADOOP_CONF_DIR=${HADOOP_HOME}/etc/hadoop
 export  HADOOP_COMMON_LIB_NATIVE_DIR=${HADOOP_HOME}/lib/native
 export  HADOOP_OPTS="-Djava.library.path=${HADOOP_HOME}/lib"
 export  HIVE_HOME=/opt/hive/apache-hive-2.3.2-bin
 export  HIVE_CONF_DIR=${HIVE_HOME}/conf
 export  CLASS_PATH=.:${JAVA_HOME}/lib:${HIVE_HOME}/lib:$CLASS_PATH
 export  PATH=.:${JAVA_HOME}/bin:${HADOOP_HOME}/bin:${HADOOP_HOME}/sbin:${HIVE_HOME}/bin:$PATH
 5. 讓環(huán)境變量生效
source  /etc/profile
 6.  vim /opt/hadoop/hadoop-3.0.0/etc/hadoop/core-site.xml 修改
     
         
         
            fs.defaultFS 
            hdfs://localhost:9000 
       
 
         
         
            hadoop.tmp.dir 
            /opt/hadoop/tmp 
       
 
   
 

 7. vim /opt/hadoop/hadoop-3.0.0/etc/hadoop/hdfs-site.xml 修改增加以下內(nèi)容
 
     
        dfs.name.dir 
        /opt/hadoop/hdfs/name 
        namenode上存儲hdfs名字空間元數(shù)據(jù)  
   
 
     
        dfs.data.dir 
        /opt/hadoop/hdfs/data 
        datanode上數(shù)據(jù)塊的物理存儲位置 
   
   
     
     
        dfs.replication 
        1 
   
 
 
 
 8. SSH 設(shè)置免密碼登錄
    ssh-keygen -t dsa -P '' -f ~/.ssh/id_dsa 
    cat ~/.ssh/id_dsa.pub >> ~/.ssh/authorized_keys 
    chmod 0600 ~/.ssh/authorized_keys 
 9. 啟動命令
    9.1 初始化
    cd /opt/hadoop/hadoop-3.0.0 
    ./bin/hdfs namenode -format
    9.2 啟動命令
    ./sbin/start-dfs.sh
    9.3 停止命令
    ./sbin/stop-dfs.sh 

    錯誤處理
    Starting namenodes on [localhost]
    ERROR: Attempting to operate on hdfs namenode as root
    ERROR: but there is no HDFS_NAMENODE_USER defined. Aborting operation.
    Starting datanodes
    ERROR: Attempting to operate on hdfs datanode as root
    ERROR: but there is no HDFS_DATANODE_USER defined. Aborting operation.
    Starting secondary namenodes [bogon]
    ERROR: Attempting to operate on hdfs secondarynamenode as root
    ERROR: but there is no HDFS_SECONDARYNAMENODE_USER defined. Aborting operation.
    處理1
        $ vim sbin/start-dfs.sh
        $ vim sbin/stop-dfs.sh
    兩處增加以下內(nèi)容
        HDFS_DATANODE_USER=root
        HADOOP_SECURE_DN_USER=hdfs
        HDFS_NAMENODE_USER=root
        HDFS_SECONDARYNAMENODE_USER=root
    處理2
        $ vim sbin/start-yarn.sh
        $ vim sbin/stop-yarn.sh
    兩處增加以下內(nèi)容
        YARN_RESOURCEMANAGER_USER=root
        HADOOP_SECURE_DN_USER=yarn
        YARN_NODEMANAGER_USER=root

 10. 驗證安裝
    http://192.168.50.48:9870/dfshealth.html#tab-overview


網(wǎng)站名稱:CentOS7.4下Hadoop3.0單機安裝教程
網(wǎng)站地址:http://www.5511xx.com/article/cdojshd.html