柚子快報邀請碼778899分享:hadoop DHFS偽分布式
柚子快報邀請碼778899分享:hadoop DHFS偽分布式
永久關閉防火墻 #systemctl disable firewalld
網(wǎng)卡開機自啟 安裝 wget # yum install –y wget
清空源倉庫后,安裝 Centos7 阿里源 #wget -O /etc/yum.repos.d/CentOS-Base.repo http://mirrors.aliyun.com/repo/Centos-7.repo
重新生成 yum 源緩存 # yum makecache
安裝 SSH 客戶端 # sudo yum -y install openssh-clients openssh-server
?
安裝 JDK # sudo yum -y install java-1.8.0-openjdk java-1.8.0-openjdk-devel
?
編輯變量環(huán)境 # vim ~/.bashrc export JAVA_HOME=/usr/lib/jvm/java-1.8.0-openjdk
?
執(zhí)行環(huán)境變量 source ~/.bashrc 查看 java 的版本信息,看到下圖所示表示配置成功 java -version # $JAVA_HOME/bin/java -version
?
安裝 hadoop,如果網(wǎng)速慢把軟件包上傳即可
wget https://archive.apache.org/dist/hadoop/common/hadoop-2.7.4/hadoop-2.7.4.tar.gz
將 Hadoop 安裝到 /usr/local 目錄下:
# tar -zxf hadoop-2.7.4.tar.gz -C /usr/local/
cd /usr/local
mv ./hadoop-2.7.4/ ./hadoop
查看 hadoop 版本
/usr/local/hadoop/bin/hadoop version
?
設置 Hadoop 的環(huán)境變量
# vim ~/.bashrc
export HADOOP_HOME=/usr/local/hadoop
export HADOOP_INSTALL=$HADOOP_HOME
export HADOOP_MAPRED_HOME=$HADOOP_HOME
export HADOOP_COMMON_HOME=$HADOOP_HOME
export HADOOP_HDFS_HOME=$HADOOP_HOME
export YARN_HOME=$HADOOP_HOME
export HADOOP_COMMON_LIB_NATIVE_DIR=$HADOOP_HOME/lib/native
export PATH=$PATH:$HADOOP_HOME/sbin:$HADOOP_HOME/bin
執(zhí)行 Hadoop 的環(huán)境變量
source ~/.bashrc
?
進入 hadoop 配置文件,修改配置文件
# cd /usr/local/hadoop/etc/hadoop
# vim core-site.xml
編輯 core-site.xml 文件
?# vim hdfs-site.xml
編輯 hdfs-site.xml 文件
?
?格式化
# /usr/local/hadoop/bin/hdfs namenode -format
通過命令,執(zhí)行 hadloop
/usr/local/hadoop/sbin/start-dfs.sh
連續(xù)輸入 root 用戶的密碼
通過命令,查看狀態(tài) 四個節(jié)點必須全
# jps
?
通過 Web 界面訪問 hadloop,查看節(jié)點存活情況,能夠看到節(jié)點存活情況表示搭建成功 #ip 地址:50070
必須關閉防火墻 注意:如果無法訪問請再從第十步做一遍,最后通過 jps 查看,回復四個節(jié)點信息說明無誤
?通過這個選項查看存活節(jié)點,配置成功
?
柚子快報邀請碼778899分享:hadoop DHFS偽分布式
好文推薦
本文內容根據(jù)網(wǎng)絡資料整理,出于傳遞更多信息之目的,不代表金鑰匙跨境贊同其觀點和立場。
轉載請注明,如有侵權,聯(lián)系刪除。