泰宁新闻网

Linux环境Hadoop的下载安装

鞋

泰宁新闻网 http://www.tainingxinwen.cn 2020-05-12 08:39 出处:网络
hadoop安装,Linux环境Hadoop的下载安装 1. Hadoop的下载 windows在Apache官网下载2.7.6的binary文件,通过FTP传输到centOS虚拟机。

hadoop安装,Linux环境Hadoop的下载安装

1. Hadoop的下载

Linux环境Hadoop的下载安装

windows在Apache官网下载2.7.6的binary文件,通过FTP传输到centOS虚拟机。

 

2. 解压安装:tar xzvf hadoop-2.7.6.tar.gz -C /usr/local/hadoop

Linux环境Hadoop的下载安装

 

3. 查看安装的版本是多少位的

先切换到目录hadoop下的lib/native目录

cd /usr/local/hadoop/lib/native

file libhadoop.so.1.0.0 发现已经是64位的。Apache官网目前已经提供了一些64位的数据文件,不用再自己编译。

Linux环境Hadoop的下载安装

 

4. Hadoop安装包的目录结构

Linux环境Hadoop的下载安装

Linux环境Hadoop的下载安装

 

5. Hadoop配置文件的修改

Hadoop安装主要就是配置文件的修改,一般在主节点进行修改,完毕后使用scp命令下发给其他各个从节点机器。

切换目录cd /usr/local/hadoop/etc/hadoop,所有配置都是在此目录下进行。

(1)配置hadoop-env.sh

执行命令vim hadoop-env.sh

设置JAVA_HOME:  export JAVA_HOME=/usr/local/jdk

(2) 配置core-site.xml: vim core-site.xml

Linux环境Hadoop的下载安装

(3)配置hdfs-site.xml

Linux环境Hadoop的下载安装

 

(4)配置mapred-site.xml

Linux环境Hadoop的下载安装

(5)配置yarn-site.xml

Linux环境Hadoop的下载安装

(6)配置slave文件

 

Linux环境Hadoop的下载安装

 

6. 将Hadoop添加到环境变量中:vim /etc/profile

在最后加上export HADOOP_HOME=/usr/local/hadoop

                 export PATH=$PATH:$JAVA_HOME/bin:$HADOOP_HOME/bin:$HADOOP_HOME/sbin

Linux环境Hadoop的下载安装

保存之后,source /etc/profile使此配置立即生效.

 

7. 以上都是中centos-hadoop-node-01主节点上面进行的配置,从节点不用分别进行复杂的配置,可以使用scp命令将Hadoop安装包从主节点拷贝到从节点虚拟机上面。

scp -r /usr/local/hadoop/ root@centos-hadoop-node-02:/usr/local

scp -r /usr/local/hadoop/ root@centos-hadoop-node-03:/usr/local

scp -r /usr/local/hadoop/ root@centos-hadoop-node-04:/usr/local

Linux环境Hadoop的下载安装

 

8. 配置文件注意事项

Linux环境Hadoop的下载安装

Apache官网文档中可以查看默认的配置和已经过时的配置

Linux环境Hadoop的下载安装

Linux环境Hadoop的下载安装

zhuzuwei

Linux环境Hadoop的下载安装

原创文章 132获赞 197访问量 67万+ 关注 他的留言板
展开阅读全文

Linux环境Hadoop的下载安装的相关内容如下:

hadoop安装的相关网页热门搜索词

下载安装|百度app下载安装|下载app免费下载安装|taptap下载安装|应用宝下载安装|浏览器下载安装|掌上生活app下载安装|富二代app下载安装|浏览器下载|

本文标题:Linux环境Hadoop的下载安装
http://www.tainingxinwen.cn/news/372022.html

0

精彩评论

暂无评论...
验证码 换一张
取 消