hadoop安装部署1------前期准备

四台服务器

机器环境:centos 7

192.168.0.1

192.168.0.2

192.168.0.3

192.168.0.4

以root用户登录

开启ssh服务

service sshd start

将ssh作为开机自启动服务

chkconfig sshd on

创建hadoop用户

useradd hadoop

更改hadoop用户的密码

passwd hadoop

hadoop

hadoop

修改主机名

vim /etc/hostname

master

slave1

slave2

slave3

修改hosts文件

vim /etc/hosts

192.168.0.1 master

192.168.0.2 slave1

192.168.0.3 slave2

192.168.0.4 slave3

关闭防火墙

查看防火墙状态

service iptables status

即时生效,重启后失效

关闭: service iptables stop

重启后生效

关闭: chkconfig iptables off

对于centos7来说模块已经改变,相应的命令为

systemctl stop firewalld.service 关闭防火墙

systemctl disable firewalld.service 防止开机自启动

以hadoop用户登录系统

设置ssh免密码登录

ssh-keygen -t rsa -P \&\#39\;\&\#39\; # 生成公钥和秘钥

cat ~/.ssh/id_rsa.pub >> ~/.ssh/authorized_keys # 复制公钥文件到 authorized_keys

su # 以 root 用户登录 修改权限

chmod 700 /home/hadoop/.ssh # 设置文件夹权限 700

chmod 644 home/hadoop/.ssh/authorized_keys # 设置文件权限 644

之后将所有机器生成的 authorized_keys 文件汇总,并且保持所有机器一致

注:所有需要安装的软件包均放在 /opt/文件夹下

安装jdk

使用su命令切换成管理员 安装jdk-8u71-linux-x64.rpm

安装之前先卸载centos 7自带的openjdk

查看jdk相关的软件

rpm -qa | grep jdk

删除查出的软件

rpm -e --nodeps XXX

安装下载好的jdk

rpm -ivh jdk-8u71-linux-x64.rpm

配置环境变量

vim /etc/profile

# set Java environment

export JAVA_HOME=/usr/java/jdk1.8.0_71

export PATH=$PATH:$JAVA_HOME/bin

export CLASSPATH=.:$JAVA_HOME/lib/dt.jar:$JAVA_HOME/lib/tools.jar

将配置文件立即生效

source /etc/profile

将jdk安装在所有机器上并配置环境变量

;