hadoop安装部署1------前期准备

四台服务器

机器环境：centos 7

192.168.0.1

192.168.0.2

192.168.0.3

192.168.0.4

以root用户登录

开启ssh服务

service sshd start

将ssh作为开机自启动服务

chkconfig sshd on

创建hadoop用户

useradd hadoop

更改hadoop用户的密码

passwd hadoop

hadoop

hadoop

修改主机名

vim /etc/hostname

master

slave1

slave2

slave3

修改hosts文件

vim /etc/hosts

192.168.0.1 master

192.168.0.2 slave1

192.168.0.3 slave2

192.168.0.4 slave3

关闭防火墙

查看防火墙状态

service iptables status

即时生效，重启后失效

关闭： service iptables stop

重启后生效

关闭： chkconfig iptables off

对于centos7来说模块已经改变，相应的命令为

systemctl stop firewalld.service 关闭防火墙

systemctl disable firewalld.service 防止开机自启动

以hadoop用户登录系统

设置ssh免密码登录

ssh-keygen -t rsa -P '' #生成公钥和秘钥

cat ~/.ssh/id_rsa.pub >> ~/.ssh/authorized_keys #复制公钥文件到authorized_keys

su #以root用户登录修改权限

chmod 700 /home/hadoop/.ssh #设置文件夹权限 700

chmod 644 home/hadoop/.ssh/authorized_keys #设置文件权限 644

之后将所有机器生成的authorized_keys文件汇总，并且保持所有机器一致

注：所有需要安装的软件包均放在 /opt/文件夹下

安装jdk

使用su命令切换成管理员 安装jdk-8u71-linux-x64.rpm

安装之前先卸载centos 7自带的openjdk

查看jdk相关的软件

rpm -qa | grep jdk

删除查出的软件

rpm -e --nodeps XXX

安装下载好的jdk

rpm -ivh jdk-8u71-linux-x64.rpm

配置环境变量

vim /etc/profile

# set Java environment

export JAVA_HOME=/usr/java/jdk1.8.0_71

export PATH=$PATH:$JAVA_HOME/bin

export CLASSPATH=.:$JAVA_HOME/lib/dt.jar:$JAVA_HOME/lib/tools.jar

将配置文件立即生效

source /etc/profile

将jdk安装在所有机器上并配置环境变量