详解Ubuntu16.04下Hadoop 2.7.3的安装与配置

一、Java环境搭建

（1）下载JDK并解压（当前操作系统为Ubuntu16.04，jdk版本为jdk-8u111-Linux-x64.tar.gz）

新建/usr/java目录，切换到jdk-8u111-linux-x64.tar.gz所在目录，将这个文件解压缩到/usr/java目录下。

tar -zxvf jdk-8u101-linux-x64.tar.gz -C /usr/java/ 

（2）设置环境变量

修改.bashrc，在最后一行写入下列内容。

sudo vim ~/.bashrc 

export JAVA_HOME=/usr/java/jdk1.8.0_111 export CLASSPATH=.:$JAVA_HOME/lib/dt.jar:$JAVA_HOME/lib/tools.jar export PATH=$JAVA_HOME/bin:$PATH 

运行如下命令使环境变量生效。

source ~/.bashrc 

 打开profile文件，插入java环境配置节。

sudo vim /etc/profile 

export JAVA_HOME=/usr/java/jdk1.8.0_111 export JAVA_BIN=$JAVA_HOME/bin export JAVA_LIB=$JAVA_HOME/lib export CLASSPATH=.:$JAVA_LIB/tools.jar:$JAVA_LIB/dt.jar export PATH=$JAVA_HOME/bin:$PATH 

打开environment 文件，追加jdk目录和jdk下的lib的目录，如下所示。

sudo vim /etc/environment 

复制代码 代码如下:
PATH="/usr/local/sbin:/usr/local/bin:/usr/sbin:/usr/bin:/sbin:/bin:/usr/games:/usr/local/games:/usr/java/jdk1.8.0_111/lib:/usr/java/jdk1.8.0_111" 
 

使配置生效

source /etc/environment 

验证java环境是否配置成功

java -version 

二、安装ssh-server并实现免密码登录

（1）下载ssh-server

sudo apt-get install openssh-server 

（2）启动ssh

sudo /etc/init.d/ssh start 

（3）查看ssh服务是否启动，如果有显示相关ssh字样则表示成功。

ps -ef|grep ssh 

（4）设置免密码登录

使用如下命令，一直回车，直到生成了rsa。

ssh-keygen -t rsa 

导入authorized_keys

cat ~/.ssh/id_rsa.pub >> ~/.ssh/authorized_keys 

 测试是否免密码登录localhost

ssh localhost 

关闭防火墙

ufw disable 

三、安装Hadoop单机模式和伪分布模式。

（1）下载hadoop-2.7.3.tar.gz，解压到/usr/local（单机模式搭建）。

sudo tar zxvf hadoop-2.7.3.tar.gz -C /usr/local 

 切换到/usr/local下，将hadoop-2.7.3重命名为hadoop，并给/usr/local/hadoop设置访问权限。

cd /usr/local sudo mv hadoop-2.7.3 hadoop sudo chmod 777 /usr/local/hadoop 

（2）配置.bashrc文件