（转载）Hadoop2.7.1配置

http://my.oschina.net/laigous/blog/478438

hadoop伪分布式搭建

其实官网有比较详实的说明，英语好的可以直接看官网，地址


1、安装JDK1.7



这个省略，官网显示1.6可以，但是我用openjdk1.6出了异常，JDK1.6没试，直接用了JDK1.7

配置好环境变量

?
?
添加完后执行命令使配置生效

?

2、安装ssh、rsync,（以ubuntu为例）



?

3、下载hadoop编译包，镜像地址（国内镜像竟然比US的还慢，不能忍，注意2.7的编译包为64位）



查是32还是64位的办法

?
?

4、配置环境变量



hadoop配置文件指定java路径

etc/hadoop/hadoop-env.sh

?
系统环境变量

?
后两条不加会出现

You have loaded library /usr/hadoop/hadoop-2.7.0/lib/native/libhadoop.so.1.0.0 which might have disabled stack guard. The VM will try to fix the stack guard now.

It's highly recommended that you fix the library with 'execstack -c <libfile>', or link it with '-z noexecstack'.

添加完后执行命令使配置生效

?
执行命令查看是否成功

?

5、修改hadoop配置文件

etc/hadoop/core-site.xml:

?
etc/hadoop/hdfs-site.xml:

?

6、设置hadoop ssh无密码访问

?

7、格式化节点和启动hadoop

?
打开浏览器 http://localhost:50070/看是否成功
hdfs配置：username最好和当前用户名相同，不然会可能出现权限问题

?

8、yarn配置



etc/hadoop/mapred-site.xml:

?
etc/hadoop/yarn-site.xml:

?
启动yarn

?
http://localhost:8088/查看是否成功
至此hadoop单节点伪分布式安装配置完成