ubuntu14.04安装hadoop 2.7.3

1.安装时我用到的文件（为了省事，整个安装过程我都用的是root用户）

操作系统：ubuntu-14.04.1-desktop-amd64.iso

jdk文件：jdk-8u111-linux-x64.tar.gz

hadoop文件：hadoop-2.7.3.tar.gz

hadoop本地库文件：hadoop-native-64-2.7.0.tar

2.安装完操作系统后，ssh是无法使用的，需要先安装ssh

具体安装步骤见：http://jingyan.baidu.com/article/9c69d48fb9fd7b13c8024e6b.html

sudo apt-get update

sudo apt-get install ssh openssh-server

sudo apt-get install ssh

3.建立ssh无密码登录本机

ssh生成密钥有rsa和dsa两种生成方式，默认情况下采用rsa方式。

a. 创建ssh-key，，这里我们采用rsa方式;

[html] view
plain copy

 





ssh-keygen -t rsa -P "" （注：回车后会在~/.ssh/下生成两个文件：id_rsa和id_rsa.pub这两个文件是成对出现的）  

b. 进入~/.ssh/目录下，将id_rsa.pub追加到authorized_keys授权文件中，开始是没有authorized_keys文件的;

[html] view
plain copy

 





cd ~/.ssh  

cat id_rsa.pub >> authorized_keys （完成后就可以无密码登录本机了。）  

c. 登录localhost;

[html] view
plain copy

 




ssh localhost  

d. 执行退出命令;

[html] view
plain copy

 





4.安装jdk

a.把jdk-8u111-linux-x64.tar.gz拷贝到/opt下

b.通过tar -zxvf [b]jdk-8u111-linux-x64.tar.gz解压文件[/b]

c.用vi ~/.bashrc编辑bashrc文件,在文件最后追加环境变量



d.保存文件并执行source ~/.bashrc

[b]f.通过java
-version判断jdk是否安装成功[/b]



[b]5.安装hadoop[/b]

a.首先到https://mirrors.tuna.tsinghua.edu.cn/apache/hadoop/common/stable/下载hadoop-2.7.3.tar.gz



   b.解压并放在你希望的目录中。我放到了/opt

$ sudo tar xzf hadoop-2.7.3.tar.gz

   c.配置~./bashrc文件，通过vi~./bashrc 打开文件，并在最后追加如下内容

d.修改/opt/hadoop-2.7.3/etc/hadoop下的配置文件

1）修改hadoop-env.sh

2)修改core-site.sh

3)修改hdfs-site.sh

4)修改mapred-site.sh
hadoop目录下只有mapred-site.sh.template模板，需要复制一份并重命名cp [b]mapred-site.sh.template [b]mapred-site.sh[/b][/b]



[b]f.替换本地文件[/b]

[b]解压hadoop-native-64-2.7.0.tar文件，并替换掉/opt/hadoop-2.7.3/lib/native下的文件，否则会报本地文件错误，下载地址http://dl.bintray.com/sequenceiq/sequenceiq-bin/[/b]



[b]6.启动hadoop[/b]



输入jps出现如下界面，说明启动成功

7.测试

[b]通过如下命令向hdfs上传文件[/b]



[b]用如下命令查看[/b]



[b]完成[/b]