hadoop2.7.1(64bit)学习中错误整理

摘要: 学习hadoop2.7.1-64bit中遇到的问题整理

问题一、ESXi5.5安装过程中网卡不支持



解决方案：购买新网卡，这个是经过亲身实践后得到的最好结论，有时候，花点钱能解决的问题，绝对不要纠结，也不能为了显示个人能力而zhuangbility，当然，一定要顶风撸三米的请忽视此结果，然后寻找网卡驱动并重新编译驱动程序。

问题二、Hadoop Native Libraries问题

如果您的linux系统是64位，那么很高兴的告诉您。您需要重新编译hadoop2.7.1-src，而不能直接使用官方网站提供的hadoop2.7.1（因为该文件中的Native Libraries默认是32位的）详情请参考Apache Hadoop 2.7.1 Native Libraries Guide

问题三、jdk安装以及版本问题（本文以CentOS6.7-64bit为例）

hadoop2.7.1开始仅支持jdk1.7及以上版本

查看本机jdk环境

rpm -qa | grep -E '^open[jre|jdk]|j[re|dk]'

删除本机现有jdk（可选）

yum remove java-1.6.0-openjdk

Hadoop Java Versions查看目前经过测试的jdk版本，并下载。

rpm -ivh jdk-8u25-linux-x64.rpm

设置环境变量

export JAVA_HOME=/usr/java/jdk1.8.0_25/
export PATH=$PATH:$JAVA_HOME

现在，让我们用下面的命令来查看JDK的环境变量:

echo $JAVA_HOME

输出结果如下：

/usr/java/jdk1.8.0_25/

然而，接下来的安装方法我们并不推荐。因为，安装路径会在机器重启以后会消失。为了使它保存下来，你需要把安装路径添加到系统的配置文件里。

做它之前，我们要在/etc/profile.d/下创建一个叫做java.sh 的文件

vi /etc/profile.d/java.sh

把下面的命令添加到文件中：

#!/bin/bash
JAVA_HOME=/usr/java/jdk1.8.0_25/
PATH=$JAVA_HOME/bin:$PATH
export PATH JAVA_HOME
export CLASSPATH=.

保存并关闭文件。为了使它有执行的权限运行以下的命令：

chmod +x /etc/profile.d/java.sh

接下来，使刚才改变的环境变量永久有效运行以下下面的命令：

source /etc/profile.d/java.sh