Hadoop安装端口已经被占用问题的解决方法

在测试安装hadoop的时候，通常会遇到大家在同一批机器上安装hadoop的情况，这样的话会有端口已经被占用导致安装不成功的情况出现。

Hadoop日志会提示这种错误：

ERROR org.apache.hadoop.mapred.TaskTracker: Can not start task tracker because java.net.BindException: Address already in use

在这种情况下，最好的方法就是在配置环境时把所有的端口配置都进行修改。

在hadoop 0.20版本会涉及到3个配置文件：

core-site.xml:

1: <property>

2:    <name>fs.default.name</name>

3:    <value>hdfs://master:9100</value>

4:    <description>

5:     为默认hdfs文件访问URI

6:    </description>

7: </property>

hdfs-site.xml

1: <property>

2:   <name>dfs.datanode.address</name>

3:   <value>0.0.0.0:50011</value>

4:   <description>

5:    默认为50010, 是datanode的监听端口

6:   </description>

7: </property>

8: <property>

9:   <name>dfs.datanode.http.address</name>

10:   <value>0.0.0.0:50076</value>

11:   <description>

12:     默认为50075，为datanode的http server端口

13:   </description>

14: </property>

15: <property>

16:   <name>dfs.datanode.ipc.address</name>

17:   <value>0.0.0.0:50021</value>

18:   <description>

19:     默认为50020, 为datanode的ipc server端口

20:   </description>

21: </property>

mapred-site.xml

1: <property>

2:   <name>mapred.job.tracker</name>

3:   <value>master:9101</value>

4:   <description>

5:     job tracker运行的位置和端口

6:   </description>

7: </property>

8:

9: <property>

10:   <name>mapred.task.tracker.http.address</name>

11:   <value>0.0.0.0:50061</value>

12:   <description>

13:     默认为50061, 是task tracker的http server端口

14:   </description>

15: </property>

以上端口都配置为和其他人不冲突的端口，然后启动hadoop就可以顺利启动了。

PS:

1：如果遇到这种错误：

ERROR org.apache.hadoop.mapred.TaskTracker: Can not start task tracker because org.apache.hadoop.ipc.RemoteException: java.io.IOException: Unknown protocol to name node: org.apache.hadoop.mapred.InterTrackerProtoco

说明你在core-site.xml中fs.default.name的端口 和 mapred-site.xml中mapred.job.tracker中端口配置为完全相同的了，请修改为不同端口。

２：如果遇到这种：

error: org.apache.hadoop.hdfs.server.namenode.SafeModeException: Cannot delete /tmp/hadoop-＊/mapred/system. Name node is in safe mode.

请不要急，NameNode会在开始启动阶段自动关闭安全模式，然后启动成功。如果你不想等待，可以运行：

bin/hadoop dfsadmin -safemode leave 强制结束。

解释：安全模式

NameNode启动时会从fsimage和edits日志文件中装载文件系统的状态信息，接着它等待各个DataNode向它报告它们各自的数据块状态，这样，NameNode就不会过早地开始复制数据块，即使在副本充足的情况下。这个阶段，NameNode处于安全模式下。NameNode的安全模式本质上是HDFS集群的一种只读模式，此时集群不允许任何对文件系统或者数据块修改的操作。通常NameNode会在开始阶段自动地退出安全模式。如果需要，你也可以通过’bin/hadoop dfsadmin -safemode’命令显式地将HDFS置于安全模式。NameNode首页会显示当前是否处于安全模式。关于安全模式的更多介绍和配置信息请参考JavaDoc：setSafeMode()。