hadoop动态添加节点
2014-08-17 23:07
274 查看
1.修改新节点的/etc/hosts,增加NameNode的主机名与ip
2.设置节点与新节点ssh免密码的登录
3.在新节点安装好Hadoop(NameNode有关配置文件复制到该节点)
4.修改NameNode的配置文件conf/slaves,添加新增节点
5.在新节点的机器上,单独启动该节点上的DataNode和TaskTracker
hadoop-daemon.shstart datanode
hadoop-daemon.shstart tasktracker
6.在NameNode节点执行 hadoop dfsadmin -refreshNodes
7.均衡block在新节点上执行(如果是增加多个节点,只需在一个新节点,不需要重启集群)
运行start -balancer.sh进行数据负载均衡(不需要重启集群)
注意事项:
1. 必须确保新节点的防火墙已关闭;
2. 确保新节点的ip已经添加到master及其他slaves的/etc/hosts中,也要将master及其他slave的ip添加到新节点的/etc/hosts中
2.设置节点与新节点ssh免密码的登录
3.在新节点安装好Hadoop(NameNode有关配置文件复制到该节点)
4.修改NameNode的配置文件conf/slaves,添加新增节点
5.在新节点的机器上,单独启动该节点上的DataNode和TaskTracker
hadoop-daemon.shstart datanode
hadoop-daemon.shstart tasktracker
6.在NameNode节点执行 hadoop dfsadmin -refreshNodes
7.均衡block在新节点上执行(如果是增加多个节点,只需在一个新节点,不需要重启集群)
运行start -balancer.sh进行数据负载均衡(不需要重启集群)
注意事项:
1. 必须确保新节点的防火墙已关闭;
2. 确保新节点的ip已经添加到master及其他slaves的/etc/hosts中,也要将master及其他slave的ip添加到新节点的/etc/hosts中
相关文章推荐
- centos6.5下hadoop2.2.0的8节点配置兼动态添加节点测试
- hadoop1.1.2集群动态添加datanode节点
- Hadoop 2.6.0动态添加节点
- Hadoop学习笔记—13.分布式集群中节点的动态添加与下架
- hadoop实战之动态添加节点
- Hadoop学习记录(5)|集群搭建|节点动态添加删除
- Hadoop 2.6.0动态添加节点
- Ubuntu Hadoop 2.x 动态添加节点
- hadoop2.x 动态添加节点
- Hadoop集群动态添加datanode节点步骤
- Hadoop动态添加/删除节点(datanode和tacktracker)
- hadoop集群动态添加和删除节点说明
- Hadoop 2.6.0动态添加节点
- Hadoop2.7.0学习——动态添加节点
- Hadoop2.x集群动态添加删除数据节点
- hadoop学习【13】——hadoop2动态添加节点
- Hadoop2.x集群动态添加删除数据节点
- Hadoop学习笔记—13.分布式集群中节点的动态添加与下架
- hadoop-2.6.0动态添加新节点
- Hadoop动态添加节点