win7使用VMware 下部署 hadoop集群(3台)过程及错误
2013-12-31 16:02
645 查看
整个安装过程 参考: http://blog.csdn.net/gobitan/article/details/13503717
注意 Ubuntu系统中 普遍存在的问题是:
etc/hosts 文件中 会有个
一定要注释掉,否则后面 在安装ssh 服务的时候会出现诸多毛病,包括后面hadoop都启动了,会突然自己连接到 localhost或者 0.0.0.0 这样的机子上,导致后面 所有的datanode 都瘫痪了。使用hadoop
dfsadmin -report命令查看集群运行状况就会出问题:
(其错误,见点击打开链接)
其实我的机器上没有显示 什么安全模式的。我查看 我的slavesr日志,发现 有个 /home/hadoop1/hadoop/tmp 无法建立。原来又是用户权限问题
输入命令:
注意 Ubuntu系统中 普遍存在的问题是:
etc/hosts 文件中 会有个
127.0.1.1 hadoop1(你的本机名称)
一定要注释掉,否则后面 在安装ssh 服务的时候会出现诸多毛病,包括后面hadoop都启动了,会突然自己连接到 localhost或者 0.0.0.0 这样的机子上,导致后面 所有的datanode 都瘫痪了。使用hadoop
dfsadmin -report命令查看集群运行状况就会出问题:
(其错误,见点击打开链接)
Configured Capacity: 0 (0 KB) Present Capacity: 0 (0 KB) DFS Remaining: 0 (0 KB) DFS Used: 0 (0 KB) DFS Used%: �% Under replicated blocks: 0 Blocks with corrupt replicas: 0 Missing blocks: 0 Datanodes available: 0 (0 total, 0 dead)
其实我的机器上没有显示 什么安全模式的。我查看 我的slavesr日志,发现 有个 /home/hadoop1/hadoop/tmp 无法建立。原来又是用户权限问题
输入命令:
sudo chmod -R a+w /home/hadoop1/hadoop/tmp
相关文章推荐
- 为学习Hadoop使用VMware准备3台一模一样的Linux虚拟机的详细搭建过程
- 为学习Hadoop使用VMware准备3台一模一样的Linux虚拟机的详细搭建过程
- 为学习Hadoop使用VMware准备3台一模一样的Linux虚拟机的详细搭建过程
- Spark-1.6.1 Hadoop-2.6.4 VMware Ubuntu 分布式集群搭建 全过程
- 离线部署 CDH 5.12.1 及使用 CDH 部署 Hadoop 大数据平台集群服务
- 从0开始部署hadoop HDFS的HA集群,使用zk实现自动容灾
- Hadoop建设工具Ambari的安装部署及完整使用(四)——Ambari使用之集群建立
- win7使用过程中出现错误1079故障的原因及解决方法
- Clickonce部署使用过程中遇见的错误
- 使用Ambari来部署hadoop集群(搭建内网HDP源)
- 使用Ambari部署hadoop集群
- Linux 下Redis集群安装部署及使用详解(在线和离线两种安装+相关错误解决方案)
- 离线部署 CDH 5.12.1 及使用 CDH 部署 Hadoop 大数据平台集群服务
- win7使用eclipse连接hadoop集群,运行mapreduce报错之Failed to set permissions of path
- Clickonce部署使用过程中的错误
- 使用Cloudera部署,管理Hadoop集群
- Hadoop集群环境搭建(win7下vmware虚拟ubuntu)
- 记录下使用Ambari部署HDP集群的过程
- 离线部署 Cloudera Manager 5 和 CDH 5.12.1 及使用 CDH 部署 Hadoop 集群服务
- Hadoop集群在使用过程中的问题