CDH安装和使用时碰到的各种错误记录(基于5.8)
2016-10-07 22:17
323 查看
能看日志的地方主要就是:/var/log 目录下。
诸如:cloudera-scm-agent、hadoop-hdfs、hadoop-yarn、hbase等等目录下都记录着各种日志。
状况1:有一个DataNode没有启动。
到这个DataNode对应的主机上,查看其日志文件:cat /var/log/hadoop-hdfs/hadoop-cmf-hdfs-DATANODE-slave2.log.out
发现如下异常:
既然是/dfs/dn目录下有不兼容的ID,那么到这个目录里面去看看
发现其下果然有一个名字是192.168.56.106的ID,而这是之前的CDH集群的NAMENODE,现在的集群被我改成用105做NAMENODE了。
所以,直接删除/dfs/dn下的文件和目录,然后到CM的管理界面中把整个集群重启,一切OK了。
诸如:cloudera-scm-agent、hadoop-hdfs、hadoop-yarn、hbase等等目录下都记录着各种日志。
状况1:有一个DataNode没有启动。
到这个DataNode对应的主机上,查看其日志文件:cat /var/log/hadoop-hdfs/hadoop-cmf-hdfs-DATANODE-slave2.log.out
发现如下异常:
java.io.IOException: Incompatible clusterIDs in /dfs/dn: namenode clusterID = cluster20; datanode clusterID = cluster16 ........
既然是/dfs/dn目录下有不兼容的ID,那么到这个目录里面去看看
发现其下果然有一个名字是192.168.56.106的ID,而这是之前的CDH集群的NAMENODE,现在的集群被我改成用105做NAMENODE了。
所以,直接删除/dfs/dn下的文件和目录,然后到CM的管理界面中把整个集群重启,一切OK了。
相关文章推荐
- CDH5.7/5.8离线安装-使用CM5,基于CentOS 6.7
- 使用gem安装jekyll错误记录
- 关于使用U盘安装Unubtu12.04出现的各种错误
- CDH使用过程中如何避免各种无谓的错误?
- CocoaPods 的详细安装步骤,使用方法以及安装过程中出现的各种错误总结
- 全程记录:今天尝试安装SharePoint Server 2007过程 ,安装成功了,但是开始使用碰到权限问题,应该算是BUg吧
- 各种类型的安装错误的记录
- centos DNS服务搭建 DNS原理 使用bind搭建DNS服务器 配置DNS转发 配置主从 安装dig工具 DHCP dhclient 各种域名解析记录 mydns 第三十节课
- 安装使用MySQL时一个典型错误的解决、临时记录下
- Error 25007.初始化合成时发生错误。安装程序无法使用 LoadLibraryShim() 加载合成。
- windows环境下emacs各种插件的安装和使用
- 客户端安装Team Explorer 2005后,使用时出现package load failure错误的修正
- 使用 Microsoft SQL Server 2000 各种版本或组件而必须安装的操作系统
- 安装IIS中各种错误解决办法
- VS2005 SP1 “无法使用此产品的安装源,请确认安装源存在,并且您可以访问它”的错误
- [错误记录]关于指针传递获得数据使用错误问题....
- Cognos8安装使用问题记录
- 关于CSDN_blog的使用错误记录(不知道为什么CSDN不去改这些错误,难道你们用起来舒服???)
- 关于在Windows中安装Oracle碰到ORA-12638错误的解决方法
- 基于centos4.4的mg手工下载RPM包安装顺序记录