CDH 不能监控hadoop状态
2014-08-07 12:02
246 查看
1 背景:公司集群整体搬迁
2 问题:hadoop重启后,发现一个非常坑爹的问题。用 hadoop dfsadmin -report 查看datanode状态完全正常,但是Cloudera Manager管理界面上显示严重错误,如下图:
就是说cloudera manager server不能收集到各个agent的监控指标!
重启了几次发现无效。。。
3 查问题:查看 cloudera-scm-agent.log 发现类似信息: MonitorDaemon-Scheduler __init__ Monitor expired ...
就是说agent在创建监控的时候超时。
4 解决问题:排除防火墙问题后,发现是因为内网用了一个squid代理。。MyGod!!! 每次请求都会经过这个代理。所以当然就连不上了。。尼玛。
在 /etc/profile 里面,火速干掉,退出ssh重进,重启 agent ,搞定!
2 问题:hadoop重启后,发现一个非常坑爹的问题。用 hadoop dfsadmin -report 查看datanode状态完全正常,但是Cloudera Manager管理界面上显示严重错误,如下图:
就是说cloudera manager server不能收集到各个agent的监控指标!
重启了几次发现无效。。。
3 查问题:查看 cloudera-scm-agent.log 发现类似信息: MonitorDaemon-Scheduler __init__ Monitor expired ...
就是说agent在创建监控的时候超时。
4 解决问题:排除防火墙问题后,发现是因为内网用了一个squid代理。。MyGod!!! 每次请求都会经过这个代理。所以当然就连不上了。。尼玛。
在 /etc/profile 里面,火速干掉,退出ssh重进,重启 agent ,搞定!
相关文章推荐
- 用Python实现Hadoop实时作业状态监控
- hadoop获取job信息,maptask,reducetask获取信息,hadoop监控job执行状况(cdh4.2 )
- Hadoop - 企业级大数据管理平台CDH(监控)
- hadoop 查看集群的网页监控状态
- hadoop命令行运行wordcount程序 web端监控不到作业状态
- ganglia3.6.0 监控 Hadoop 2.0.0-cdh4.2.0
- hadoop 启动后yarn不能监控问题记录
- cdh版hadoop2.6.0-cdh5.13.1源码编译
- 监控文件是否更新,MD5连续三次一致后状态调回正常
- 监控应用状态
- 获得网络状态和实时监控网络状态改变
- RedisLive监控Redis进程状态
- jvisualvm监控服务器状态
- 4. SQL Server数据库状态监控 - 作业状态 推荐
- hadoop任务监控页面namenode:50030(在hadoop配置中查找集群jobtracker的ip,访问50030)
- Hadoop Kerberos(CDH)安全认证机制
- MongoDB运行状态、性能监控,分析
- objectarx监控cad空闲状态的反应器
- Alex 的 Hadoop 菜鸟教程: 第2课 hadoop 安装教程 (CentOS6 CDH分支 yum方式)
- Zabbix 监控Mysql 主从状态的Python脚本