[Hadoop] 使用Apache Ambari管理Hadoop
2013-05-21 02:06
489 查看
随着Hadoop越来越普及,对合适的管理平台的需求成为当前亟待解决的问题。已经有几个商业性的Hadoop管理平台,如Cloudera Enterprise Manager,但Apache
Ambari是第一个开源实现。Apache Ambari是一种基于Web的工具,支持Apache Hadoop集群的供应、管理和监控。Ambari目前已支持大多数Hadoop组件,包括HDFS、MapReduce、Hive、Pig、Hbase、Zookeper、Sqoop和Hcatalog等。
Shaun Connolly是Hortonworks公司负责公司战略的副总裁,他在一篇新的博客文章“Apache Amabri:
Hadoop Operations, Innovation, and Enterprise Readiness”中强调,在这一年里,Ambari主要取得了以下成绩:通过一步一步的安装向导简化了集群供应。
预先配置好关键的运维指标(metrics),可以直接查看Hadoop Core(HDFS和MapReduce)及相关项目(如HBase、Hive和HCatalog)是否健康。
支持作业与任务执行的可视化与分析,能够更好地查看依赖和性能。
通过一个完整的RESTful API把监控信息暴露出来,集成了现有的运维工具。
用户界面非常直观,用户可以轻松有效地查看信息并控制集群。
Ambari使用Ganglia收集度量指标,用Nagios支持系统报警,当需要引起管理员的关注时(比如,节点停机或磁盘剩余空间不足等问题),系统将向其发送邮件。
此外,Ambari能够安装安全的(基于Kerberos)Hadoop集群,以此实现了对Hadoop 安全的支持,提供了基于角色的用户认证、授权和审计功能,并为用户管理集成了LDAP和Active Directory。
Apache Ambari当前是6个顶级的开源Hadoop管理工具之一。据Connolly介绍,因为“稳定性和易管理性是Hadoop
企业应用的两个关键需求”,因此Ambari是Hadoop生态系统中的一个重要部分。
查看英文原文:Managing Hadoop with Apache Ambari
查看原文地址:http://www.infoq.com/cn/news/2012/12/ambari
Ambari是第一个开源实现。Apache Ambari是一种基于Web的工具,支持Apache Hadoop集群的供应、管理和监控。Ambari目前已支持大多数Hadoop组件,包括HDFS、MapReduce、Hive、Pig、Hbase、Zookeper、Sqoop和Hcatalog等。
Shaun Connolly是Hortonworks公司负责公司战略的副总裁,他在一篇新的博客文章“Apache Amabri:
Hadoop Operations, Innovation, and Enterprise Readiness”中强调,在这一年里,Ambari主要取得了以下成绩:通过一步一步的安装向导简化了集群供应。
预先配置好关键的运维指标(metrics),可以直接查看Hadoop Core(HDFS和MapReduce)及相关项目(如HBase、Hive和HCatalog)是否健康。
支持作业与任务执行的可视化与分析,能够更好地查看依赖和性能。
通过一个完整的RESTful API把监控信息暴露出来,集成了现有的运维工具。
用户界面非常直观,用户可以轻松有效地查看信息并控制集群。
Ambari使用Ganglia收集度量指标,用Nagios支持系统报警,当需要引起管理员的关注时(比如,节点停机或磁盘剩余空间不足等问题),系统将向其发送邮件。
此外,Ambari能够安装安全的(基于Kerberos)Hadoop集群,以此实现了对Hadoop 安全的支持,提供了基于角色的用户认证、授权和审计功能,并为用户管理集成了LDAP和Active Directory。
Apache Ambari当前是6个顶级的开源Hadoop管理工具之一。据Connolly介绍,因为“稳定性和易管理性是Hadoop
企业应用的两个关键需求”,因此Ambari是Hadoop生态系统中的一个重要部分。
查看英文原文:Managing Hadoop with Apache Ambari
查看原文地址:http://www.infoq.com/cn/news/2012/12/ambari
相关文章推荐
- 使用Apache Ambari管理Hadoop
- 使用Apache Ambari管理Hadoop
- Ambari (Apache Hadoop集群的供应、管理和监控的web工具) 基本概念
- Hadoop 管理监控工具:Apache Ambari
- Apache 下SVN项目管理使用说明
- hadoop中使用ACL管理HDFS权限
- Hue使用(Apache Hadoop UI系统)
- Virtualbox搭建局域网设置,安装ambari hadoop集群管理第一步
- 使用Ambari来部署hadoop集群(搭建内网HDP源)
- 实践:使用 Apache Hadoop 处理日志使用典型 Linux 系统上的 Hadoop 从日志中提取有用数据
- 关于使用hive删除表时出现的return code 1 from org.apache.hadoop.hive.ql.exec.DDLTask. MetaException
- Apache cloudera hortonworks 与cdh ambari cm hdp hadoop生态圈的关系
- Ambari管理Hadoop集群时遇到的问题
- 6-hadoop集群管理软件Ambari
- [翻译]Ambari,hadoop的配置,管理和监控项目入门
- 使用htpasswd.pl脚本远程管理apache密码文件
- hadoop集群监控工具Apache Ambari安装配置教程
- 使用 Apache Hadoop 和 Dojo 降低商业智能成本,第 1 部分: 使用 Apache Hadoop 挖掘现有数据
- ambari安装,hadoop管理工具
- Hadoop建设工具Ambari的安装部署及完整使用(三)——部署安装