[Hadoop]使用ApacheAmbari管理Hadoop

随着Hadoop越来越普及&＃xff0c;对合适的管理平台的需求成为当前亟待解决的问题。已经有几个商业性的Hadoop管理平台&＃xff0c;如Cloudera Enterprise Manager&＃xff0c;但Apache Ambari是第一个开源实现。Apache Ambari是一种基于Web的工具&＃xff0c;支持Apache Hadoop集群的供应、管理和监控。Ambari目前已支持大多数Hadoop组件&＃xff0c;包括HDFS、MapReduce、Hive、Pig、Hbase、Zookeper、Sqoop和Hcatalog等。

Shaun Connolly是Hortonworks公司负责公司战略的副总裁&＃xff0c;他在一篇新的博客文章“Apache Amabri: Hadoop Operations, Innovation, and Enterprise Readiness”中强调&＃xff0c;在这一年里&＃xff0c;Ambari主要取得了以下成绩&＃xff1a;通过一步一步的安装向导简化了集群供应。

• 预先配置好关键的运维指标&＃xff08;metrics&＃xff09;&＃xff0c;可以直接查看Hadoop Core&＃xff08;HDFS和MapReduce&＃xff09;及相关项目&＃xff08;如HBase、Hive和HCatalog&＃xff09;是否健康。
• 支持作业与任务执行的可视化与分析&＃xff0c;能够更好地查看依赖和性能。
• 通过一个完整的RESTful API把监控信息暴露出来&＃xff0c;集成了现有的运维工具。
• 用户界面非常直观&＃xff0c;用户可以轻松有效地查看信息并控制集群。

Ambari使用Ganglia收集度量指标&＃xff0c;用Nagios支持系统报警&＃xff0c;当需要引起管理员的关注时&＃xff08;比如&＃xff0c;节点停机或磁盘剩余空间不足等问题&＃xff09;&＃xff0c;系统将向其发送邮件。

此外&＃xff0c;Ambari能够安装安全的&＃xff08;基于Kerberos&＃xff09;Hadoop集群&＃xff0c;以此实现了对Hadoop 安全的支持&＃xff0c;提供了基于角色的用户认证、授权和审计功能&＃xff0c;并为用户管理集成了LDAP和Active Directory。

Apache Ambari当前是6个顶级的开源Hadoop管理工具之一。据Connolly介绍&＃xff0c;因为“稳定性和易管理性是Hadoop 企业应用的两个关键需求”&＃xff0c;因此Ambari是Hadoop生态系统中的一个重要部分。

查看英文原文&＃xff1a;Managing Hadoop with Apache Ambari

查看原文地址&＃xff1a;http://www.infoq.com/cn/news/2012/12/ambari