监控我现有的hadoop生态系统的好工具?

时间:2017-02-17 05:40:12

标签: hadoop system ambari

我正在寻找一个非常好的工具或开源系统来监控我的hadoop生态系统,包括像hadoop,spark,oozie,yarn,hdfs,hive,hbase,kafka,zookeeper等组件。

我得到了ambari,但我发现当前的ambari可以用来从头开始部署和管理我的系统,而不是管理我现有的hadoop系统。

有什么建议吗?

1 个答案:

答案 0 :(得分:0)

Ambari具有非常不错的监控/警报功能,可以监控所有Hadoop组件。检查Ambari用户指南(see one for the most recent version in PDF)。具体来说,请参见第2节(Ambari仪表板)和第8节(监控和警报)。

P.S。这个领域有一个很有希望的项目(但目前仍处于孵化阶段),名为Apache Eagle。它试图超越监控本身,特别是帮助识别Hadoop集群的各种问题。