测试hadoop的最佳方法是什么?

时间:2018-02-15 03:51:12

标签: hadoop testing apache-zookeeper namenode

我已经完成了hadoop集群设置,其中3个日志节点用于QJM,4个数据节点,2个namenode,3个zookeeper但是我需要确认它们之间的连接是否成功,所以我正在寻找一个可以执行以下任务

1)应检查当前处于活动状态的名称节点

2)namenode是否正在彼此成功通信

3)应检查所有日志节点是否正在相互通信

4)应检查所有zookeeper是否正在相互通信

5)哪个zookeeper当前扮演主角色

是否有任何工具或任何命令可用于检查上述任务?

有谁可以帮我解决这个问题?

1 个答案:

答案 0 :(得分:0)

使用Ambari,您可以监控整个群集的性能和工作情况。 此外,如果您想以编程方式验证您的hadoop作业, 然后你可以在Hadoop中使用Counters的概念。