我想分析集群中的Hadoop 1.0.3带宽消耗。
我只能使用哪个工具来分析与所有hadoop组件相关的所有进程所使用的节点之间的带宽消耗:hdfs,jobtrackers,tasktrackers,datanode,namenode,heartbeats,数据传输...
也想将带宽消耗与过程关联起来。
主要问题是其进程不使用修复端口。如果可能,使用特定的端口范围或接口(interface)/子接口(interface)是否可行?
最佳答案
在集群中激活该功能后,Ganglia监视会提供大量指标(尽管我不确定它是否提供带宽消耗)。
有关于here和here的信息,以及一个不错的演示页面here。