如何计算hadoop集群中的水槽吞吐量？我是第一次这样做。
我写到HDFS的所有数据都是通过水槽。
我查看了HDFS中的一些图表，发现:跨数据节点写入的总字节似乎在 2.2 MB / s的平均adg左右。这是正确的方法吗？
最佳答案
您是否正在使用HDP或CDH之类的发行版？通过Cloudera Manager查看Flume Agent时，CDH提供了很好的指标。它提供以下内容
channel :投放比例％，投放比例％
来源:事件每秒接收成功
接收器:每秒事件导出成功
我想这就是你想要的
如何计算hadoop集群中的水槽吞吐量？我是第一次这样做。
我写到HDFS的所有数据都是通过水槽。
我查看了HDFS中的一些图表，发现:跨数据节点写入的总字节似乎在 2.2 MB / s的平均adg左右。这是正确的方法吗？
最佳答案
您是否正在使用HDP或CDH之类的发行版？通过Cloudera Manager查看Flume Agent时，CDH提供了很好的指标。它提供以下内容
channel :投放比例％，投放比例％
来源:事件每秒接收成功
接收器:每秒事件导出成功
我想这就是你想要的