jjzjj

json - 使用 Rumen 处理的 JobHistory 日志中的 Cpu 指标

我在Hadoop集群中收集了我的作业统计信息。我获取了JobHistory日志并使用Rumen处理它们。在json文件中,对于每个任务尝试,都有一个名为“cpuUsages”的字段。例子:"cpuUsages":[6028,3967,3597,3354,3225,3454,3589,4316,42632,102,103,103]我需要知道这些数字的计量单位。一些官方或学术引用资料? 最佳答案 Rumen从MR作业历史服务器中提取指标。因此指标与MR作业历史服务器中的指标相同。可以看到hereMR作业历史服务器提供MILLISECON

hadoop - Rumen 的 sample 输出或 Gridmix 的 sample 输入

我对使用Hadoop等大数据工具还很陌生。我想在Yarn/或YarnSimulator上执行公开可用的集群跟踪(https://github.com/google/cluster-data)。一种方法是通过Gridmix将输入馈送到Yarn。Gridmix(https://hadoop.apache.org/docs/r2.8.3/hadoop-gridmix/GridMix.html)接受输入的格式基本上是Rumen的输出。Rumen(https://hadoop.apache.org/docs/r2.8.3/hadoop-rumen/Rumen.html)将从map-reduce集