WEB开发网
开发学院服务器云计算 Hadoop Metrics体系架构分析 阅读

Hadoop Metrics体系架构分析

 2012-09-08 12:09:46 来源:WEB开发网   
核心提示:基本上每一类需要统计的数据都有一个对应的updater来完成上述的操作在程序运行过程中,需要进行数据统计的时候,Hadoop Metrics体系架构分析(2),就会从updater的metrics可以动态添加(RpcMetrics)到metricList(MetricsRegistry registry )中,也可以预
基本上每一类需要统计的数据都有一个对应的updater来完成上述的操作
在程序运行过程中,需要进行数据统计的时候,就会从updater的
metrics可以动态添加(RpcMetrics)到metricList(MetricsRegistry registry )中,也可以预先定义好(NamenodeMtrics),视场景而定。
4、MetricsBase,基类,过程中收集数据的时候,依赖这个类来做数据收集,现阶段有三个类型的数据收集
时间累积型,一直做累加操作
时间值型,只看某个时间的数据值,不叠加任何数据
时间率型,时间作为分母,如速率,平均响应时间等。
3:叠加所有的东西
数据需要统计数据时,首先实现好updater,在update中定义需要收集的数据(metircList),最后数据sink的地方(context),这些数据的名称及存放载体(MetricRecord)等等。
在程序需要数据统计的地方,通过update来获取对应统计项[通过mericsList(动态),或预先定义的名字(静态)]进行数据叠加或者统计
通过context的定时程序将Updater中数据定时sink出去。

上一页  1 2 

Tags:Hadoop Metrics 体系

编辑录入:爽爽 [复制链接] [打 印]
赞助商链接