Hadoop计数器Counter笔记Hadoop里有一个很常用的工具叫Counter, 主要用来记录Hadoop job的运行状态: HDFS
Hadoop计数器Counter笔记
Hadoop里有一个很常用的工具叫Counter, 主要用来记录Hadoop job的运行状态: HDFS读写的字节数, 本地文件读写, map/reduce 输入输出记录数等等. 用户也可以自己定义counter.
1. 用命令行工具获取job的counter信息:
hadoop job -counter job_201006072115_0001 org\.apache\.hadoop\.mapred\.JobInProgress\$Counter TOTAL_LAUNCHED_MAPS
2. 待续待续...