Hadoop输出参数信息介绍

本篇内容主要讲解"Hadoop输出参数信息介绍"，感兴趣的朋友不妨来看看。本文介绍的方法操作简单快捷，实用性强。下面就让小编来带大家学习"Hadoop输出参数信息介绍"吧!

Counters:19

FileOutputFormatCounters

BytesWritten=19 //reduce输出到hdfs的字节数

FileSystemCounters

FILE_BYTES_READ=481

HDFS_BYTES_READ=38

FILE_BYTES_WRITTEN=81316

HDFS_BYTES_WRITTEN=19

FileInputFormatCounters

BytesRead=19 //map从hdfs读取的字节数

Map-ReduceFramework

Mapoutputmaterializedbytes=49

Mapinputrecords=2 //map读入的记录行数

Reduceshufflebytes=0

SpilledRecords=8

Mapoutputbytes=35

Totalcommittedheapusage(bytes)=266469376

SPLIT_RAW_BYTES=105

Combineinputrecords=0

Reduceinputrecords=4 //reduce从map端接收的记录行数

Reduceinputgroups=3 //reduce函数接收的key数量,即归并后的k2数量

Combineoutputrecords=0

Reduceoutputrecords=3 //reduce输出的记录行数

Mapoutputrecords=4 //map输出的记录行数

到此，相信大家对"Hadoop输出参数信息介绍"有了更深的了解，不妨来实际操作一番吧！这里是网站，更多相关内容可以进入相关频道进行查询，关注我们，继续学习！