温馨提示×

温馨提示×

您好,登录后才能下订单哦!

密码登录×
登录注册×
其他方式登录
点击 登录注册 即表示同意《亿速云用户服务条款》

Hadoop输出参数信息介绍

发布时间:2021-08-31 09:40:19 来源:亿速云 阅读:146 作者:chen 栏目:云计算

本篇内容主要讲解“Hadoop输出参数信息介绍”,感兴趣的朋友不妨来看看。本文介绍的方法操作简单快捷,实用性强。下面就让小编来带大家学习“Hadoop输出参数信息介绍”吧!

Counters:19

FileOutputFormatCounters

BytesWritten=19         //reduce输出到hdfs的字节数

FileSystemCounters

FILE_BYTES_READ=481

HDFS_BYTES_READ=38

FILE_BYTES_WRITTEN=81316

HDFS_BYTES_WRITTEN=19

FileInputFormatCounters

BytesRead=19     //map从hdfs读取的字节数

Map-ReduceFramework

Mapoutputmaterializedbytes=49

Mapinputrecords=2   //map读入的记录行数

Reduceshufflebytes=0

SpilledRecords=8

Mapoutputbytes=35

Totalcommittedheapusage(bytes)=266469376

SPLIT_RAW_BYTES=105

Combineinputrecords=0

Reduceinputrecords=4         //reduce从map端接收的记录行数

Reduceinputgroups=3         //reduce函数接收的key数量,即归并后的k2数量

Combineoutputrecords=0

Reduceoutputrecords=3     //reduce输出的记录行数

Mapoutputrecords=4         //map输出的记录行数

                                                  

到此,相信大家对“Hadoop输出参数信息介绍”有了更深的了解,不妨来实际操作一番吧!这里是亿速云网站,更多相关内容可以进入相关频道进行查询,关注我们,继续学习!

向AI问一下细节

免责声明:本站发布的内容(图片、视频和文字)以原创、转载和分享为主,文章观点不代表本网站立场,如果涉及侵权请联系站长邮箱:is@yisu.com进行举报,并提供相关证据,一经查实,将立刻删除涉嫌侵权内容。

AI