博客
关于我
强烈建议你试试无所不能的chatGPT,快点击我
mapreduce (一) 物理图解+逻辑图解
阅读量:6820 次
发布时间:2019-06-26

本文共 262 字,大约阅读时间需要 1 分钟。

 

InputFormat类:该类的作用是将输入数据转换为map函数的输入数据。通过job.setInputFormatClass()方法进行设置,默认是TextInputFormat,将文本文件分成split(多行),由于测试数据较小,所以每个文本作为一个split了。并通过LineRecoderReader将行解析成
对。key为对应行在文件中的偏移量,value为行的内容。 Mapper类: 实现map()函数 Combiner类: 实现combine函数。合并中间结果中具有相同key的键值对。

 

 

 

 

 

转载地址:http://fhazl.baihongyu.com/

你可能感兴趣的文章
SpringBoot学习之路:13.SpringBoot使用Lombok简化JavaBean代码
查看>>
常考面试题及汇总答案
查看>>
easyUI-DataGrid加载数据和分页
查看>>
js Blob对象实现文件下载功能
查看>>
IT自学资源
查看>>
jQuery零基础入门——(七)事件
查看>>
Android 之窗口小部件详解--App Widget
查看>>
Java并发知识点总结
查看>>
避免基本类型数组转换列表陷阱(Arrays.asList())
查看>>
Linux 与 BSD 有什么不同?
查看>>
Xcode工程文件的格式说明[翻译]
查看>>
强制删除一个容器
查看>>
[JS]Drag And Drop
查看>>
12. Integer to Roman
查看>>
什么是node.js的事件驱动编程
查看>>
ThreadPoolExecutor 创建Worker Thread的策略
查看>>
开发者最容易犯的13个JavaScript错误--看懂他,并自查代码看看有没有错误
查看>>
CSS规范
查看>>
Vue.js学习笔记五
查看>>
IntelliJ IDEA 源值1.5已过时,将在未来所有版本中删除
查看>>