运维网's Archiver
论坛
›
Hadoop
› Hadoop中的排序的设计
trzxycx
发表于 2018-10-29 08:03:47
Hadoop中的排序的设计
如何设计呢?
首先按照正常逻辑写好Map和Reduce程序,然后输出,最后得到的是一些文本,
在写一个Map,Reduce程序在写,进行排序。思想也是一样的,偏移量为key,(刚学的时候,不知道什么是偏移量,后来才明白,是字段的偏移量,比如第一行,开始偏移量为1,第二行,偏移量就是11,为什么,因为,第一行有10个字符,占据了10位)
页:
[1]
查看完整版本:
Hadoop中的排序的设计