运维网's Archiver
论坛
›
Hadoop
› Hadoop NLineInputFormat
jydg
发表于 2016-12-3 11:02:41
Hadoop NLineInputFormat
NLineInputFormat
重写了splits
设置参数
mapre duce.input.lineinputformat.linespermap
应用场景
如创建了一个数据源文件,每个Map处理一行,连接不同的数据库
Reduce数量设置成0,是一个Map Only任务
页:
[1]
查看完整版本:
Hadoop NLineInputFormat