在hadoop的mapreduce里面,假设我只有一个输入文件,我能根据这个输入文件的行数来分配map的数目吗?

0
 比如我的文件中有四行,我想分配两个map,每个map只读两行,这通过自定义inputformat实现吗? 
已邀请:
0

Bob - 同程旅游大数据+BI 架构师 2016-03-29 回答

可以重写一份inputformat的类
并且在job的参数设置方面强制指定map个数,应该是可行的

要回复问题请先登录注册