搜索
首页 电子数码 手机/通讯 手机使用

hadoop中我可以设定4个map去读取4个文件吗?

hadoop中我可以设定4个map去读取4个文件吗?

全部回答

2016-07-16

63 0

  mr程序不在本地跑,而且你也无法知道哪个map或者reduce程序在那台机器跑,所以不可能在map或者reduce任务过程中读取本地文件。但是hadoop提供了一个共享缓存--DistributedCache ,你可以将mr程序中使用到的文件或者其他东西上传到DistributedCache 中,然后在map或者reduce运行前,会自动将文件下载到本地,这时就可以访问了。
  具体如何使用请自行学习。

类似问题换一批

热点推荐

热度TOP

相关推荐
加载中...

热点搜索 换一换

电子数码
手机使用
MP4/MP3
手机/通讯
照相机/摄像机
手机/通讯
手机使用
手机购买
通讯服务
手机使用
手机使用
举报
举报原因(必选):
取消确定举报