我试图通过AWS(流媒体工作)创建一个仅限映射器的工作.reducer字段是必需的,所以我给出一个虚拟可执行文件,并将-jobconf mapred.map.tasks = 0添加到Extra Args框中.在我安装的hadoop环境(版本0.20)中,不会启动任何reducer作业,但在AWS中,虚拟可执行文件启动并失败.
如何在AWS中运行no reducer/mapper作业?
你也可以使用cat或NONE作为reducer参数.