当前位置:  开发笔记 > 大数据 > 正文

有没有一个规范的问题可以用map/reduce来帮助?

如何解决《有没有一个规范的问题可以用map/reduce来帮助?》经验,为你挑选了1个好方法。

我试图理解hadoop和map/reduce的界限,这将有助于我们知道map/reduce无法帮助的非平凡问题或一类问题.

如果改变问题的一个因素可以简化map/reduce,那肯定会很有意思.

谢谢



1> bajafresh4li..:

我想到两件事:

    任何需要实时/交互/低延迟响应时间的东西.提交给Hadoop的任何工作都会产生固定成本.

    任何不尴尬并行的问题.Hadoop可以处理许多需要数据之间简单相互依赖的问题,因为记录在reduce阶段加入.但是,某些图形处理和机器学习算法很难在Hadoop中编写,因为有太多的操作彼此依赖.一些机器学习算法需要非常低的延迟,随机访问大量数据,而Hadoop并不提供开箱即用的功能.

推荐阅读
mobiledu2402851173
这个屌丝很懒,什么也没留下!
DevBox开发工具箱 | 专业的在线开发工具网站    京公网安备 11010802040832号  |  京ICP备19059560号-6
Copyright © 1998 - 2020 DevBox.CN. All Rights Reserved devBox.cn 开发工具箱 版权所有