Warning: file_get_contents(/data/phpspider/zhask/data//catemap/0/amazon-s3/2.json): failed to open stream: No such file or directory in /data/phpspider/zhask/libs/function.php on line 167

Warning: Invalid argument supplied for foreach() in /data/phpspider/zhask/libs/tag.function.php on line 1116

Notice: Undefined index: in /data/phpspider/zhask/libs/function.php on line 180

Warning: array_chunk() expects parameter 1 to be array, null given in /data/phpspider/zhask/libs/function.php on line 181
hadoop的用例_Hadoop - Fatal编程技术网

hadoop的用例

hadoop的用例,hadoop,Hadoop,最近我在学习hadoop时遇到了一个问题,我发现只有一个读取文本数据和计算字数的例子。几乎所有的例子都是同一个任务。请帮助我理解它是hadoop的唯一用例吗?请为我提供一些关于更真实的用例的参考资料,或者在哪里我可以理解和编写hadoop可以在哪里使用 谢谢我可以尝试概述一些限制自己使用MapReduce的方向: a) ETL—数据转换。在这里,hadoop大放异彩,因为延迟并不重要,但可伸缩性很重要 b) 蜂箱/猪。在某些情况下,我们确实需要在大数据集上使用SQL或类似SQL的功能,但却买不起

最近我在学习hadoop时遇到了一个问题,我发现只有一个读取文本数据和计算字数的例子。几乎所有的例子都是同一个任务。请帮助我理解它是hadoop的唯一用例吗?请为我提供一些关于更真实的用例的参考资料,或者在哪里我可以理解和编写hadoop可以在哪里使用


谢谢

我可以尝试概述一些限制自己使用MapReduce的方向: a) ETL—数据转换。在这里,hadoop大放异彩,因为延迟并不重要,但可伸缩性很重要
b) 蜂箱/猪。在某些情况下,我们确实需要在大数据集上使用SQL或类似SQL的功能,但却买不起商业MPP数据库
c) 不同类型的日志处理

d) 深度分析——当我们只想在海量数据上运行java代码时。Mahaout在许多情况下用作机器学习库

所以这些都是使用Hadoop(比如Hadoop的Map-Reduce过程)的领域。我会看看这些是适合使用Hadoop MapReduce的领域(AFAIK)