Warning: file_get_contents(/data/phpspider/zhask/data//catemap/0/hadoop/6.json): failed to open stream: No such file or directory in /data/phpspider/zhask/libs/function.php on line 167

Warning: Invalid argument supplied for foreach() in /data/phpspider/zhask/libs/tag.function.php on line 1116

Notice: Undefined index: in /data/phpspider/zhask/libs/function.php on line 180

Warning: array_chunk() expects parameter 1 to be array, null given in /data/phpspider/zhask/libs/function.php on line 181
如何制作网站,使用分布式文件系统-hadoop进行数据管理_Hadoop_Web_Bigdata_Distributed System - Fatal编程技术网

如何制作网站,使用分布式文件系统-hadoop进行数据管理

如何制作网站,使用分布式文件系统-hadoop进行数据管理,hadoop,web,bigdata,distributed-system,Hadoop,Web,Bigdata,Distributed System,我对大数据技术很幼稚,很好奇将其与传统的应用程序开发联系起来 开发任何web应用程序的传统方法是使用托管服务器(或应用服务器)和数据库来管理数据。 但是,假设我有一个巨大的数据集,它是由网站生成的(即每秒GBs),那么该网站将属于管理大数据的范畴 假设我有一个由20台计算机组成的集群,有200GB的硬盘和核心i3处理器。所以现在我将有足够的处理和存储能力的网站。(当然,如果我需要更多资源,hadoop也是可伸缩的)。 如何设置应用程序服务器,以便在此群集中托管网站? 我的应用服务器是否需要负载平

我对大数据技术很幼稚,很好奇将其与传统的应用程序开发联系起来

开发任何web应用程序的传统方法是使用托管服务器(或应用服务器)和数据库来管理数据。 但是,假设我有一个巨大的数据集,它是由网站生成的(即每秒GBs),那么该网站将属于管理大数据的范畴

假设我有一个由20台计算机组成的集群,有200GB的硬盘和核心i3处理器。所以现在我将有足够的处理和存储能力的网站。(当然,如果我需要更多资源,hadoop也是可伸缩的)。 如何设置应用程序服务器,以便在此群集中托管网站? 我的应用服务器是否需要负载平衡器,因为对应用服务器的http请求速度更快? 谁能给我指路! 提前谢谢

编辑:

我只是想概述一下web应用程序开发是如何与大数据相关的。让我们想象一下Facebook。它基本上是一个web应用程序。对于Facebook来说,应用服务器和数据库管理是如何完成的是我的好奇心。
事实上,像Facebook这样的大公司将不得不使用分布式系统。例如hadoop集群。我的问题和这个概念有关。但是Facebook有巨大的集群,要理解它的实现方式是很困难的,在我的问题中,我提到了由20台计算机组成的集群。如果有人有为web应用程序宿主设置hadoop集群的经验,那么我会请求分享这些知识

我对hadoop了解不多,但如果我要创建一个网站,我会使用Visual Studio


Visual Studio Express是免费的,并且非常易于使用。

没有足够的信息来猜测正确答案。感谢您的提醒。我只是想概述一下web应用程序开发是如何与大数据相关的。让我们想象一下Facebook。它基本上是一个web应用程序。对于Facebook来说,应用服务器和数据库管理是如何完成的是我的好奇心,因为像Facebook这样的大公司将不得不使用分布式系统,这是一个事实。例如hadoop集群。我的问题和这个概念有关。但是Facebook有巨大的集群,要理解它的实现方式是很困难的,在我的问题中,我提到了由20台计算机组成的集群。如果有人有为web应用程序宿主设置hadoop集群的经验,那么我会请求分享这些知识。谢谢