Warning: file_get_contents(/data/phpspider/zhask/data//catemap/0/hadoop/6.json): failed to open stream: No such file or directory in /data/phpspider/zhask/libs/function.php on line 167

Warning: Invalid argument supplied for foreach() in /data/phpspider/zhask/libs/tag.function.php on line 1116

Notice: Undefined index: in /data/phpspider/zhask/libs/function.php on line 180

Warning: array_chunk() expects parameter 1 to be array, null given in /data/phpspider/zhask/libs/function.php on line 181
有可能只安装Hadoop HDFS吗?_Hadoop_Mapreduce_Hdfs_Mesos_Mesosphere - Fatal编程技术网

有可能只安装Hadoop HDFS吗?

有可能只安装Hadoop HDFS吗?,hadoop,mapreduce,hdfs,mesos,mesosphere,Hadoop,Mapreduce,Hdfs,Mesos,Mesosphere,我是Hadoop world的新手,我需要安装带有Hadoop HDFS的mesos来制作一个容错分布式文件系统,但所有安装参考都包括我的场景所需的组件,例如:MapReduce 你对此有什么想法或参考资料吗?绝对有可能。不要认为Hadoop是一个可安装的程序,它只是由一群运行在集群内不同节点上的java进程组成的 如果您使用hadoop tar-ball,那么如果您只需要HDFS,就可以运行NameNode和DataNodes进程 例如,如果您使用其他hadoop发行版HDP,我认为HDFS和

我是Hadoop world的新手,我需要安装带有Hadoop HDFS的mesos来制作一个容错分布式文件系统,但所有安装参考都包括我的场景所需的组件,例如:MapReduce


你对此有什么想法或参考资料吗?

绝对有可能。不要认为Hadoop是一个可安装的程序,它只是由一群运行在集群内不同节点上的java进程组成的

如果您使用hadoop tar-ball,那么如果您只需要HDFS,就可以运行NameNode和DataNodes进程


例如,如果您使用其他hadoop发行版HDP,我认为HDFS和mapreduce来自不同的rpm软件包,但是安装这两个rpm软件包是有害的。如果您只需要HDFS,请再次运行NameNode和DataNodes。

好的,thks@zhutoulala…您知道一些教程吗?我有一个postgres的实例,我需要他们的数据文件,它存储在HDFS上,这是可能的吗?我不确定,因为当我阅读你的链接和其他文档时,所有这些都显示在HDFS上读/写的方式是使用hadoop命令的。HDFS的读/写操作对用户来说不是透明的吗?这是一个不同的问题:您还可以使用HDFS api或webhdfs web服务将数据获取/放入HDFS。但是如果你问我是否使用HDFS作为数据库存储,那是一个完全不同的故事好吧,谢谢@zhutoulala,是的,我想我的数据库存储可能使用HDFS,但是现在,在阅读了一段时间的文档后,我认为这个想法是错误的,或者目前还不可用。