Hadoop WebHDFS与HttpFS

Hadoop WebHDFS与HttpFS,hadoop,webhdfs,Hadoop,Webhdfs,和之间的区别是什么 如果我理解正确: HttpFS是一个独立的服务,它在HDFS之上公开restapi WebHDFS是内置于HDFS中的RESTAPI。它不需要进一步安装 我说得对吗 什么时候使用一个而不是另一个是明智的 我读了一篇与你的问题相关的文章。以下是链接 WebHDFS与HttpFs WebHDFS和HttpFs之间的主要区别是:WebHDFS需要访问集群的所有节点,当读取一些数据时,数据将直接从该节点传输,而在HttpFs中,单个节点的行为类似于“网关”,是到客户机节点的单点

和之间的区别是什么

如果我理解正确:

  • HttpFS是一个独立的服务,它在HDFS之上公开restapi
  • WebHDFS是内置于HDFS中的RESTAPI。它不需要进一步安装
我说得对吗


什么时候使用一个而不是另一个是明智的

我读了一篇与你的问题相关的文章。以下是链接

WebHDFS与HttpFs WebHDFS和HttpFs之间的主要区别是:WebHDFS需要访问集群的所有节点,当读取一些数据时,数据将直接从该节点传输,而在HttpFs中,单个节点的行为类似于“网关”,是到客户机节点的单点数据传输。因此,在大型文件传输过程中,HttpFs可能会被阻塞,但好的一面是,我们正在最小化访问HDFS所需的占用空间