.net 使用HDInsight hadoop进行存储

我非常想知道一个关于hadoop hdinsight的信息

本文来自microsoft：

说明hadoop在内部使用存储帐户存储数据

假设以上信息是一种方法，那么hadoop和storage account之间有什么区别呢。 如果我只想存储文件等信息，我可以只使用存储帐户，而不是创建hdinsight hadoop？

---

另外，如果hadoop“hadoopCluster”使用存储帐户“stgAccount”，这是否意味着存储帐户“stgAccount”空间和“hadoopCluster”空间相同

基本上，在HDInsight部署中，您有两个部分：

HDInsight群集由多个头节点和工作节点（运行软件的虚拟机）组成

存储数据的Azure Blob存储

Azure Blob存储是一种安全的分布式数据存储。无论是否使用HDInsight，都可以使用它。这只是一个有自己定价的云存储。因此，如果您只想在云中存储文件，您肯定不需要HDInsight

HDInsight群集不可用。实际上，您将看到，您直接存储在头节点磁盘上的任何内容都会偶尔消失

---

HDInsight群集可以访问您在创建群集时指定的存储，并可以向该存储中读取/写入数据。

只需添加到benohead的响应中，您可以将其用作存储或新发布的（ADL）-这是一个用于大数据工作负载的高度可扩展和高性能的存储。由于HDInsight将计算与存储分离，因此可以使用虚拟机进行计算，使用Azure博客或ADL进行存储。您可以使用Azure Blob或ADL，而无需使用HDInsight提供的计算