C# Azure数据湖存储基准

C# Azure数据湖存储基准,c#,powershell,azure,cortana-intelligence,azure-data-lake,C#,Powershell,Azure,Cortana Intelligence,Azure Data Lake,对发展商来说, 我正在为Azure Data Lake做基准测试,我看到在同一个区域读取ADL存储和写入VHD的速度大约为7.5 MB/S。PowerShell和C#就是这种情况,代码取自以下示例: PowerShell代码来自 C#代码来自 上述代码示例是否可用于基准测试,或者是否会提供一个新的SDK来提高吞吐量? 此外,当ADL存储普遍可用时,是否有预期的吞吐量 谢谢, Marc我开始写一个,并将第一个代码位放在GitHub上 您应该在Azure VM上运行该工具,以不测量您的interne

对发展商来说,

我正在为Azure Data Lake做基准测试,我看到在同一个区域读取ADL存储和写入VHD的速度大约为7.5 MB/S。PowerShell和C#就是这种情况,代码取自以下示例:

PowerShell代码来自 C#代码来自

上述代码示例是否可用于基准测试,或者是否会提供一个新的SDK来提高吞吐量? 此外,当ADL存储普遍可用时,是否有预期的吞吐量

谢谢, Marc

我开始写一个,并将第一个代码位放在GitHub上

您应该在Azure VM上运行该工具,以不测量您的internet连接

请随时将您的想法和代码添加到我的GitHub repo中


我希望这会有所帮助。

文档中提供的代码可以用于构建基准测试。在Azure Data Lake正式上市之前,SDK将经历一些发布和更新。除功能外,还包括性能改进

关于绩效基准,我们的一般指导如下。Azure Data Lake服务目前正在预览中。我们正在通过此预览阶段不断改进服务,包括性能。当我们接近一般可用性时,我们将考虑对预期的性能结果类型发布额外的指导。性能结果在很大程度上取决于许多因素,如测试拓扑、配置和工作负载。因此,如果不检查所有这些,就很难对您的观察结果进行评论。如果您可以通过离线方式联系我们,了解详细信息,我们将很乐意查看


Amit Kulkarni(Azure Data Lake项目经理)

由于Azure Data Lake服务仍处于预览阶段,我认为任何基准测试都无法提供有效的结果。不管怎样,从现在到GA,情况都会改变。也有缓存机制,这将扭曲您的结果。一旦服务是GA,我会很高兴,如果有基准,就像你开始的。你还需要考虑,分析服务将能够同时检索多个块。@ SasCHADITTMN我不同意你的前提,但我仍然发现OP的问题是有效的。OP的问题是,链接的代码是否值得在基准测试环境中使用。创建一个公平的基准测试执行路径总是非常重要的,并且需要引起人们对代码是否提供了准确的性能视图或误导性的性能视图的关注。感谢Sasha和Chris的输入。Saveen Reddy(Azure Data Lake Evangelist女士)评论说,Azure Data Lake商店将于2016年夏季上市。关于这一点,MarcI完全同意,这是一个有效的问题——这就是为什么我给它一个+1——并且我已经有了一些关于如何设置基准测试的想法。一旦我完成了我的解决方案,我将在这里发布它。Sascha,谢谢你将尝试它。你好,马克