Fatal编程技术网
  • hpc/
  • Hpc 租用集群

Hpc 租用集群

Hpc 租用集群,hpc,Hpc,我想知道是否有集群可供出租 情景： 我们有一个程序，将采取什么，我们估计一个星期运行（优化后）在一个给定的文件。很可能更长。不幸的是，我们还需要处理大约300多个不同的文件，导致大约300周的计算时间（连续运行的作业可舍入到6年）。对于一项最迟应该在12月之前完成的研究工作来说，这简直是不可接受的。在我们探索其他选择的同时，我正在研究租用Beowulf集群的选择。这份工作是学术性的，并将导致完成博士学位 理想的情况是，我们将源文件和工作文件发送给公司，然后在一两周后收到结果文件。瞧 快速谷歌搜索

我想知道是否有集群可供出租

情景：

我们有一个程序，将采取什么，我们估计一个星期运行（优化后）在一个给定的文件。很可能更长。不幸的是，我们还需要处理大约300多个不同的文件，导致大约
300
周的计算时间（连续运行的作业可舍入到6年）。对于一项最迟应该在12月之前完成的研究工作来说，这简直是不可接受的。在我们探索其他选择的同时，我正在研究租用Beowulf集群的选择。这份工作是学术性的，并将导致完成博士学位

理想的情况是，我们将源文件和工作文件发送给公司，然后在一两周后收到结果文件。瞧

快速谷歌搜索并没有发现任何非常有前途的东西

建议的解决方案？

云计算听起来正是您所需要的。亚马逊、微软和谷歌以用户付费的方式租用计算机资源

亚马逊的服务是最成熟的，关于亚马逊的服务已经有几个问题，例如和。

这条线索可能会有帮助：

这是一个关于这个问题的极好的资源站点：

（弹性计算云）听起来正是您想要的。您可以注册一台或多台虚拟机（自动注册最多20台，如果您愿意，可以注册更多），每台虚拟机的起价为每小时0.10美元，外加带宽成本（EC2和亚马逊之间免费）。您可以在几种操作系统（各种Linux发行版、OpenSolaris、Windows，如果您需要额外付费）之间进行选择，并且您可以使用预先存在的机器映像或创建自己的映像。如果你使用的是所有的开源软件，并且没有太多的带宽成本，那么运行你的工作似乎要花费5000美元左右（假设你6年的计算时间与他们的小型实例相当，只有一个虚拟CPU）

一旦您注册了该服务并进行了设置，就很容易启动新的虚拟机。我甚至花了0.10美元启动了一台机器几分钟，只是为了验证我在StackOverflow上给某人的答案；我想在Solaris上检查一些东西，所以我刚刚启动了一个实例，在5分钟内就有了一个Solaris VM供我使用。

我不知道你在哪里读博士。。。大多数亚洲、欧洲和北美大学都有一些集群。你可以

  • 直接与负责集群的实验室人员会面
  • 请你的博士生导师安排。也许他/她有一些朋友可以应付
另外，经典的诀窍是利用实验室/大学计算机的未使用时间。。。基本上，每台计算机都运行一个客户端应用程序，在不使用计算机时处理数字。请参见

一种选择是租用与您所需的任何数量的PC相当的虚拟资源，并使用

建立一个beowulf集群是完全可能的

请查看这篇文章，它提供了相应的资源和软件。

该线程已经充满了指向Amazon的EC2的指针，这是正确的。他们是这方面最成熟的。最近，他们发布了他们的elastic map reduce平台，该平台听起来与您试图做的事情相似（尽管不完全相同）。谷歌不是你的选择，因为他们的计算模型不支持你需要的通用计算模型。

  • 对于学术/科学用途，有几个公共中心提供HPC功能。在欧洲，有迪萨。和DEISA成员。在美国肯定有类似的可能性，可能是通过NSF

  • 对于商业用途，请查看IBM Deep Computing On Demand产品。

      • 有几种方法可以在集群上获得时间

    • 在亚马逊弹性云上购买时间。根据您对他们的服务的熟悉程度，可能需要一些时间才能按照您想要的方式进行配置
    • 找一所大学，看看他们是否有商业计划将时间出租给公司。我知道有好几家。我特别知道的一个是UIUC NCSA的私营部门项目。根据机构的不同，他们还为您的代码提供移植和优化服务
      • 或者您可以从私人提供商处租用CPU时间。
      我来自斯洛文尼亚，比如说，我们这里有一家很棒的私人供应商叫Arctur。当我联系他们时，他们都很乐于助人，反应迅速

      您可以在此处找到它们：

      转到：
      真正的HPC集群，高达200 TFLOP。

      这并没有回答租用集群的问题。我认为这是“免费租金”：（哦，免费租金不会被忽视！我只是做了一个“最坏情况”的假设，大多数大学不会免费给我们6年的集群计算时间。：-）我认为Boinc的问题在于不能保证他的计算时间。在这种情况下，他的项目对时间非常敏感。@Paul:除非你问清楚，否则你无法确定！也许你的大学没有充分利用他们的集群。一定要先和他们核实一下。计算6年的时间~$42000。哇。我想我现在是在和大人物玩。在这一点上，你最好在数据中心为自己的机架买单，然后以每月210美元的价格租用硬件。。一个月。不知道你从哪里得到4.2万美元。。。假设您在8核“High CPU XL”配置上一周可以运行8个作业（每个大约2.5GHz的8个核），那么看起来大约需要5k美元；这是每小时80美分，所以5040美元足够他们做300份一周的工作。@Paul Nathan那么这份工作对你来说怎么样？你最后跟什么去了？我知道这是几年后的事了，但我只是在寻找我自己的答案时遇到了这个问题：——）@Keith Scavang旧机器并将工作分出去。回首往事