DIY HPC群集运行Jupyter/Python笔记本
我最近将我的Python/Jupyter工作从macbook迁移到了一台重新升级的第8代HP机架式服务器(192GB DDR3 2 x 8C Xeon E5-2600),我从亚马逊以400美元购得该服务器。额外的CPU内核极大地提高了模型的拟合速度,特别是对于我经常使用的决策树集成。我现在正在考虑从那个时代(2010年代中期早期)购买更多服务器(双座或四座intel xeon E5,E7 v1/v2),并在我的公寓中将它们作为一个小型HPC集群连接起来。以下是我需要帮助决定的事项:DIY HPC群集运行Jupyter/Python笔记本,python,jupyter-notebook,gpu,cluster-computing,hpc,Python,Jupyter Notebook,Gpu,Cluster Computing,Hpc,我最近将我的Python/Jupyter工作从macbook迁移到了一台重新升级的第8代HP机架式服务器(192GB DDR3 2 x 8C Xeon E5-2600),我从亚马逊以400美元购得该服务器。额外的CPU内核极大地提高了模型的拟合速度,特别是对于我经常使用的决策树集成。我现在正在考虑从那个时代(2010年代中期早期)购买更多服务器(双座或四座intel xeon E5,E7 v1/v2),并在我的公寓中将它们作为一个小型HPC集群连接起来。以下是我需要帮助决定的事项: 这是个坏主意
rapids.ai
在GPU上实现了相当多的sklearn。不管那是不是你用的部分,只有你能说
嘿非常感谢。这很有帮助。我应该澄清,我不希望在生产中部署。我只是想加快我在jupyter的实验。因此,我不会在负载下连续运行机器(只是常规的交互式Jupyter工作)。此外,我可能在秋季能够访问学术HPC集群。但如果发生这种情况,很可能只适用于非互动性工作和通过能力面试后的工作。因此,我想为交互式Jupyter的东西提供中等的计算能力,同时在夏季获得一些“集群”体验。