Parallel processing 神经网络与分布式并行计算_Parallel Processing_Machine Learning_Neural Network

Parallel processing 神经网络与分布式并行计算

parallel-processing machine-learning neural-network

Parallel processing 神经网络与分布式并行计算,parallel-processing,machine-learning,neural-network,Parallel Processing,Machine Learning,Neural Network,在神经网络中，你只需要计算许多连续的和。然而，对于现有软件包的深层次技术问题，我的推理并不完全清楚有许多软件技术，每种技术似乎都有一个特定的并行化重点。我试图确定使用什么样的软件技术 openMP-一台机器上的多个内核或cpu MPI/MPICH—网络上的多台计算机 hybrid-openMP，用于包装在MPI/MPICH中的本地计算机对于神经网络，您可能希望使用GPU。是的，这可能是真的。但是，在这种情况下存在硬件限制。

在神经网络中，你只需要计算许多连续的和。然而，对于现有软件包的深层次技术问题，我的推理并不完全清楚

有许多软件技术，每种技术似乎都有一个特定的并行化重点。我试图确定使用什么样的软件技术

openMP-一台机器上的多个内核或cpu
MPI/MPICH—网络上的多台计算机
hybrid-openMP，用于包装在MPI/MPICH中的本地计算机

对于神经网络，您可能希望使用GPU。是的，这可能是真的。但是，在这种情况下存在硬件限制。