Warning: file_get_contents(/data/phpspider/zhask/data//catemap/0/hadoop/6.json): failed to open stream: No such file or directory in /data/phpspider/zhask/libs/function.php on line 167

Warning: Invalid argument supplied for foreach() in /data/phpspider/zhask/libs/tag.function.php on line 1116

Notice: Undefined index: in /data/phpspider/zhask/libs/function.php on line 180

Warning: array_chunk() expects parameter 1 to be array, null given in /data/phpspider/zhask/libs/function.php on line 181
Python 基于Hadoop集群的神经网络训练_Python_Hadoop_Apache Spark_Neural Network_Keras - Fatal编程技术网

Python 基于Hadoop集群的神经网络训练

Python 基于Hadoop集群的神经网络训练,python,hadoop,apache-spark,neural-network,keras,Python,Hadoop,Apache Spark,Neural Network,Keras,我已经学习神经网络好几个星期了。此外,即使我总是使用R,Python中的Keras库对于像我这样具有小型编程背景的人来说确实很有帮助 Keras这是一个非常好的界面,允许我在不调用后端的情况下进行所需的自定义,除非我使用了一些自定义损耗指标 简单明了的还有硬件规范,例如允许您从安装Python+Keras的机器的CPU切换到机器的(兼容)GPU,允许在训练神经网络时利用神经网络的强并行性 我想知道是否有什么东西可以让你轻松地切换到hadoop神经网络集群训练。 此外,是否有一些hadoop开源集

我已经学习神经网络好几个星期了。此外,即使我总是使用R,Python中的Keras库对于像我这样具有小型编程背景的人来说确实很有帮助

Keras这是一个非常好的界面,允许我在不调用后端的情况下进行所需的自定义,除非我使用了一些自定义损耗指标

简单明了的还有硬件规范,例如允许您从安装Python+Keras的机器的CPU切换到机器的(兼容)GPU允许在训练神经网络时利用神经网络的强并行性

我想知道是否有什么东西可以让你轻松地切换到hadoop神经网络集群训练。 此外,是否有一些hadoop开源集群可以这样做?


感谢您的帮助

找到了一些东西:看看欧洲核子研究所的on spark。谢谢你@prudenko!我将把这个问题留给一个可能对大家都有帮助的完整答案:)显然Cloudera已经创建了一个名为的工具,它承诺与许多深度学习库集成。虽然还没有成功,但似乎很有希望。