Warning: file_get_contents(/data/phpspider/zhask/data//catemap/2/python/329.json): failed to open stream: No such file or directory in /data/phpspider/zhask/libs/function.php on line 167

Warning: Invalid argument supplied for foreach() in /data/phpspider/zhask/libs/tag.function.php on line 1116

Notice: Undefined index: in /data/phpspider/zhask/libs/function.php on line 180

Warning: array_chunk() expects parameter 1 to be array, null given in /data/phpspider/zhask/libs/function.php on line 181
Python Can';找不到依赖项/未找到依赖项错误_Python_Dask_Dask Distributed - Fatal编程技术网

Python Can';找不到依赖项/未找到依赖项错误

Python Can';找不到依赖项/未找到依赖项错误,python,dask,dask-distributed,Python,Dask,Dask Distributed,我试图在由两个节点组成的小型dask集群上运行。远程工作者只需使用dask-worker命令进行部署,它就可以正确地显示在基准测试中client的输出中。我还试着运行一些简单的函数,比如sleep,它工作得很顺利 当我运行基准测试时,它最终在处理add函数时卡住了(它在2036/2047年卡住了),就像最后11个任务从未完成一样。当我查看工作人员的日志时,会收到以下许多消息: distributed.worker - INFO - Can't find dependencies for key

我试图在由两个节点组成的小型dask集群上运行。远程工作者只需使用
dask-worker
命令进行部署,它就可以正确地显示在基准测试中
client
的输出中。我还试着运行一些简单的函数,比如
sleep
,它工作得很顺利

当我运行基准测试时,它最终在处理
add
函数时卡住了(它在2036/2047年卡住了),就像最后11个任务从未完成一样。当我查看工作人员的日志时,会收到以下许多消息:

distributed.worker - INFO - Can't find dependencies for key add-efe22746-c80b-42f1-a02d-1217928ba4ec
distributed.worker - INFO - Dependent not found: add-37c59ee3-e3ed-4643-ae13-dd96291207bd 1 . Asking scheduler
我最初在自己的代码中遇到了这个问题,但现在我在基准测试中也遇到了这个问题,我相信这更多地与我的设置有关。设置一个调度器和一个工人是如此简单,我几乎看不出这里出了什么问题。关于如何部署工作人员,有什么我不知道的吗?比如,在部署工作人员时,有什么特别的事情必须非常小心吗


编辑:在主节点上,我有调度程序和工作程序。如果我杀死这个节点上的工作进程,它似乎可以正常工作,尽管没有使用这个节点的核心。我应该这样配置集群吗?也就是说,在主节点上不启动worker?

我刚刚运行了同一个笔记本,不幸的是无法重现这些警告。我的希望是,自从你最初提出这个问题以来,它们已经被清理干净了

和往常一样,如果您能够提供最小的可重复故障,那么在上的bug报告总是受欢迎的