如何使用导入创建自定义Dask工作进程

如何使用导入创建自定义Dask工作进程,dask,dask-distributed,dask-delayed,Dask,Dask Distributed,Dask Delayed,我正在设置Dask,我可以使用Dask进行多处理 但是,当我想使用预配置的Dask工作线程时,我遇到了一些问题。他们没有与我的主流程相同的导入 我在想。如何将自定义导入添加到dask工作人员中,以便所有访问这些工作人员的人员都能有效地运行。理想情况下,dask工作人员都应该具有相同的软件环境。通常,这在Dask之外通过Docker映像或网络文件系统(NFS)得到保证。还有一些其他的解决方案,如Client.upload_file,它对小脚本很有用

我正在设置Dask,我可以使用Dask进行多处理

但是,当我想使用预配置的Dask工作线程时,我遇到了一些问题。他们没有与我的主流程相同的导入


我在想。如何将自定义导入添加到dask工作人员中,以便所有访问这些工作人员的人员都能有效地运行。

理想情况下,dask工作人员都应该具有相同的软件环境。通常,这在Dask之外通过Docker映像或网络文件系统(NFS)得到保证。还有一些其他的解决方案,如
Client.upload_file
,它对小脚本很有用