Warning: file_get_contents(/data/phpspider/zhask/data//catemap/7/kubernetes/5.json): failed to open stream: No such file or directory in /data/phpspider/zhask/libs/function.php on line 167

Warning: Invalid argument supplied for foreach() in /data/phpspider/zhask/libs/tag.function.php on line 1116

Notice: Undefined index: in /data/phpspider/zhask/libs/function.php on line 180

Warning: array_chunk() expects parameter 1 to be array, null given in /data/phpspider/zhask/libs/function.php on line 181

Warning: file_get_contents(/data/phpspider/zhask/data//catemap/0/drupal/3.json): failed to open stream: No such file or directory in /data/phpspider/zhask/libs/function.php on line 167

Warning: Invalid argument supplied for foreach() in /data/phpspider/zhask/libs/tag.function.php on line 1116

Notice: Undefined index: in /data/phpspider/zhask/libs/function.php on line 180

Warning: array_chunk() expects parameter 1 to be array, null given in /data/phpspider/zhask/libs/function.php on line 181
在Azure Kubernetes服务(AKS)中使用Dask Kubernetes上的大数据_Kubernetes_Dataset_Dask_Azure Aks_Dask Kubernetes - Fatal编程技术网

在Azure Kubernetes服务(AKS)中使用Dask Kubernetes上的大数据

在Azure Kubernetes服务(AKS)中使用Dask Kubernetes上的大数据,kubernetes,dataset,dask,azure-aks,dask-kubernetes,Kubernetes,Dataset,Dask,Azure Aks,Dask Kubernetes,我想对笔记本电脑硬盘中8gb的数据集(如csv文件)进行分析。我已经在AKS上安装了一个dask kubernetes群集,每个群集有1个调度程序和3个工作进程,每个进程有7 gb 如何使用AKS上的dask kubernetes群集处理数据集? 工作人员之间共享数据集的哪个文件系统最适合此目的? 任何关于我应该将此数据集存储在何处以便我可以轻松处理此数据集的建议 该方法应该可以从jupyter笔记本和python文件中使用。您可能希望将数据上载到Azure blob存储。此处有关于dask远程

我想对笔记本电脑硬盘中8gb的数据集(如csv文件)进行分析。我已经在AKS上安装了一个dask kubernetes群集,每个群集有1个调度程序和3个工作进程,每个进程有7 gb

如何使用AKS上的dask kubernetes群集处理数据集? 工作人员之间共享数据集的哪个文件系统最适合此目的?

任何关于我应该将此数据集存储在何处以便我可以轻松处理此数据集的建议


该方法应该可以从jupyter笔记本和python文件中使用。

您可能希望将数据上载到Azure blob存储。此处有关于dask远程数据(包括Azure)的更多信息: