有没有一种方法可以使用dask在拼花地板文件上运行SQL语句?
Spark具有允许用户在Spark数据帧上运行SQL语句的功能。达斯克呢?如果现在不可用,是否正在考虑使用它?Presto/AWS Athena可能是您问题的答案。Presto/AWS Athena可能是您问题的答案。提供了Python中的分布式SQL引擎,可用于拼花文件。它构建在RAPIDS上,因此需要NVIDIA GPU。提供了一个Python分布式SQL引擎,可用于拼花文件。它建立在RAPIDS上,因此需要NVIDIA GPU。还有(免责声明:我是作者),允许对dask数据帧(或可使用dask加载的数据,如拼花地板)运行任意SQL查询 例如,使用有没有一种方法可以使用dask在拼花地板文件上运行SQL语句?,dask,Dask,Spark具有允许用户在Spark数据帧上运行SQL语句的功能。达斯克呢?如果现在不可用,是否正在考虑使用它?Presto/AWS Athena可能是您问题的答案。Presto/AWS Athena可能是您问题的答案。提供了Python中的分布式SQL引擎,可用于拼花文件。它构建在RAPIDS上,因此需要NVIDIA GPU。提供了一个Python分布式SQL引擎,可用于拼花文件。它建立在RAPIDS上,因此需要NVIDIA GPU。还有(免责声明:我是作者),允许对dask数据帧(或可使用da
conda install dask sql安装后,您可以运行
来自dask_sql导入上下文的
c=上下文()
c、 创建桌子(“我的桌子”,“一些/路径/到/拼花”)
c、 sql(“从我的表中选择*).compute()
dask sql
与前面提到的blazingSQL非常相似,但也可以在没有GPU(集群)的情况下运行。还有(免责声明:我是作者),它允许对dask数据帧(或可以使用dask加载的数据,例如拼花)运行任意sql查询
例如,使用conda install dask sql安装后,您可以运行
来自dask_sql导入上下文的
c=上下文()
c、 创建桌子(“我的桌子”,“一些/路径/到/拼花”)
c、 sql(“从我的表中选择*).compute()
dask sql
与前面提到的blazingSQL非常相似,但也可以在没有GPU(群集)的情况下运行。Pandas有一个方法查询您尝试过dask吗?Pandas有一个方法查询您尝试过dask吗?