Python 使用pyarrow在Amazon S3上打开拼花地板文件时出错
我有一段代码,它应该从存储在S3上的拼花地板文件中读取一列数据:Python 使用pyarrow在Amazon S3上打开拼花地板文件时出错,python,amazon-s3,parquet,pyarrow,Python,Amazon S3,Parquet,Pyarrow,我有一段代码,它应该从存储在S3上的拼花地板文件中读取一列数据: fs=s3fs.S3FileSystem() data_set=pq.ParquetDataset(f“s3://{bucket}/{key}”,filesystem=fs) column\u data=data\u set.read(columns=[coll\u name]) 我有一个理由: 验证\u模式 self.schema=self.pieces[0]。获取\u元数据(打开\u文件)。架构 索引器:列表索引超出范围 我升
fs=s3fs.S3FileSystem()
data_set=pq.ParquetDataset(f“s3://{bucket}/{key}”,filesystem=fs)
column\u data=data\u set.read(columns=[coll\u name])
我有一个理由:
验证\u模式
self.schema=self.pieces[0]。获取\u元数据(打开\u文件)。架构
索引器:列表索引超出范围
我升级到了pyarrow的最新版本,但没有任何帮助