Warning: file_get_contents(/data/phpspider/zhask/data//catemap/0/amazon-s3/2.json): failed to open stream: No such file or directory in /data/phpspider/zhask/libs/function.php on line 167

Warning: Invalid argument supplied for foreach() in /data/phpspider/zhask/libs/tag.function.php on line 1116

Notice: Undefined index: in /data/phpspider/zhask/libs/function.php on line 180

Warning: array_chunk() expects parameter 1 to be array, null given in /data/phpspider/zhask/libs/function.php on line 181

Warning: file_get_contents(/data/phpspider/zhask/data//catemap/3/templates/2.json): failed to open stream: No such file or directory in /data/phpspider/zhask/libs/function.php on line 167

Warning: Invalid argument supplied for foreach() in /data/phpspider/zhask/libs/tag.function.php on line 1116

Notice: Undefined index: in /data/phpspider/zhask/libs/function.php on line 180

Warning: array_chunk() expects parameter 1 to be array, null given in /data/phpspider/zhask/libs/function.php on line 181
Python Luigi将文件直接写入S3_Python_Amazon S3_Luigi - Fatal编程技术网

Python Luigi将文件直接写入S3

Python Luigi将文件直接写入S3,python,amazon-s3,luigi,Python,Amazon S3,Luigi,我正在用Luigi创建一个数据管道,并试图将处理后的数据直接写入S3 bucket。我使用的代码是: 运行脚本后,出现错误: S3ResponseError: S3ResponseError: 405 Method Not Allowed 我们可以直接将文件写入S3存储桶吗?问题解决了! 这是因为s3 buckt的格式。 正确的格式应为“s3://mybucket/myfile” 405错误是由于boto无法识别bucket名称造成的。 还需要指出的是,在Python 2.7.*中,boto

我正在用Luigi创建一个数据管道,并试图将处理后的数据直接写入S3 bucket。我使用的代码是:

运行脚本后,出现错误:

S3ResponseError: S3ResponseError: 405 Method Not Allowed
我们可以直接将文件写入S3存储桶吗?

问题解决了! 这是因为s3 buckt的格式。 正确的格式应为“s3://mybucket/myfile” 405错误是由于boto无法识别bucket名称造成的。 还需要指出的是,在Python 2.7.*中,boto无法识别带有“.”的bucket名称,因此必须使用有效的bucket名称或在配置文件中更改它

S3ResponseError: S3ResponseError: 405 Method Not Allowed