Google bigquery BigQuery将数据导出到一个大文件中

Google bigquery BigQuery将数据导出到一个大文件中,google-bigquery,google-cloud-storage,Google Bigquery,Google Cloud Storage,“告诉我们每个请求的限制”,一个文件不能超过1GB,这是事实,但并不总是如此。我做了一个新的导出,很惊讶,一个文件有6GB大小。这个大文件对我来说是个问题 我能做些什么来减小文件大小,以及为什么BigQuery会有这么大的文件?BigQuery导出文件的大小会有所不同,有时它会拆分为超过1GB的文件或拆分为许多小文件 对此有一个文件,但它只涉及文档更改,以设置不同导出文件大小的期望值 似乎其他人也遇到了这个问题: 您可以尝试进行新的导出,但如果导出文件大小始终大于1GB,您可以立即查看此

“告诉我们每个请求的限制”,一个文件不能超过1GB,这是事实,但并不总是如此。我做了一个新的导出,很惊讶,一个文件有6GB大小。这个大文件对我来说是个问题


我能做些什么来减小文件大小,以及为什么BigQuery会有这么大的文件?

BigQuery导出文件的大小会有所不同,有时它会拆分为超过1GB的文件或拆分为许多小文件

对此有一个文件,但它只涉及文档更改,以设置不同导出文件大小的期望值

似乎其他人也遇到了这个问题:


您可以尝试进行新的导出,但如果导出文件大小始终大于1GB,您可以立即查看此不可预测的行为。

Hi@Artem,您能告诉我们如何进行导出吗。在链接中,您提供了它的状态:当您将数据导出到多个文件时,文件的大小会有所不同,可能这是您问题的根源。@TamirKlein我尝试了几种方法,第一种是GoogleAPI,第二个UI,两个结果都是相同的。是的,文件的大小可以不同,但不能超过1Gb。该文件包含4M有效的JSON行。您是否尝试使用?@PolOrtiz?是的,当然,这不是我第一次从BigQuery导出,我每天导出很多表,所有这些都可以正常工作,我只有一个表有问题