Google cloud platform Google DataPrep-表大小明显有限

Google cloud platform Google DataPrep-表大小明显有限,google-cloud-platform,google-bigquery,google-cloud-dataprep,Google Cloud Platform,Google Bigquery,Google Cloud Dataprep,我正试图从尖叫蛙、Majestic和Ahrefs准备SEO数据,在将所述数据导入BigQuery进行分析之前加入它 Majestic和Ahrefs csv文件在经过一些删减到100MB限制后导入 但是,CSV文件没有完全加载,仅显示大约37000行193000行。通过进一步修剪Excel中不太重要的列并减小文件大小(从44MB减少到39MB),加载的行数略有增加。这将向我表明它不是一个错误的角色或细胞 我已确保(通过文本编辑器重新保存)CSV文件以UTF8格式保存,并检查了Dataprep的限制

我正试图从尖叫蛙、Majestic和Ahrefs准备SEO数据,在将所述数据导入BigQuery进行分析之前加入它

Majestic和Ahrefs csv文件在经过一些删减到100MB限制后导入

但是,CSV文件没有完全加载,仅显示大约37000行193000行。通过进一步修剪Excel中不太重要的列并减小文件大小(从44MB减少到39MB),加载的行数略有增加。这将向我表明它不是一个错误的角色或细胞

我已确保(通过文本编辑器重新保存)CSV文件以UTF8格式保存,并检查了Dataprep的限制,以查看每个流/缠绕的单元格数量是否有限制,但找不到任何内容

Majestic和AHREFS文件更大,完全加载,没有问题。文件中没有数据损坏。我有没有遗漏一些常见的东西

所有文件的总限制是否为100MB


如有任何建议或见解,将不胜感激

要获得文件的完整转换,您应该运行配方

您在Dataprep Transformer页面中看到的是一个

您可以看看采样是如何工作的