Google cloud platform 扳手到CSV数据流
我正在尝试将表从扳手复制到大查询。我创建了两个数据流。一个从扳手复制到文本文件，另一个将文本文件导入bigquery 表中有一个列，该列的值为JSON字符串。从文本文件导入到bigquery时运行数据流作业时会出现问题。作业抛出以下错误： INVALD JSON:：1:38预期eof，但发现“602 是否在复制时可以排除此列，或者可以以任何方式复制JSON对象？我尝试在模式文件中排除此列，但没有帮助 谢谢！查看BigQuery导入作业中有允许跳过列的选项，也没有在提取时跳过列的云扳手选项 我认为最好的办法是编写一个自定义处理器来删除列，类似于 它更复杂，但您也可以尝试DataPrep：http://cloud/dataprep/docs/html/Drop-Transform_57344635. 应该可以将DataPrep作业作为数据流模板运行Google cloud platform 扳手到CSV数据流,google-cloud-platform,google-bigquery,google-cloud-dataflow,google-cloud-spanner,Google Cloud Platform,Google Bigquery,Google Cloud Dataflow,Google Cloud Spanner,我正在尝试将表从扳手复制到大查询。我创建了两个数据流。一个从扳手复制到文本文件，另一个将文本文件导入bigquery 表中有一个列，该列的值为JSON字符串。从文本文件导入到bigquery时运行数据流作业时会出现问题。作业抛出以下错误： INVALD JSON:：1:38预期eof，但发现“602 是否在复制时可以排除此列，或者可以以任何方式复制JSON对象？我尝试在模式文件中排除此列，但没有帮助 谢谢！查看BigQuery导入作业中有允许跳过列的选项，也没有在提取时跳过列的云扳手选项 我认为