Google cloud platform 将数据从API上传到GCP dataprep

Google cloud platform 将数据从API上传到GCP dataprep,google-cloud-platform,google-cloud-dataprep,Google Cloud Platform,Google Cloud Dataprep,是否可以将数据从Restful API直接导入数据准备 我想可能有一些解决办法。。。 1:将结果保存到GCS bucket中的JSON文件中,并从中导入。 2:将结果导入一个大查询表,然后从那里导入数据准备 只需调用一个API并获得一个结果集,而不必采取额外的步骤,这会更加顺利。我就是找不到任何地方能解释怎么做 蒂亚 长话短说:没有真正的方法将数据直接流式传输到data Prep中。即使是新的Dataprep Premium版本也希望您将数据以某种形式存储在数据库中——尽管这确实将您的选择扩展到

是否可以将数据从Restful API直接导入数据准备

我想可能有一些解决办法。。。 1:将结果保存到GCS bucket中的JSON文件中,并从中导入。 2:将结果导入一个大查询表,然后从那里导入数据准备

只需调用一个API并获得一个结果集,而不必采取额外的步骤,这会更加顺利。我就是找不到任何地方能解释怎么做


蒂亚

长话短说:没有真正的方法将数据直接流式传输到data Prep中。即使是新的Dataprep Premium版本也希望您将数据以某种形式存储在数据库中——尽管这确实将您的选择扩展到了Google Sheets、Salesforce、Oracle、Microsoft SQL Server、MySQL和PostgreSQL

就我个人而言,我已经养成了直接写入BigQuery和/或Firestore到BigQuery的习惯,以避免此类事情。它还有一个很好的副作用,即作为应用程序的另一种日志记录类型