Csv 如何使用google Data Prep处理位于google云存储中的多个文件?

Csv 如何使用google Data Prep处理位于google云存储中的多个文件?,csv,text-files,google-cloud-dataprep,Csv,Text Files,Google Cloud Dataprep,我从GCS中导入了一个文本文件,并使用DataPrep做了一些准备,然后将它们作为CSV文件写回GCS。我想做的是,对该bucket中的所有文本文件执行此操作是否有一种方法可以同时对该bucket(在GCS中)中的所有文件执行此操作 下面是我的程序。我从GCS中选择了一个文本文件(不能选择多个文本文件),并做了一些准备(重命名列、创建新列等)。然后将其作为CSV写回GCS 您可以使用带有参数的数据集功能一次加载多个文件 然后可以使用通配符选择要加载的所有文件。 请注意,所有文件都需要具有相同的模

我从GCS中导入了一个文本文件,并使用DataPrep做了一些准备,然后将它们作为CSV文件写回GCS。我想做的是,对该bucket中的所有文本文件执行此操作是否有一种方法可以同时对该bucket(在GCS中)中的所有文件执行此操作

下面是我的程序。我从GCS中选择了一个文本文件(不能选择多个文本文件),并做了一些准备(重命名列、创建新列等)。然后将其作为CSV写回GCS


您可以使用带有参数的数据集功能一次加载多个文件

然后可以使用通配符选择要加载的所有文件。 请注意,所有文件都需要具有相同的模式(相同的列)才能工作

有关如何使用此功能的详细信息,请参阅

另一种解决方案是将所有文件添加到文件夹*中,并使用大的+按钮加载该文件夹中的所有文件

[*]技术上与地面军事系统的前缀相同