Google bigquery 流入BQ分区表

Google bigquery 流入BQ分区表,google-bigquery,google-cloud-dataflow,Google Bigquery,Google Cloud Dataflow,我试图使用数据流将数据流传输到BQ分区表中。 文件说: 流式处理缓冲区中的数据在_PARTITIONTIME列中具有空值 在将行插入到日期分区表时,我可以看到这种情况 是否有一种方法可以设置我要插入的行的分区时间,以便BigQuery可以推断出正确的分区 到目前为止,我已经尝试过这样做:tableRow.set(“\u PARTITIONTIME”,milliessinceepoch) 但是我遇到了一个没有这样的字段异常。AFAIK,在撰写本文时,BigQuery不允许每行手动指定分区-它是从插

我试图使用数据流将数据流传输到BQ分区表中。 文件说:

流式处理缓冲区中的数据在_PARTITIONTIME列中具有空值

在将行插入到日期分区表时,我可以看到这种情况

是否有一种方法可以设置我要插入的行的分区时间,以便BigQuery可以推断出正确的分区

到目前为止,我已经尝试过这样做:
tableRow.set(“\u PARTITIONTIME”,milliessinceepoch)

但是我遇到了一个
没有这样的字段
异常。

AFAIK,在撰写本文时,BigQuery不允许每行手动指定分区-它是从插入时推断出来的


但是,作为BigQuery内置分区表功能的替代,您可以使用Dataflow的功能同时流式处理多个BigQuery表:请参阅。

大约一个月前,您可以流式处理到日期分区表的特定分区中。例如,要在表T中插入日期为20160501的分区,可以使用表名
T$20160501