Hive 如何检查是否在Bigquery中刷新了表?

Hive 如何检查是否在Bigquery中刷新了表?,hive,google-bigquery,Hive,Google Bigquery,目前我有大约1000个表,其中我需要跟踪各种bigquery数据集中的大约500个表,并生成一个报告或创建一个dashboard。这样,如果一个表没有刷新,我们就可以监控并迅速采取行动 有人能告诉我如何在使用Bigquery插槽最少的情况下做到这一点。我认为您应该能够查询上次修改时间,如下所示: 然后,您可以添加一个表,该表具有要更新的表所允许的最大时间间隔,并将该表包括在查询中以创建您自己的警报 drftr有一个预览功能,为您提供数据集中每个表的上次修改时间 select * from yo

目前我有大约1000个表,其中我需要跟踪各种bigquery数据集中的大约500个表,并生成一个报告或创建一个dashboard。这样,如果一个表没有刷新,我们就可以监控并迅速采取行动


有人能告诉我如何在使用Bigquery插槽最少的情况下做到这一点。

我认为您应该能够查询上次修改时间,如下所示:

然后,您可以添加一个表,该表具有要更新的表所允许的最大时间间隔,并将该表包括在查询中以创建您自己的警报


drftr

有一个预览功能,为您提供数据集中每个表的上次修改时间

select *
from yourDataset.INFORMATION_SCHEMA.PARTITIONS;