Google bigquery BigQuery外部数据源查询配额

Google bigquery BigQuery外部数据源查询配额,google-bigquery,google-cloud-bigtable,Google Bigquery,Google Cloud Bigtable,我用一个Cloud BigTable外部数据源设置了一个BigQuery表。这很好,并且我能够运行将我的BigTable数据连接到其他一些BigQuery数据的查询。但是,当我同时对此表运行过多查询时,会出现以下错误: 作业执行期间遇到错误: 超出速率限制:读取此项目的Cloud Bigtable数据源的并发查询太多。有关详细信息,请参阅 我在链接页面或BigQuery配额和限制页面上找不到任何关于并发查询限制的文档。我没有在这里运行那么多查询—一次最多运行10个查询。以前有人遇到过这种情况吗?

我用一个Cloud BigTable外部数据源设置了一个BigQuery表。这很好,并且我能够运行将我的BigTable数据连接到其他一些BigQuery数据的查询。但是,当我同时对此表运行过多查询时,会出现以下错误:

作业执行期间遇到错误: 超出速率限制:读取此项目的Cloud Bigtable数据源的并发查询太多。有关详细信息,请参阅

我在链接页面或BigQuery配额和限制页面上找不到任何关于并发查询限制的文档。我没有在这里运行那么多查询—一次最多运行10个查询。以前有人遇到过这种情况吗?谁知道实际的并发查询限制是多少

编辑:


因此,人们不必翻阅随附的谷歌罚单,正确答案(截至2018年4月)是4个并发查询。

您更应该查找

以下限制适用于通过运行交互式查询自动创建的查询作业,以及使用jobs.query和query-type jobs.insert方法调用以编程方式提交的作业

按需交互式查询的并发速率限制-50个并发查询 具有从查询缓存返回的结果的查询和干运行查询不计入此限制。您可以使用--dry_run标志或通过在查询作业中设置dryRun属性来指定干运行查询

包含用户定义函数(UDF)的查询的并发速率限制-6个并发查询 包含自定义项的查询的并发速率限制包括交互式查询和批处理查询。包含自定义项的交互式查询也计入交互式查询的并发速率限制


您可以在提供的链接中找到更多信息

针对外部来源的BigQuery表的查询是否算作包含UDF?根据我所看到的,我的限制是6,这是有道理的,但我在文档中没有看到任何关于这方面的信息。不能肯定-但由于基础活动的性质,它很可能有类似的限制。这实际上是一个非常有趣的问题!文档中说:“您可以对该表运行一个查询,就像它是一个本地BigQuery表一样,但要受外部数据源的限制。”()。如果遵循链接(),它会说:“外部数据源的限制与加载作业的限制相同,如配额策略页面上的加载作业部分所述。”。没有提到UDF。加载作业限制!?让我们找一些谷歌的人来研究这个;-)@赫伯特利-我认为你应该不接受这个答案-所以我们有更多的机会让其他人跳出来提供更好的答案。正如格雷厄姆指出的——除了查询作业限制之外——当您查询外部源时,还有一个负载作业限制。仍然-不清楚在您的案例中应用了哪些限制条件。我觉得更可能的是询问工作限制-但这只是我的感觉-我很高兴能确切知道谢谢Elliott,我刚刚提交了一张罚单。另外,StackOverflow不是所有东西的官方文档库吗D