Google bigquery BigQuery流式数据不能立即使用

Google bigquery BigQuery流式数据不能立即使用,google-bigquery,Google Bigquery,由于几天的时间,我流式传输到bigquery的一些数据在成功插入后无法立即在bigquery web ui中可用(通常情况下是这样) 我的用例包括使用以下命令插入数千行: bigquery.tabledata().insertAll(...) 将数据流插入表格的结果如下: (我也在检查插入错误,以确保符合说明): bigquery web ui中可用的行总数与插入的行总数不同 如果有任何帮助,我将不胜感激 Bigquery项目详细信息: Project ID : favorable-beac

由于几天的时间,我流式传输到bigquery的一些数据在成功插入后无法立即在bigquery web ui中可用(通常情况下是这样)

我的用例包括使用以下命令插入数千行:

bigquery.tabledata().insertAll(...)
将数据流插入表格的结果如下: (我也在检查插入错误,以确保符合说明):

bigquery web ui中可用的行总数与插入的行总数不同

如果有任何帮助,我将不胜感激

Bigquery项目详细信息:

Project ID  : favorable-beach-87616
Table : mtp_UA_xxxx_1_20150410
项目对google库的依赖关系:

compile 'com.google.api-client:google-api-client:1.19.0'
compile 'com.google.http-client:google-http-client:1.19.0'
compile 'com.google.http-client:google-http-client-jackson2:1.19.0'
compile 'com.google.oauth-client:google-oauth-client:1.19.0'
compile 'com.google.oauth-client:google-oauth-client-servlet:1.19.0'
compile 'com.google.apis:google-api-services-bigquery:v2-rev171-1.19.0'
compile 'com.google.api-client:google-api-client:1.17.0-rc'

非常感谢您的帮助

当您说web UI中可用的行总数时,是指在表的“详细信息”窗格中显示的行数,还是执行
SELECT COUNT(*)
查询时返回的行数

如果是前者,这是意料之中的,因为该计数器仅返回已刷新到长期存储的行数(与流数据最初写入的短期存储缓冲区相反)。这是公认的混乱,我们正在努力解决


如果是后者,则查询中不会显示行,这更令人担忧。如果是这种情况,请让我们知道,我们将进行调查。

我说的是通过“选择计数(*)查询得到的总行数。谢谢您的帮助。您好,我有一个类似的问题,我使用Python insertAll()将数据流式传输到表中,一旦我将数据转储到表中(返回成功),我就无法使用web UI查看数据,但如果我运行查询来查询目标表,它将返回我插入的行,只是不会显示在web UI和表摘要上(表格摘要显示该表格中有0行)@CharlesChow-请提出另一个问题;我只是在搜索其他内容时意外看到了你的评论。
compile 'com.google.api-client:google-api-client:1.19.0'
compile 'com.google.http-client:google-http-client:1.19.0'
compile 'com.google.http-client:google-http-client-jackson2:1.19.0'
compile 'com.google.oauth-client:google-oauth-client:1.19.0'
compile 'com.google.oauth-client:google-oauth-client-servlet:1.19.0'
compile 'com.google.apis:google-api-services-bigquery:v2-rev171-1.19.0'
compile 'com.google.api-client:google-api-client:1.17.0-rc'