Google bigquery PybigQuery:将查询切片到特定字节以外的数据
我正在从我的BigQuery获取,如下所示:Google bigquery PybigQuery:将查询切片到特定字节以外的数据,google-bigquery,pybigquery,Google Bigquery,Pybigquery,我正在从我的BigQuery获取,如下所示: def makeAQuery(self, queryString): query_job = self.client.query(queryString) # Make an API request. return query_job.to_dataframe() query_job = self.client.query(queryString, maxDataBytes = 10**6) # Make an
def makeAQuery(self, queryString):
query_job = self.client.query(queryString) # Make an API request.
return query_job.to_dataframe()
query_job = self.client.query(queryString, maxDataBytes = 10**6) # Make an API request.
其中self.client
为:
self.client = bigquery.Client()
现在我真正想做的是设置一个数据阈值,如下所示:
def makeAQuery(self, queryString):
query_job = self.client.query(queryString) # Make an API request.
return query_job.to_dataframe()
query_job = self.client.query(queryString, maxDataBytes = 10**6) # Make an API request.
类似于我想要丢弃所有数据的东西。
我发现的一个方法是在我的SQL查询结束时使用LIMIT 100000
,但这将是非常不确定的,好像我的SQL列大约是100,然后数据大小将是100*100000,这是我不想要的。。。所以我只是想知道是否有办法将数据限制在某个阈值之外