Python TensorFlow数据验证和BigQuery

Python TensorFlow数据验证和BigQuery,python,tensorflow,google-bigquery,google-cloud-dataflow,Python,Tensorflow,Google Bigquery,Google Cloud Dataflow,我想使用TensorFlow数据验证来分析和验证数据,以便输入到我的ML模型中。 但是,我的原始数据表位于BigQuery(超过30gb)上,无法将其作为dataframe加载 如何将数据从Bigquery加载到noteboow,以便使用TensorFlow数据验证对其进行分析 我想我可能会使用数据流,但我可以找到一个合适的示例,将所有内容加载到TFRecord文件中,然后将其传递给TF数据验证 您可以找到一个示例,其中他们将数据从BigQuery加载到TFRecord(使用ApacheBeam

我想使用TensorFlow数据验证来分析和验证数据,以便输入到我的ML模型中。 但是,我的原始数据表位于BigQuery(超过30gb)上,无法将其作为dataframe加载

如何将数据从Bigquery加载到noteboow,以便使用TensorFlow数据验证对其进行分析


我想我可能会使用数据流,但我可以找到一个合适的示例,将所有内容加载到TFRecord文件中,然后将其传递给TF数据验证

您可以找到一个示例,其中他们将数据从BigQuery加载到TFRecord(使用ApacheBeam)