Google app engine 如何从GAE数据存储导出BLOB类型字段?

Google app engine 如何从GAE数据存储导出BLOB类型字段?,google-app-engine,google-bigquery,datastore,loaddata,Google App Engine,Google Bigquery,Datastore,Loaddata,因此,我想从GAE数据存储中导出一些数据,这是我尝试的方法: 创建我要导出的类型的云数据存储备份 在Google BigQuery中加载备份 从Google BigQuery导出它 一切正常,但有一个问题,Google BigQuery loader在从云数据存储备份加载数据时忽略Blob类型字段。() 如何实现导出所有类型的字段(包括Blob类型字段)?根据,Blob不能存储在BigQuery中,因为它不是其主要用途,即大数据分析。BigQuery只接受指定的标准SQL数据类型。在任何情况下,

因此,我想从GAE数据存储中导出一些数据,这是我尝试的方法:

  • 创建我要导出的
    类型的
    云数据存储
    备份
  • 在Google BigQuery中加载备份
  • 从Google BigQuery导出它
  • 一切正常,但有一个问题,Google BigQuery loader在从
    云数据存储
    备份加载数据时忽略
    Blob
    类型字段。()


    如何实现导出所有类型的字段(包括Blob类型字段)?

    根据,Blob不能存储在BigQuery中,因为它不是其主要用途,即大数据分析。BigQuery只接受指定的标准SQL数据类型。在任何情况下,根据您的用例和这些blob包含的内容,您可能有一些选择

    由于数据存储的最大行大小为1MB,BigQuery为100MB,因此可以在传输blob之前对其进行转换。另一方面,您可以使用另一种服务(如Google Cloud Storage)将blob存储在那里,并在数据存储数据库中输入对云存储中该文件的引用

    我已经在公共问题跟踪器中为此创建了一个新的跟踪程序,因此您可以在那里跟踪它的进度。但是,此实施没有ETA