GCP中的Azure数据工厂

GCP中的Azure数据工厂,azure,google-cloud-platform,azure-data-factory-2,Azure,Google Cloud Platform,Azure Data Factory 2,我有一个场景,需要将多个“本地”Microsoft SQL server数据库从业务数据中心同步到云存储(我们称之为blob存储) 过去,我使用Azure Data Factory本地客户端绕过防火墙考虑,不需要VPN,直接将数据交付到Azure Blob存储 我需要使用谷歌工具(目标谷歌云存储)做同样的事情。是否有不需要VPN的等效GCP工具?如果没有,有什么低价工具推荐吗?要将文件从on-prem发送到谷歌云存储(GCS),您需要两件事 已安装在本地环境中 a。保守秘密 然后,按照以下步

我有一个场景,需要将多个“本地”Microsoft SQL server数据库从业务数据中心同步到云存储(我们称之为blob存储)

过去,我使用Azure Data Factory本地客户端绕过防火墙考虑,不需要VPN,直接将数据交付到Azure Blob存储


我需要使用谷歌工具(目标谷歌云存储)做同样的事情。是否有不需要VPN的等效GCP工具?如果没有,有什么低价工具推荐吗?

要将文件从on-prem发送到谷歌云存储(GCS),您需要两件事

  • 已安装在本地环境中
  • a。保守秘密
然后,按照以下步骤操作

  • 验证您的
    gcloud auth activate服务帐户--密钥文件=
  • 在本地提取数据
  • 用于将文件发送到云

连接经过身份验证,不需要VPN。

要模拟ADF解决方案,您需要一个在本地运行的进程,该进程可以连接到云存储。因此,这将是GCP的第一项要求——一项安装在本地的服务。如果做不到这一点,那么就有任意数量的脚本或代码库解决方案可以从SQL Server读取并写入GCP存储。这些将是定制的构建,但如果您只是复制完整的表,那么就不会太复杂了。