Google cloud platform 在Gcloud中相当于snapshotdiff和createsnapshot的Hdfs

我们正在将现有的工作从Hadoop迁移到GCP。

---

在我们现有的hadoop代码中，我遇到了两个hdfs函数createSnapshot和snapshotDiff。我们在GCP中有类似的项目吗？

表格格式项目

Delta Lake

和

Apache Iceberg

现已在最新版本的Cloud Dataproc（1.5版预览）中提供

有了这些表格格式，您现在可以使用Dataproc处理需要：

• 酸性事务
• 数据版本控制（又称时间旅行）
• 模式实施
• 模式演化等等

数据版本控制提供历史记录中数据的快照。您可以查找数据历史记录并回滚到历史记录中特定时间或版本的数据

---

请参阅。我希望它能有所帮助。

您是否使用Cloud Dataproc？是的。我们确实使用CloudDataProc。