Warning: file_get_contents(/data/phpspider/zhask/data//catemap/0/amazon-s3/2.json): failed to open stream: No such file or directory in /data/phpspider/zhask/libs/function.php on line 167

Warning: Invalid argument supplied for foreach() in /data/phpspider/zhask/libs/tag.function.php on line 1116

Notice: Undefined index: in /data/phpspider/zhask/libs/function.php on line 180

Warning: array_chunk() expects parameter 1 to be array, null given in /data/phpspider/zhask/libs/function.php on line 181
Amazon s3 将数据从不变的s3存储桶移动到DataRicks上的增量格式_Amazon S3_Delta_Aws Databricks - Fatal编程技术网
Fatal编程技术网
  • amazon-s3/
  • Amazon s3 将数据从不变的s3存储桶移动到DataRicks上的增量格式

Amazon s3 将数据从不变的s3存储桶移动到DataRicks上的增量格式

amazon-s3

Amazon s3 将数据从不变的s3存储桶移动到DataRicks上的增量格式,amazon-s3,delta,aws-databricks,Amazon S3,Delta,Aws Databricks,我是delta lake的新手，正在尝试将存储在S3上的常用拼花文件转换为delta。我们的问题是，原来的S3存储桶是只读的。 每次加载时，我们都会用增量数据加载这个bucket。我的问题是，将原始表转换为增量表的最佳策略是什么 我应该读取增量数据并加载到增量表吗 或者直接尝试将新拼花地板文件复制到delta。 还是其他方法

我是delta lake的新手，正在尝试将存储在S3上的常用拼花文件转换为delta。我们的问题是，原来的S3存储桶是只读的。 每次加载时，我们都会用增量数据加载这个bucket。我的问题是，将原始表转换为增量表的最佳策略是什么

  • 我应该读取增量数据并加载到增量表吗
  • 或者直接尝试将新拼花地板文件复制到delta。 还是其他方法