Apache spark 如何使用Spark加密数据?

Apache spark 如何使用Spark加密数据?,apache-spark,apache-spark-dataset,Apache Spark,Apache Spark Dataset,我有一个用例,当我使用Spark在Azure的Datalake store或Aws bucket等存储中持久化数据时,我希望对数据进行加密。有没有一种使用Spark执行加密的方法?请不要建议使用二进制格式。谢谢 您应该在Azure/S3中加密存储。。。这完全独立于Spark,不过您需要一个身份验证密码才能读写到加密存储中

我有一个用例,当我使用Spark在Azure的Datalake store或Aws bucket等存储中持久化数据时,我希望对数据进行加密。有没有一种使用Spark执行加密的方法?请不要建议使用二进制格式。谢谢

您应该在Azure/S3中加密存储。。。这完全独立于Spark,不过您需要一个身份验证密码才能读写到加密存储中