Encryption 使用Hadoop加密

Encryption 使用Hadoop加密,encryption,hadoop,hdfs,cloudera,Encryption,Hadoop,Hdfs,Cloudera,Cloudera文档说Hadoop不支持。是否可以将硬件加密的硬盘驱动器与Hadoop一起使用?如果您在驱动器上安装了文件系统,Hadoop就可以使用该驱动器。HDFS将其数据存储在普通OS文件系统中。Hadoop不知道驱动器是否加密,也不会在意。Hadoop不直接支持加密,但可以使用压缩编解码器进行加密/解密。有关加密和HDFS的更多详细信息 关于基于h/w的加密,我认为Hadoop应该能够处理它。正如Spike提到的,HDFS与任何其他Java应用程序一样,将其数据存储在普通的OS文件系统中

Cloudera文档说Hadoop不支持。是否可以将硬件加密的硬盘驱动器与Hadoop一起使用?

如果您在驱动器上安装了文件系统,Hadoop就可以使用该驱动器。HDFS将其数据存储在普通OS文件系统中。Hadoop不知道驱动器是否加密,也不会在意。

Hadoop不直接支持加密,但可以使用压缩编解码器进行加密/解密。有关加密和HDFS的更多详细信息

关于基于h/w的加密,我认为Hadoop应该能够处理它。正如Spike提到的,HDFS与任何其他Java应用程序一样,将其数据存储在普通的OS文件系统中。仅供参考,MapR使用直接I/O提高HDFS性能。

可用于在每个单独的Hadoop节点上进行每个文件的加密。设置起来相当繁琐,但肯定可以做到

提供基于eCryptfs的产品,通过加密保护“大数据”,并与多家Hadoop和NoSQL供应商合作

Gazzang基于云的大数据加密平台有助于 组织透明地加密存储在云中或云上的数据 使用高级密钥管理和基于过程的访问控制 列表,并帮助满足安全性和法规遵从性要求


充分披露:我是该网站的作者之一,目前也是该网站的维护者。我还是首席架构师和首席开发人员。

另请参阅英特尔的Rhino。还没有开源


今年我在加州斯特拉塔科夫与英特尔公司进行了交谈,我很确定他们不打算开源(他们正在出售)