hadoop中的distcp在从一个集群传输到另一个集群时加密数据吗

8fq7wneg  于 2021-05-29  发布在  Hadoop
关注(0)|答案(1)|浏览(498)

我想知道distcp是否可以选择在从一个集群传输到另一个集群时加密数据。我知道它确实支持s3集群中的加密,但这与amazon的s3有关。如果我们将纯文本文件从一个集群移动到另一个集群呢。它是加密的还是纯文本的?我们能启用这样的加密吗,如果它支持的话?

pgky5nke

pgky5nke1#

来自hdfs文档:
一旦设置了kms并且正确配置了namenode和hdfs客户机,管理员就可以使用hadoop密钥和hdfs crypto命令行工具来创建加密密钥并设置新的加密区域。通过使用distcp等工具将现有数据复制到新的加密区域,可以对其进行加密。
希望有帮助。

相关问题