有开源版本的s3distcp吗?

xmq68pz9  于 2021-06-03  发布在  Hadoop
关注(0)|答案(1)|浏览(438)

我很想使用s3distcp将数据从s3 bucket复制到s3 bucket,但是我需要使用一个外部专有加密机制来确保数据在静止状态下被加密(将密钥留给我自己,以便amazon无法解密)
我想做一个git克隆并创建我自己的s3distcp(带有用于外部加密/解密库的钩子)。
我搜索了一下,发现这里有一个潜力https://github.com/libin/s3distcp 但它不是一个亚马逊帐户(显然),看起来也不像是记录/更新的。

mfuanj7w

mfuanj7w1#

我构建了一个在node.js中运行的工具,将数据从一个存储桶复制到另一个存储桶。
https://github.com/homefinder/bucketcloner
它使用aws javascript sdk,并不复杂。您可以根据自己的目的轻松地修改它,当然前提是您仍然有这种需要。

相关问题