是否有s3distcp的开源版本?

时间:2014-03-31 17:09:57

标签: hadoop amazon-web-services amazon-s3 elastic-map-reduce

我很乐意使用s3distcp将数据从S3存储桶复制到S3存储桶但是我需要使用外部专有加密机制来确保数据在静止时加密(保留密钥给自己以便亚马逊无法解密)

我很想做一个git clone并创建我自己的s3distcp(带有外部加密/解密库的钩子)。

我用Google搜索并发现了潜在的https://github.com/libin/s3distcp 但它不是一个亚马逊帐户(显然)并且看起来没有记录/更新。

1 个答案:

答案 0 :(得分:1)

我构建了一个在Node.js中运行的工具,用于将数据从存储桶复制到存储桶。

https://github.com/Homefinder/bucketCloner

它使用AWS JavaScript SDK并不是很复杂。您可以根据自己的需要轻松修改它,假设您当然还有此需要。