2

我们希望将 Cloudera Hadoop 集群中的 HDFS 数据备份到 Amazon S3。看起来我们可以为此使用 distcp，但不清楚的是数据是否通过加密传输复制到 S3。

是否需要配置某些东西才能启用此功能？

4

1 回答 1

3

我不认为 S3 客户端加密在 Hadoop 中可用。

似乎S3 服务器端加密（在 S3 端加密静态数据）可以从 Hadoop 2.5.0 配置。

要启用它，请在中添加以下属性core-site.xml：

<property>
  <name>fs.s3n.server-side-encryption-algorithm</name>
  <value> AES256 </value>
  <description>
    Specify a server-side encryption algorithm for S3.
    The default is NULL, and the only other currently allowable value is AES256.
  </description>
</property>

有关 S3 服务器端加密Hadoop-10568 的更多信息。

于 2015-02-07T05:39:51.977 回答