我想从我的代码中执行 s3-distcp 。
我的项目基于 java,我使用 aws-java-sdk 来启动集群并将 hadoop 作业提交到集群。
由于需要将作业的输出复制到 s3,我正在寻找一个 sdk,它将接收源/目标路径作为参数并使用我设置的凭据执行 s3-distcp。
谢谢,
我想从我的代码中执行 s3-distcp 。
我的项目基于 java,我使用 aws-java-sdk 来启动集群并将 hadoop 作业提交到集群。
由于需要将作业的输出复制到 s3,我正在寻找一个 sdk,它将接收源/目标路径作为参数并使用我设置的凭据执行 s3-distcp。
谢谢,