0
:distcp:私は、次のコードをdistcp経由でS3にHDFSから巨大なファイルをコピーしようとしていS3にHDFSからコピーファイル(スカラまたはJavaで使用する方法)
val files:Array[String] = new Array[String](2)
files(0) = "/****/in.zip"
val in = new Path(new URI("/**/in.zip"))
val out = new Path(new URI("***/out.zip"))
var distcpOpt = new DistCpOptions(in,out)
ToolRunner.run(new DistCp(new Configuration(),distcpOpt), files)
私が何かをしようとしましたthis linkに似ています。
誰でもこれを前にしました、お手伝いください。