ハイドープ設定でs3a設定を正しく設定する方法は？

Question

aws資格情報を取得できない、または資格情報をロードできません...

ハイドープ設定でs3a認証情報を明示的に設定する方法はありますか？

Answer 1

S3Aは比較的新しい実装（およびHadoopの2.7から正常に動作する）であるとして、あなたはHadoopの設定で二組のプロパティを設定する必要があります -

conf.set("fs.s3a.access.key", access_key); 
    conf.set("fs.s3a.secret.key", secret_key); 
    conf.set("fs.s3a.awsAccessKeyId", access_key); 
    conf.set("fs.s3a.awsSecretAccessKey", secret_key); 

を（CONFは、Hadoopの構成である）

理由がありますバージョン間で命名規則が変更され、安全面にあること - 両方を設定すること