エラー：アクセス許可が拒否されました：私はエラーになってるHDFSにAWS S3バケットにコピーしようとしている '/ユーザ

Question

：以下

Permission denied: '/user'

をされた私のスクリプトを

aws s3 sync s3://folder1.folder2/file.json /user/hive/warehouse/my.db/json_table 

助けてください ！

Answer 1

S3 syncは、HDFSパスを認識しません。すべてのS3 properties関連を設定した後

いずれかを使用し、

• hadoop distcp。
• S3DistCp、これはs3distcp.jarを必要とします。
• ファイルが小さい場合は、syncファイルをローカルパスに、copyFromLocalをHDFSにコピーします。