どのようにHadoopのHortonworksで

Question

をbanned.usersを削除する私はHDP Hortonworks 2.5.3クラスタを持って、糸中のMapReduceジョブがエラーで失敗しました取得されています

java.io.IOException: DistCp failure: Job job_1498784032636_0015 has failed: Application application_1498784032636_0015 failed 2 times due to AM Container for appattempt_1498784032636_0015_000002 exited with exitCode: -1000 For more detailed output, check the application tracking page: http://asterdart0005.labs.teradata.com:8088/cluster/app/application_1498784032636_0015 Then click on links to logs of each attempt. Diagnostics: Application application_1498784032636_0015 initialization failed (exitCode=255) with output: main : command provided 0 main : run as user is hdfs main : requested yarn user is hdfs Requested user hdfs is banned

後、私はグーグル、HDFSのユーザーが禁止されているようです

yarn.nodemanager.local-dirs=/hadoop/yarn/local 
yarn.nodemanager.log-dirs=/hadoop/yarn/log 
yarn.nodemanager.linux-container-executor.group=hadoop 
banned.users=hdfs,yarn,mapred,bin 
min.user.id=500 

私はすべてのノードでファイルを変更した（名前ノード：ユーザは、各ノード上のファイル/etc/hadoop/conf/container-executor.cfgにおける構成に従って、ここでファイルの内容であります、エッジノードおよびデータノード）を含む。

yarn.nodemanager.local-dirs=/hadoop/yarn/local 
yarn.nodemanager.log-dirs=/hadoop/yarn/log 
yarn.nodemanager.linux-container-executor.group=hadoop 
#banned.users=hdfs,yarn,mapred,bin 
min.user.id=500 

アンバリでHDFS、YARN、MapReduce2のすべてのサービスを再起動しました。私のジョブを再起動しても同じエラーで失敗し、/etc/hadoop/conf/container-executor.cfgの内容がチェックされ、次のような初期段階：

yarn.nodemanager.local-dirs=/hadoop/yarn/local 
yarn.nodemanager.log-dirs=/hadoop/yarn/log 
yarn.nodemanager.linux-container-executor.group=hadoop 
banned.users=hdfs,yarn,mapred,bin 
min.user.id=500 

ここでの解決方法は何ですか？禁止されたユーザーリストからユーザーを削除しますか？

Answer 1

最初に留意すべき点は、banned_users行をコメントすることができず、正しいユーザーをbanned_usersリストの値に設定することです。 （つまり、ユーザーhdfsを禁止しない場合は、banned.users=hdfs,yarn,mapred,binをbanned.users=yarn,mapred,binに変更してください）。あなたがbanned_usersのリストをコメントすると、とにかくデフォルトでhdfs, yarn and mapredが禁止されます。

もう1つのことは、以下の手順に従ってすべてのノードに変更を伝播できます。

1. ゴーAmbari・サーバ・ノード に禁止されたユーザを設定する/var/lib/ambari-server/resources/common-services/YARN/<version>/package/templates/container-executor.cfg.j2を変更します。

2. 再起動AmbariサーバーとすべてのAmbariエージェント応答@Shubhangiため