Pigスクリプトで起動されたマッパーとリデューサーの数を確認してください

Question

私はHortonworksのサンドボックスVMを使用してHadoopサービスを実行しています。私はTezモードでフィルタスクリプトを実行しました。 Hiveとは異なり、Pigログ（コンソール）には、実行中のマッパー数&の数に関する情報は表示されません。私は間違った場所を見ていますか？

Answer 1

Tezモードで実行しているときは、マッパーやレデューサーがありません。 TezはタスクのDAG（Directed Acyclic Graph）を使用してデータを処理します。したがって、マッパー/レデューサーは頂点とエッジに置き換えられます。 Ambariを使用している場合、そのジョブの詳細については、「Tez View」を参照してください。さらに、Tez UI（https://tez.apache.org/tez-ui.html）を有効にしてインストールすると、その情報を表示することができます。