2016-08-24 7 views
2

Hive-Tezでクエリを実行した後でMap-Reduceログの解釈を取得したいですか? INFOの後の行は何を伝えていますか? ここで私はあなたが投稿したログは、DAGの実行ログでサンプルHive-Tezのログを減らす

INFO : Session is already open 
INFO : Dag name: SELECT a.Model...) 
INFO : Tez session was closed. Reopening... 
INFO : Session re-established. 
INFO : 
INFO : Status: Running (Executing on YARN cluster with App id application_14708112341234_1234) 

INFO : Map 1: -/- Map 3: -/- Map 4: -/- Map 7: -/- Reducer 2: 0/15  Reducer 5: 0/26 Reducer 6: 0/13 
INFO : Map 1: -/- Map 3: 0/118 Map 4: 0/118 Map 7: 0/1 Reducer 2: 0/15 Reducer 5: 0/26 Reducer 6: 0/13 
INFO : Map 1: 0/118 Map 3: 0/118 Map 4: 0/118 Map 7: 0/1 Reducer 2: 0/15 Reducer 5: 0/26 Reducer 6: 0/13 
INFO : Map 1: 0/118 Map 3: 0/118 Map 4: 0(+5)/118 Map 7: 0/1 Reducer 2: 0/15 Reducer 5: 0/26 Reducer 6: 0/13 
INFO : Map 1: 0/118 Map 3: 0(+5)/118 Map 4: 0(+7)/118 Map 7: 0(+1)/1 Reducer 2: 0/15 Reducer 5: 0/26 Reducer 6: 0/13 
INFO : Map 1: 0/118 Map 3: 0(+15)/118 Map 4: 0(+18)/118 Map 7: 0(+1)/1 Reducer 2: 0/15 Reducer 5: 0/26 Reducer 6: 0/13 

答えて

3

を添付しています。 DAGは マップ1、マップ3、マップ4、マップ7つのマッパ頂点と減速からなる:減速2、減速機5、減速6

INFO : Map 1: -/-これは頂点が初期化されていない、マッパーの数が計算されないことを意味しますまだ。

Map 4: 0(+7)/118 - これは完全に118のマッパーが存在し、そのうち7つが並行して実行されていることを意味し、0は完了し、118-7 = 111は保留中です。

Reducer 2: 0/15 - This means that totally there are 15 reducers, 0 of them are running, 0 of them are completed (15 reducers pending). 

マイナスの数字(そのようなあなたの例ではありません)=私が探していただけで何を失敗したか、殺さマッパーまたは減速の数

+0

!あなたはこれのための情報源を持っていますか? – Dimpl

+0

私はこれに関する情報源がありません。しかし、あなたは簡単にtezの実行中にジョブトラッカーを見て確認することができます。 – leftjoin

関連する問題