apache-pig

0熱

1答えて

hdfsモードでapache pigの次のコマンドを使用してデータをロードしようとしました： test = LOAD /user/swap/done2.csv PigStorage（ '、'）as（ID ：long、国：chararray、運送業者：float、ClickDate：chararray、デバイス：chararray、OS：chararray、ユーザI：chararray、出版社ID：

0熱

1答えて

豚ラテン必要データがありませんcommom

のData1 1,a 2,b 3,c 4,d 5,e Data2の 1,a 2,g 3,j 4,b 5,c 6,d 7,e スクリプトで a = load '/tmp/data/data1' using PigStorage(',') as (timestamp:chararray,constant:chararray); b = load '/tmp/data/da

0熱

1答えて

2列目をそれぞれ列と定格に変換したい。 2次元マトリクス

"User-ID";"ISBN";"Book-Rating" "276725";"034545104X";"0" "276726";"0155061224";"5" "276727";"0446520802";"0" 出力リレーがあろうように： "034545104X";"0155061224";"0446520802" "276725" "0" "276726" "5

0熱

1答えて

Apache Pigの特定の関係でのみUNION操作を実行できません

解決できなかったPigのUNIONに問題があります。同じスクリプトでいくつかの関係についてUNIONを実行するとうまくいくが、それ以外の関係ではうまくいきません。私はUNIONを2つの関係、すなわちoneとtwoで実行しています。そして、これらの2つの関係と他の多くの関係の多くでは機能しません。ここにスクリプトがあります： A = LOAD '/home/biadmin/datasets/Data

0熱

1答えて

豚を使用して都市、年、および夏時間を除外しますか？

レコード： Pune,2007,31.5 Pune,2007,30.5 Pune,2008,34.5 Blre,2009,13.0 Blre,2009,10.5 スクリプト私が使用している： grunt> A = LOAD '/home/cloudera/temp' using PigStorage(',') AS (city:chararray,year:int,temp:doubl

0熱

1答えて

Apacheの豚学生マークス平均計算

私はフォーマットのデータセットを持って、 student_id|name|subject|marks 2 John English 50 3 mark Maths 50 3 mark English 50 このデータはHDFSにロードされ、私がどうなるか、豚を使用して、各学生のための全被験者の平均値を計算する必要がありますこれを行うための豚の方法論。学生によって

0熱

1答えて

は私が不均一に空白のテキストファイルを持っていると私はpig.Myファイルを使用してCSVファイルとして保存したい豚

にtxtファイルから不均一な空白を削除すると、フォーマットの 2013 210 0 2878 -7543 4 29 20 116 2013 210 10 2875 -7538 4 32 20 116 2013 210 20 2872 -7533 4 29 20 116 2013 210 30 2870 -7527 4 29 20 115 2013 210 40 2867 -752

1熱

1答えて

ifileのreadaheadに失敗しました。EBADF：行列加算中にファイル記述子が正しくありません。

行列加算のためにApache Pigでコードを記述しようとしています。 matrixM = LOAD 'Mmatrix.txt' USING PigStorage (',') AS (i,j,v); matrixN = LOAD 'Nmatrix.txt' USING PigStorage (',') AS (i,j,v); unionres = UNION matrixM, matrixN;

0熱

1答えて

Apache Pigで同じリレーションの行（アイテム）をマージする方法

私はapache pigを初めて使っています。私は以下のようなデータを持っています。 tempdata = (linsys4f-PORT42-0211201516244460,dnis=3007047505) (linsys4f PORT42-0211201516244460,incoming_tfn=8778816235,tfn_location=Ashburn Avaya,ivr_lo

0熱

1答えて

Hadoop PIG（ネストされたJson）

私はユーザーによる評価の映画のリストを持っています。 {"_id":59607,"title":"King Corn (2007)", "genres":["Documentary"], "ratings":[ {"userId":1860,"rating":3}, {"userId":9970,"rating":3.5}, {"userId":