hadoop

1熱

1答えて

私のクラスタ内の各ノードにAmbariエージェントを設定しようとしていますが、Ambariウィザードを再トレースしてこの問題を解決しようとすると、私はこのエラーを取得する： ========================== Running setup agent script... ========================== Command start time 2017-1

11熱

1答えて

ハイブには動的ピボット機能があります

ハイブにはダイナミックピボット機能がありますか？私は定期的なピボット（すなわちhere）を見つけることができますが、それらはハードコードされたピボット（実行時に知られているすべての値）ではなく、動的ではありません（実行時に決定されるすべての値）。誰かが共有することができるユーザー定義コードが存在する場合、それは感謝します。

0熱

1答えて

Eclipse酸素用hadoopプラグインをインストール

Eclipse用のハーププラグインをインストールしようとしていますが、正しく動作させることができません。プロジェクトを減らすためにマップを作成するオプションがありません。 hadoop eclipseプラグインのインストール方法を教えてください。私は新しいソフトウェア機能をインストールすることができません - hadoop-eclipse-plugin-2.6.0.jarをダウンロードしましたが、

1熱

1答えて

実行時にhadoopページランクエラーが発生する

私はhadoopを自分のVMwareにインストールし、jarファイルのページランクを設計しました。次のコマンドを実行します。 hadoop jar PageRank-1.0.0.jar PageRankDriver init input output 2、次のエラーが発生します。 Failing this attempt.Diagnostics: [2017-12-01 12:55:58.278]

0熱

1答えて

失敗アズカバンスパーク仕事を失敗

ユースケースの代わりに成功、最終的な地位を持っていますジョブの最終ステータスはFAILEDです実際の結果： HadoopのRMは、ジョブの最終状態が正常であると述べ誰もがそれを固定することができます方法を知っていますか？

2熱

1答えて

キャッシュされたRDDにはどのくらいのメモリが割り当てられていますか？

私は6GBのメモリを持つ5つのワーカーノードクラスタを持っています（Sparkエクゼキュータメモリは4608GBに設定されています）。 Sparkが私のエグゼクティブの一人が5.0 GB以上のメモリを使用しようとしていると言って、メモリが不足しています。各エグゼキュータが5 GBのメモリを取得する場合は、クラスタ全体に25 GBのメモリが必要です。 my spark用applicationのbeg

0熱

1答えて

Oracleのインパラにクエリの変換

私たちは、私はインパラSQLへのOracle SQLで書かれている次のクエリをひそかにしようとしています、オラクルからのHadoopに移行されます。 CASE WHEN UPPER(table1.ACC_NBR) = LOWER(table1.ACC_NBR) THEN SUBSTR(table1.ACC_NBR,5,1)||'-'||SUBSTR(table1.ACC_NBR,8,2)||'-'

0熱

1答えて

Hadoop StreamingでPython mapreduceを実行するには

Apache Hadoopで、与えられた入力ファイルの素数の平均合計を数えるmapreduceプログラムを実行しようとしています。これは私のマッパー import sys for word in sys.stdin: print(word) であると私は、次のコマンドでそれを実行すると、これは、今リデューサー import sys primes = [] for word i

0熱

1答えて

csvデータをテーブルにロードするHive SQLのJavaエラーInvocationTargetException

テーブルにデータを読み込むことができないため、Hive SQLを使用しています。このバグを修正する方法を教えてくださいメタデータにテーブルを作成するにはテーブルへのデータのロード - CREATE TABLE db1.test_table_file3( Col1 INT,Col2 SMALLINT,Col3 SMALLINT) COMMENT 'test_table_file2' ROW F