hortonworks-data-platform

0熱

1答えて

Ambari-更新（2.6 Ambari 2.4を）失敗しました - Hadoopのサービスは、私はちょうどHortonworksデータプラットフォームについては、このアップグレードガイドを介して働いていた

もう起動しません。 https://docs.hortonworks.com/HDPDocuments/Ambari-2.6.0.0/bk_ambari-upgrade/bk_ambari-upgrade.pdf Iセクション1で説明したように、すべての手順をしました - 4（Ambariアップグレード）。しかし、今私は、私のサービスがもう始まりません、問題があります！ Ambariは、すべてのホ

0熱

1答えて

コーディネーターを強制終了した後、どのようにしてoozieワークフローを実行させることができますか？

私はしばらくの間oozieと一緒に作業していましたが、私はコーディネーターを殺したがっていましたが、コーディネーターによって開始されたワークフローを殺したくありません。なぜ私はそれをしたいですか？私は、私の仕事が15分に1回実行されなければならないシナリオを持っていますが、現在実行中のインスタンスにロードされている履歴データと、残りのジョブが積み重なっているため、下の写真はその例です。 Oozi

0熱

1答えて

Spark2が1つのノードでのみ動作するのはなぜですか？

私はZeppelinからSpark2を実行しています（HDP 2.6では0.7）、私は何時間も後にクラッシュするidf変換を行っています。これは、マスタと3つのデータノードs1、s2、s3を持つクラスタ上で実行されます。すべてのノードにSpark2クライアントがあり、それぞれに8つのコアと16GBのRAMがあります。私はただ1つのノードs3で5つのエグゼキュータを実行していることに気付きました。

0熱

1答えて

大きなRDDをHiveに書き込む - アンロードメモリをストレージメモリに転送できませんでした

PySparkでいくつかの結合を行い、結果をHiveに保存しようとしています。スニペットは、小さなデータセットで動作しますが、データサイズが大きくなるが、私はエラーの下に取得する場合は、以下は、ソフトウェアバージョン HDFS 2.7.3 ハイブ1000年2月1日 YARN 2.7.3です MapReduce2 2.7.3 Spark2 2.1.1 のPython 3.5.2 Hortonwor

1熱

1答えて

Ambariエージェントが存在しません

私のクラスタ内の各ノードにAmbariエージェントを設定しようとしていますが、Ambariウィザードを再トレースしてこの問題を解決しようとすると、私はこのエラーを取得する： ========================== Running setup agent script... ========================== Command start time 2017-1

-1熱

1答えて

Apache ambariのインストール

私はambariのサーバー+エージェントをインストールしようとしています。私はアンバリについて疑問があります。アンバリをインストールしようとしました。いつもホートンワークとのリンクを取得します私はウブヌ16.0で私自身のhadoopクラスタを持っていることに疑いがあります。 AmbariはHDPのみで動作するのですか、それともカスタム構築されたクラスタでも動作させることは可能ですか？か、

0熱

1答えて

pyspark：Pythonスクリプトを実行してコマンドラインで結果を確認

私はpyspark 1.6.2でpythonスクリプトファイルを実行します（認定トレーニングの理由から古いものです）。 spark-submit --master yarn-cluster s01.py 実行すると、「application_somelongnumberのアプリケーションレポート」が返されます。私が期待していたことは、スクリプトコマンドの出力を示すことでした。私が正しく開発した

0熱

1答えて

Apache flumeとApache stormの違いは何ですか？

Apache flumeとApache stormの違いは何ですか？ストームを使用してログデータをHadoopクラスタに取り込むことは可能ですか？両方ともストリーミングデータに使用されているため、flormの代わりにストームを使用できますか？

0熱

1答えて

HORTONWORKS - HBaseの/フェニックス - WALEditCodec - HBaseの上にフェニックスを実行しようとしているときに、私は、次のエラーが発生します

を逃す：例外＃1： 2017-11-07 12:40:12,620 WARN [RS_LOG_REPLAY_OPS-XXX:16020-0] regionserver.SplitLogWorker: log splitting of WALs/XXX.XXX.XXX.XXX,16020,1507179047656- splitting/XXX.XXX.XXX.XXX%2C16020%2C1