2017-08-25 11 views
1

私はpythonスタンドアロンクラスタでpython 2.7を使用しています。ローカルpythonスクリプトをリモートスパークマスタに接続

私はpythonスクリプトを実行している同じマシンでマスターを起動します。それはスムーズに動作します。

リモートマシン上でマスタを起動し、ローカルマシン上でsparkコンテキストを起動して、リモートスパークマスタにアクセスしようとします。何も起こりませんし、私はタスクがリソースを取得していないと言ってマッサージを取得します。

私はマスターのUIにアクセスします。私は仕事を見ますが、何もそれで起こる、それはちょうどそこにある。

ローカルpythonスクリプトを使用してリモートスパークマスターにアクセスするにはどうすればよいですか?

ありがとうございました。

EDIT: これを行うには、クラスタモード(クライアントモードではない)でクラスタを実行する必要がありますが、現在はstandalone mode does not support this for python applicationが見つかりました。

アイデア?

答えて

1

これを行うにはクラスタモード(クライアントモードではない)でクラスタを実行する必要があります。現在のところ、スタンドアロンモードではこれをサポートしていないhereが見つかりました。

関連する問題