私はpythonスタンドアロンクラスタでpython 2.7を使用しています。ローカルpythonスクリプトをリモートスパークマスタに接続
私はpythonスクリプトを実行している同じマシンでマスターを起動します。それはスムーズに動作します。
リモートマシン上でマスタを起動し、ローカルマシン上でsparkコンテキストを起動して、リモートスパークマスタにアクセスしようとします。何も起こりませんし、私はタスクがリソースを取得していないと言ってマッサージを取得します。
私はマスターのUIにアクセスします。私は仕事を見ますが、何もそれで起こる、それはちょうどそこにある。
ローカルpythonスクリプトを使用してリモートスパークマスターにアクセスするにはどうすればよいですか?
ありがとうございました。
EDIT: これを行うには、クラスタモード(クライアントモードではない)でクラスタを実行する必要がありますが、現在はstandalone mode does not support this for python applicationが見つかりました。
アイデア?