2016-11-05 10 views
0

https://docs.aws.amazon.com/ElasticMapReduce/latest/ManagementGuide/emr-ssh-tunnel-local.htmlに記載されている手順を経て、ローカルポート転送を介してsshトンネルを開き、http://localhost:8157/に行っています。EMR(VPC経由)でSpark UIを表示できますか?

これで、Hadoop/YARNインターフェイスが表示されます。その時点で、[Tracking UI/ApplicationMaster]リンクをクリックし、[このサイトのサーバーDNSが見つかりませんでした]ページが表示されます。

スパークのUIに私を連れて来るAWSのドキュメントhttp://docs.aws.amazon.com/ElasticMapReduce/latest/ReleaseGuide/emr-spark-history.htmlによると、

SparkのUIが表示されないように別の手順がありますか?

答えて

1

最高の経験は、URLとポートを動的にサポートできるように、SSH経由でSOCKSプロキシを使用することです。 https://docs.aws.amazon.com/ElasticMapReduce/latest/ManagementGuide/emr-ssh-tunnel.htmlを見てください。

+0

SOCKSプロキシを開いたら、あなたはどのURLに行くのですか?それは私が見つけることができないものです。 – flybonzai

+0

SOCKSをEMRコンソールに戻すように設定した後、クラスタを選択し、プロキシがセットアップされている場合は、Resource Managerへのハイパーリンクが表示され、アプリケーションURLを選択すると、SparkアプリケーションのSpark UIに正しくリダイレ​​クトされます。 – ChristopherB

関連する問題