Spark History UIが動作しません。アンバリ| YARN

Question

私は、HDFS、YARN、ホスト上で動作しているスパークのようなサービスを持つアンバリを使用してハープ・クラスタをセットアップしています。 サンプルspark piをマスター・ヤーンとしてクラスタ・モードで実行すると、アプリケーションは正常に実行され、リソース・マネージャのログから同じものを見ることができます。

しかし、履歴リンクをクリックすると、スパーク履歴UIは表示されません。どのように有効にする/同じを表示するには？

Answer 1

最初に、spark.yarn.historyServer.addressをのspark-defaults.confファイルで検索して、スパーク履歴サーバーが既に設定されているかどうかを確認します。

構成されていない場合は、このリンクは、サーバーの構成に役立つはずですが：すでに設定されている場合は履歴サーバホストがクラスタ内のすべてのノードからアクセス可能であり、また、ポートが開いている場合https://docs.hortonworks.com/HDPDocuments/HDP2/HDP-2.3.6/bk_installing_manually_book/content/ch19s04s01.html

、確認してください。