ALS.checkpointIntervalの方が高いか低いですか？

Question

ALS.checkpointIntervalを設定する場合、それを設定する際にどのような配慮が必要ですか？より高いまたはより低い間隔はどういう意味ですか？

Answer 1

ALS.checkpointInterval値は、いくつの番号の繰り返しを参照します。キャッシュのチェックポイントが行われます。
など。 intervalを10に設定すると、10回の繰り返しごとにキャッシュにチェックポイントが設定されます。

チェックポイント設定は、回復（ノードが失敗した場合）および長い系列によるStackOverflow例外に役立ちます。また、ディスク上の一時的なシャッフルファイルを削除するのに役立ちます。これは、ALSの反復回数が多い場合に重要になります。

デフォルト値はです。だからあなたのシステムのメモリに応じて、より低いまたはより高い値を今すぐ​​に設定することができます