スパークプロセスでシャッフルが発生したときに、メモリ使用量が多すぎます。 図は、700MBのデータを使用し、3つのrdd.mapを使用した場合のメモリメトリックです。 は enter image description here と次の図は、メモリメトリックである(I監視ツールとして神経節を使用し、私のクラスタのちょうど3つのノードを示し、X軸は時間系列は、y軸はメモリ使用量を手段)すべて、あなた
はは、私が作成したカードのリストに機能 Data.Random.Extras からパッケージをシャッフルします。私のコード:私は検索としようと時間を費やし No instance for (Show (Data.RVar.RVar [Card]))
arising from use of 'print'
Possible fix:
Add an instance declar
https://vestride.github.io/Shuffle/プラグインを使用してフィードをシャッフルしますが、このプラグインをより多くの機能をロードしてコラボレーションしようとすると問題が発生します。 また、私はシャッフルjsを探してさらにデータをロードしていました。私のコードではこれがうまくいくと答えていましたが、そうではありません。私の負荷より機能で var shuffleme =