復元可能な分散データセットは永久にファイルとして保存できますか？

Question

RDD上のすべての変換をファイルとして保存して、必要に応じてそれらを参照できるようにしたいと思います。 私が見つけたRDDの言葉は、いつもメモリに作成されていることを話しています。ドライブに保存したり、ファイルとして保存したりできますか？ はいの場合は、それを説明するオンライン記事へのリンクがどのように役立つでしょうか。

Answer 1

はい、もちろんです！ここで

だけランダムDatabricks link私が見つかりました：

RDDさんは、ディスクに保存するための方法で構築されたいくつかを持っています。一度ファイルになると、Hadoopデータベースの多くは、特定の形式であれば、ファイルから直接データを大量に読み込むことができます。