tachyon

1熱

1答えて

スパイク・オン・タキオン（alluxio）。フレームサイズ（273247862）が最大長より大きい（16777216）

Alluxioにスパークを展開するためのガイドに従っています。（ "：// localhostを：alluxio 19998/findbugs.xml"）私はヴァル・CCC = sc.textFile、RDD操作を実行するためにalluxioからデータをロードしようとすると ccc.count 誤差は次のように現れる： 16/07/24 23:27:16 INFO logger.type: g

3熱

2答えて

spark RDDをmahout DRMに変換するには？

ScoutsFile（）を使用してMahoutのAlluxioからデータを取得していますが、RDDを起動しています。私のプログラムでは、このスパークRDDをMahout DRMとしてさらに使用しています。したがって、RDDをDRMに変換する必要がありました。だから私の現在のコードは安定しています。

0熱

1答えて

openstackにalluxio1.2をインストールするには

openstackのsparkとhdfsでalluxio1.2をVM centosにインストールしようとしましたが、インストールができません。火花とhdfsは既にインストールされ、動作しています ERROR logger.type (AlluxioMaster.java:main) - Uncaught exception while running Alluxio master, stoppin

0熱

2答えて

AlluxioのSpark javaで複数のファイルを読むのが遅い

AlluxioをローカルのSparkにインストールし、Alluxioのメモリに1000個のファイルを挿入しました。ただし、読み込みファイルが非常に遅いため、Alluxioメモリからのファイル読み込み時間はディスクからの読み込み時間と同等です。私は、ファイルAPIを使用してデータを読む...なぜ File Name Size Block Size In-Memory Persistence Sta

1熱

1答えて

Alluxioのフレームサイズ（）がmax（）より大きいSpark

AlluxioでSparkと奇妙なエラーが発生しました。私はAlluxioからSparkで20.000のファイルを読み、それは動作します。しかし、私はAlluxioからSparkを使って40.000個のファイルを読みました。私はAlluxio 1.2を使用して、1.6.0をスパーク、私は、ファイルAPIを使用してデータを読み込む：FileSystem fs = FileSystem.Factory

1熱

1答えて

Apache IgniteとTachyonの違い

私はApache Igniteの初心者です。IgniteとSparkの統合のために、Igniteはデータがスパークアプリケーション全体で生きるメモリ内の層を提供しているように見えます。これはTachyonメモリ内ファイルシステムとして提供されます。私はIgniteとTachyonの違いは何ですか？私の質問は、メモリ内ファイルシステム（IGFS for ignite）ですか？両者の間のプロとクロン