erasure-code

0熱

1答えて

ちょっと、私はイライザのエンコーディングの概念をかなり新しくしています。私はたいていReed-solomonについてしか読んでいませんが、必要なものに合わないのです。大量のシステムリソースを必要とせずに、大きなデータに対してパリティシャードを作成できる手法を見つける必要があります。例えば：私は32ギガバイトのビデオを保存したいは、8つの4ギガバイトの破片に切断しました。私はこれに対して3つの

0熱

1答えて

HDFS消去符号化ファイル作成

私は、Apache HDFSでファイルを作成する方法（例えばcopyFromLocalを使用）を探しており、その過程でErasure Codingポリシーを設定しています。 this pageによれば、hdfs ec --setPolicy -path <folder> -policy RS-6-3-1024kを使用して、ディレクトリとその子のポリシーを設定できます。親のポリシーに関係なく、ファイ