大きな文書を格納するデータベース

Question

分岐した複数のリビジョンを持つ大きな文書を格納するためのデータベースソリューションを提案する人はいますか？コンテンツ全体を部分的に編集することは、文書全体を更新する必要はありません。

私はXMLデータベースを見ていて、それらの適合性について疑問を持っていました。あるいは、おそらくDVCS（Mercurialのようなもの）を使用していました。

Pythonバインディングがあることが望ましいです。

Answer 1

お試しFossil - デルタエンコーディングアルゴリズムがあり、すべてのバージョンを保持しています。これは単一のSQLiteデータベースによってサポートされ、WebベースのUIとコマンドラインUIの両方を備えています。

Answer 2

これは、ストレージの動作と使用例によって異なります。膨大な数の "ドキュメントリビジョン"を保存し、履歴バージョンを保持し、追記型のパターンに従うことを計画している場合は、Hadoop HDFSのようなものを調べる必要があります。これには、（安価な）インフラストラクチャが多く必要ですが、時間が経つにつれてリビジョンやデータを追加し続けることができ、MapReduceアルゴリズムを使用してリビジョンやデータをすばやく参照できるようになります。