ArXivレプリケーションブレインストーミング

Question

arXiv電子プリントアーカイブには、さまざまな科学分野の数テラバイトの論文があります。一部のユーザーは、このデータの完全なコピーを自分のコンピュータで管理したいと思っている人もいれば、最新の論文を特定のカテゴリにダウンロードしたい人もいます。彼らは、何らかの種類の分散ダウンロードシステム（例えば、BitTorrent）を使用して帯域幅の負荷を軽減しようとしている。私はこのすべてをカバーするプログラムや一連のプログラムのアイデアを探しています。

Answer 1

完全なpdfコンテンツはアマゾンクラウドにあります。 PDFファイルの合計サイズがT.

< 1/2 TB

http://arxiv.org/help/bulk_data_s3

ありながら> arXivの上の600K論文で関わる人々の

Answer 2

私の最初のアイデアは、Usenetニュースグループのように見えて、サーバー上のメッセージに無限の永続性があるということです。私はそれがPDFでどれくらいうまく動作するかはわかりません。

Answer 3

arXiv recommends squid httpdアクセラレータモードで正確にこの目的のためです。なぜこれで十分ではないのか？