Webkitクローラはsquidプロキシを使用する必要がありますか？

Question

私はWebkitを使用してクローラを作成していますが、Webkitのキャッシュは何ですか？ Webkitベースのクローラのプロキシとしてsquidを使用する必要がありますか？

Answer 1

QWebKitをお使いですか？ PyQt/PySideはデフォルトでディスクキャッシュを使用しません。キャッシングを有効にするには、QNetworkDiskCacheオブジェクトをQNetworkManagerに設定する必要があります。

webkit.pyモジュールのソースコードをwebscrapingライブラリで見ると、QWebkitでキャッシュを有効にする方法が示されています。