Djangoで未知のエンコーディングのUnicodeを扱うには？

Question

Django ORMラッパーを使用して、テキストをデータベースに保存します。問題は、このテキストが外部のウェブサイトを掻き集めることによって生成され、何度も間違ったエンコードでリストされているように見えることです。生のバイトを保存したいので、スクラップをやり直すことなく時間が経つにつれてエンコード検出を向上させることができます。しかし、Djangoはすべてがユニコードとして保存されるように思えます。どういうわけか、その周りを回ることはできますか？

Answer 1

例えば、base64にエンコードされたデータを保存することができます。または、ブラウザからHTTPヘッダーを分析しようとすると、そこから適切なエンコードを取得する方が簡単かもしれません。

Answer 2

データを含むファイルを作成します。ファイルへの参照を保持するには、Django models.FileFieldを使用します。

いいえ、大量のI/Oは必要ありません。ファイルが小さければ、2または3のI/Oが追加されます（ディレクトリの読み取り、iノードの読み取り、およびデータの読み取り）。