Python 3でsys.stdoutエンコーディングを設定するには？ Pythonの2のデフォルトの出力エンコーディングを設定

Question

は、周知のイディオムである：

sys.stdout = codecs.getwriter("utf-8")(sys.stdout) 

これは、UTF-8で出力を符号化するコーデックライタのsys.stdoutオブジェクトをラップします。 sys.stdout.write()はstrを期待するが、符号化の結果はbytesあり、codecsが元sys.stdoutに符号化されたバイトを書き込みしようとするとエラーが発生するため

しかし、この技術は、Python 3で動作しません。

これをPython 3で行う正しい方法は何ですか？

Answer 1

のPython 3.1はsys.stdoutのドキュメント内のノートで、io.TextIOBase.detach()を追加しました：

標準ストリームは、デフォルトではテキストモードです。これらにバイナリデータを書き込みまたは読み込むには、基礎となるバイナリバッファを使用します。たとえば、stdoutにバイトを書き込むには、sys.stdout.buffer.write(b'abc')を使用します。 io.TextIOBase.detach()ストリームを使用すると、デフォルトでバイナリにすることができます。この関数は、バイナリにstdinとstdout設定：したがって

def make_streams_binary(): 
    sys.stdin = sys.stdin.detach() 
    sys.stdout = sys.stdout.detach() 

、以降のPythonの3.1に対応するイディオム：

sys.stdout = codecs.getwriter("utf-8")(sys.stdout.detach()) 

Answer 2

sys.stdoutのはそのためのPython 3.テキストモードでありますそれに直接unicodeを書いてください。Python 2のイディオムはもはや必要ありません。

これは、Python 2で失敗する

：

>>> import sys 
>>> sys.stdout.write(u"ûnicöde") 
Traceback (most recent call last): 
    File "<stdin>", line 1, in <module> 
UnicodeEncodeError: 'ascii' codec can't encode character u'\xfb' in position 0: ordinal not in range(128) 

しかし、それは、Python 3でちょうどダンディ作品：

>>> import sys 
>>> sys.stdout.write("Ûnicöde") 
Ûnicöde7 

今、あなたのPythonがあなたのstdoutsエンコーディングが実際に何であるか知っていない場合それは別の問題です。Pythonのビルドにはおそらくそうです。 Pythonの2のデフォルトの出力エンコーディングを設定

Answer 3

は、よく知られているイディオム

イークです！これはPython 2のよく知られたイディオムですか？それは私に危険なミスのように見えます。

stdoutにバイナリを書き込もうとするスクリプトを間違えてしまうことがあります（たとえば、画像を返すCGIスクリプトの場合に必要です）。バイトと文字は全く異なる動物です。文字だけを取るものでバイトを受け入れるように指定されたインタフェースをサルパッチするのは良い考えではありません。

一般にCGIとHTTPはバイトで明示的に動作します。あなたはバイトをsys.stdoutに送るべきです。 Python 3では、sys.stdout.buffer.writeを使用して直接バイトを送信することを意味します。 charsetパラメータに一致するようにページコンテンツをエンコードすることは、アプリケーションのより高いレベルで処理する必要があります（バイナリではなくテキストコンテンツを返す場合）。これはまた、printがCGIにはうってつけでないことを意味します。

（混乱に追加するには、wsgirefのCGIHandlerのは不可能そのようにCGIためにWSGIを展開すること、ごく最近までpy3kに切断された。PEP 3333とPython 3.2ではこれが最終的に実行可能である。）

Answer 4

IこれはPythonがされた後sys.stdoutをスワップあまりトラブルがある -

すでに示唆したものに代替ソリューションを Pythonが私の使用を開始し、変数 前PYTHONIOENCODING環境を設定することである

、同じエラーの解決策を探している間、このスレッドを見つけました初期化済み：

PYTHONIOENCODING=utf-8:surrogateescape python3 somescript.py 

Pythonコードを編集する必要がないという利点があります。 detach()を使用して

Answer 5

は、それが終了直前に標準出力を閉じようとしたときに警告を表示するには、インタプリタが発生します。

Exception ignored in: <_io.TextIOWrapper mode='w' encoding='UTF-8'> 
ValueError: underlying buffer has been detached 

は代わりに、これは私のためにうまく働いた：

default_out = io.TextIOWrapper(sys.stdout.buffer, encoding='utf-8') 

（そして、のもちろん、stdoutの代わりにdefault_outに書き込んでください）

Answer 6

他の回答はcodecsですが、私のための点の作品：

import sys 
sys.stdout = open(sys.stdout.fileno(), mode='w', encoding='utf8', buffering=1) 
print("日本語") 
# Also works with other methods of writing to stdout: 
sys.stdout.write("日本語\n") 
sys.stdout.buffer.write("日本語\n".encode()) 

これは私がPYTHONIOENCODING="ascii"でそれを実行した場合でも動作します。