urllib2でURLを読み込むときにTCP_NODELAYフラグを設定するには？私はロードのWebページのためのurllib2のを使用しています

Question

、私のコードは次のとおりです。

httpRequest = urllib2.Request("http:/www....com") 
pageContent = urllib2.urlopen(httpRequest) 
pageContent.readline() 

私はTCP_NODELAYを設定するには、ソケットのプロパティのホールドを取得できますか？

私は機能を使用することになり、通常のソケットで

：

socket.setsockopt(socket.IPPROTO_TCP, socket.TCP_NODELAY, 1) 

Answer 1

あなたが使用するソケットに、このような低レベルのプロパティにアクセスする必要がある場合、あなたはいくつかのオブジェクトをオーバーロードする必要があります。

まず、あなたが標準ライブラリに行うことを、HTTPHandlerのサブクラスを作成する必要があります：

class HTTPHandler(AbstractHTTPHandler): 

    def http_open(self, req): 
     return self.do_open(httplib.HTTPConnection, req) 

    http_request = AbstractHTTPHandler.do_request_ 

あなたが見ることができるように、それは、接続を開くためにHTTPConnectionを使用しています...あなたは持っていますそれを無効にする;）connect()メソッドをアップグレードします。 urllib2.build_openerは、このために作られ、

class LowLevelHTTPConnection(httplib.HTTPConnection): 

    def connect(self): 
     httplib.HTTPConnection.connect(self) 
     self.sock.setsockopt(socket.IPPROTO_TCP, socket.TCP_NODELAY, 1) 


class LowLevelHTTPHandler(HTTPHandler): 

    def http_open(self, req): 
     return self.do_open(LowLevelHTTPConnection, req) 

urllib2のは、あなたがそれを使用し、いくつかのハンドラをサブクラス化することを可能にするのに十分なスマートです：このような

何かが良いスタートでなければなりません

urllib2.install_opener(urllib2.build_opener(LowLevelHTTPHandler)) # tell urllib2 to use your HTTPHandler in replacement of the standard HTTPHandler 
httpRequest = urllib2.Request("http:/www....com") 
pageContent = urllib2.urlopen(httpRequest) 
pageContent.readline() 

Answer 2

リクエストの場合、クラスはrequest.packages.urllib3にあるようです。 2つのクラス、 HTTPConnection、およびHTTPSConnectionがあります。彼らは、モジュールトップレベルの場所でmonkeypatchableする必要があります：

from requests.packages.urllib3 import connectionpool 

_HTTPConnection = connectionpool.HTTPConnection 
_HTTPSConnection = connectionpool.HTTPSConnection 

class HTTPConnection(_HTTPConnection): 
    def connect(self): 
     _HTTPConnection.connect(self) 
     self.sock.setsockopt(socket.IPPROTO_TCP, socket.TCP_NODELAY, 1) 

class HTTPSConnection(_HTTPSConnection): 
    def connect(self): 
     _HTTPSConnection.connect(self) 
     self.sock.setsockopt(socket.IPPROTO_TCP, socket.TCP_NODELAY, 1) 

connectionpool.HTTPConnection = HTTPConnection 
connectionpool.HTTPSConnection = HTTPSConnection 

Answer 3

urllib2を使用する必要がありますか？

また、TCP_NODELAYオプションが設定されたhttplib2を使用することもできます。

https://code.google.com/p/httplib2/

それはあなたのプロジェクトに依存関係が追加されますが、サルのパッチ未満脆いようです。