urllib2.urlopen（）は別の結果を返します

Question

私はPythonプログラムを使用してフォームを記入しようとしていますが、これは特定のサイトではうまく動作しますが、この特定のものではありません。

これはコードですが

query = { 
'adults':'1', 
'children':'0', 
'infants':'0', 
'trip':'RT', 
'deptCode':'LOS', 
'arrvCode':'ABV', 
'searchType':'D', 
'deptYear':'2011', 
'deptMonth':'12', 
'deptDay':'10', 
'retYear':'2011', 
'retMonth':'12', 
'retDay':'11', 
'cabin':'E', 
'currency':'NGN', 
'deptTime':'', 
'arrvTime':'', 
'airlinePref':''} 

encoded = urllib.urlencode(query) 



url = 'http://www.wakanow.com/ng/flights/SearchProcess.aspx?' + encoded 
user_agent = 'Mozilla/4.0 (compatible; MSIE 5.5; Windows NT)' 
headers = { 'User-Agent' : user_agent } 
req = urllib2.Request(url, encoded, headers) 

response = urllib2.urlopen(req) 

print 'RESPONSE:', response 
print 'URL  :', response.geturl() 

headers = response.info() 
print 'DATE :', headers['date'] 
print 'HEADERS :' 
print '---------' 
print headers 

data = response.read() 
print 'LENGTH :', len(data) 
print 'DATA :' 
print '---------' 
print data 

をsnipetそれはすべて正常に動作しますが、私が得る結果は私に正しい結果を与えることを、私は直接WebブラウザにURL全体を入力すると表示されるものではありません。

誰かが私を助けてくれるのはどういう問題なのでしょうか？ urllib2.Requestための第2のパラメータ（data）が設けられている場合

Answer 1

は次にurllib2.urlopen(req)はPOST要求を行います。

使用encodedいずれかのURL（GET）またはurllib2.Request（POST）のようにdataないで、両方すなわち、

いずれかGET要求：

url = 'http://www.wakanow.com/ng/flights/SearchProcess.aspx?' + encoded 
req = urllib2.Request(url, headers=headers) #NOTE: no `encoded` 

またはPOST要求：

url = 'http://www.wakanow.com/ng/flights/SearchProcess.aspx' #NOTE: no `encoded` 
req = urllib2.Request(url, data=encoded, headers=headers) 

Answer 2

あなたはおそらくしているお使いのブラウザではが表示されますが、コード内で実際にはPOSTというURLをクエリデータとし、クエリデータをPOSTデータとしています。あなたはたぶんGETをしたいだけです。

urllib2.Request(url[, data][, headers][, origin_req_host][, unverifiable])

、this pageからのデータは、そのようなデータが必要でない場合は、サーバー、またはNoneに送信するために追加のデータを指定する文字列かもしれません。現在、HTTPリクエストはデータを使用する唯一のリクエストです。データ要求が提供されたときにHTTPリクエストはGETではなくPOSTになります。データは標準アプリケーション/ x-www-form-urlencoded形式のバッファでなければなりません。 urllib.urlencode（）関数は2タプルのマッピングまたはシーケンスを取り、この形式の文字列を返します。

だから、あなたが本当に欲しいもの、である：

req = urllib2.Request(url, headers=headers)

Answer 3

このURLがハングします。あまり重い検索文字列で試してみてください。

そして、あなたはタイムアウトでこれを制御する検討することがあります。

import urllib,urllib2,socket 

timeout = 10 
socket.setdefaulttimeout(timeout)