作業を掻き集めるためのURLの解析

Question

一部のURLを解析してサイトにアクセスし、さらにデータをスクラップしたいと考えています。

基本的に私の現在のコードは次のとおりです。

http://intelligencesquaredus.org/debates/past-debates/start=9 
http://intelligencesquaredus.org/debates/past-debates/start=18 
http://intelligencesquaredus.org/debates/past-debates/start=27 

結果が、私はリンクがすべてのヘルプ

http://intelligencesquaredus.org/debates/past-debates?start=9

になりたい生み出す

i = 9 
while(i < 118): 
    dict = {'start': i} 
    url1 = urllib.urlencode(dict) 
    url2 = urlparse.urljoin('http://intelligencesquaredus.org/debates/past-debates ', url1) 
    print url2 
    i = i + 9 

いただければ幸いです。事前

Answer 1

使用で ありがとう：上記のスニペットで

url2=('?'.join(('http://intelligencesquaredus.org/debates/past-debates '+url1).split(' '))) 

は、あなたは文字列としてURLを取り、それ（url1）に必要な文字列を追加しています。

次に、スペースで分割して、後で?と結合する2つの要素のリストを取得します。

代替（delozによって提案さ）：

base_url = "http://intelligencesquaredus.org/debates/past-debates" 
for a in([''.join((base_url, '?', 'start=', str(i))) for i in range(9, 118, 9)]): 
    print(a)