Python 2.7画像URLの正規表現

Question

正規表現を使用してURLからすべての画像をダウンロードしようとしています。

私は現在だけで画像のURLを必要とする、私は現在、これは任意の画像のURLを見つけていない

def urlimage(text): 
    '''finds image url''' 
    imageurl = [] 
    imageurl = re.findall(r'https?:\/\/.*\.(?:png|jpg)', text) 
    return imageurl 

を使用しています。 私の正規表現に問題があるのですか、それとも私はこの間違いを起こしていますか？

Answer 1

コメントに記載されているように、相対URLは、場合によってはBeautifulSoupなどのようなものを使用することでやりにくくなります。サイトはその後、彼らはどちらかのプロトコル（のような彼らのマークアップで//example.com/image.pngを含まなくてもよいhttpとhttpsの両方を介して提供している場合それは、言っ

それではあなたはこのような何かにあなたの正規表現を微調整したいと思います：。

def get_url_images_in_text(text): 
    '''finds image urls''' 
    return re.findall(r'(?:http\:|https\:)?\/\/.*\.(?:png|jpg)', text) 

私はあなたがやろうとしていると思うものの完全な例：

import re 
import requests 

def get_url_images_in_text(text): 
    '''finds image urls''' 
    urls = [] 
    results = re.findall(r'(?:http\:|https\:)?\/\/.*\.(?:png|jpg)', text) 
    for x in results: 
     if not x.startswith('http:'): 
     x = 'http:' + x 
     urls.append(x) 

    return urls 

def get_images_from_url(url): 
    resp = requests.get(url) 
    urls = get_url_images_in_text(resp.text) 
    print('urls', urls) 

if __name__ == '__main__': 
    get_images_from_url('http://stackoverflow.com') 

は印刷されます：

（ 'のURL'、 [U 'http://cdn.sstatic.net/Sites/stackoverflow/img/apple-touch-icon.png' U 'http://cdn.sstatic.net/Sites/stackoverflow/img/apple-touch-icon@2.png' U 'http://i.stack.imgur.com/tKsDb.png' U 'http://i.stack.imgur.com/6HFc3.png' U 'http://i.stack.imgur.com/aABck.png' U 'http://i.stack.imgur.com/aABck.png' U 'http://i.stack.imgur.com/tKsDb.png'、 U 'http://i.stack.imgur.com/tKsDb.png']）