ファイルPythonからURLを読む

Question

はtxtファイルのURLを読み取ることができません 私はtxtのURLアドレスを1つずつ読み込んで開きたいので、urlアドレスのソースからregexでタイトルのタイトルを取得したい エラーメッセージ：

Traceback (most recent call last): File "Mypy.py", line 14, in UrlsOpen = urllib2.urlopen(listSplit) File "/usr/lib/python2.7/urllib2.py", line 154, in urlopen return opener.open(url, data, timeout) File "/usr/lib/python2.7/urllib2.py", line 420, in open req.timeout = timeout AttributeError: 'list' object has no attribute 'timeout'

Mypy.py

#!/usr/bin/env python 
# -*- coding: utf-8 -*- 
import re 
import requests 
import urllib2 
import threading 

UrlListFile = open("Url.txt","r") 
UrlListRead = UrlListFile.read() 
UrlListFile.close() 
listSplit = UrlListRead.split('\r\n') 


    UrlsOpen = urllib2.urlopen(listSplit) 
    ReadSource = UrlsOpen.read().decode('utf-8') 
    regex = '<title.*?>(.+?)</title>' 
    comp = re.compile(regex) 
    links = re.findall(comp,ReadSource) 
    for i in links: 
     SaveDataFiles = open("SaveDataMyFile.txt","w") 
     SaveDataFiles.write(i) 
    SaveDataFiles.close() 

Answer 1

あなたがurllib2.urlopen(listSplit) listSplitを呼び出していることがstring or request objectにする必要があるリストです。リスト全体をurlopenに渡す代わりに、listSplitを反復処理するのは簡単な修正です。

また、re.findall()は、検索された各ReadSourceのリストを返します。あなたは、この方法はいくつか処理できます。

私はちょうどリスト

websites = [ [link, link], [link], [link, link, link]

のリストを作成し、両方のリストを反復処理によってそれを処理することを選びました。これにより、各WebサイトからのURLのリストごとに個別の処理を行うことができるようになります（別のファイルに置くなど...）。

また、だけではなく、その後のリンクが含まれている別のリストのリンクを含むようにwebsiteリストを平らにできます

links = [link, link, link, link]

#!/usr/bin/env python 
# -*- coding: utf-8 -*- 
import re 
import urllib2 
from pprint import pprint 

UrlListFile = open("Url.txt", "r") 
UrlListRead = UrlListFile.read() 
UrlListFile.close() 
listSplit = UrlListRead.splitlines() 
pprint(listSplit) 
regex = '<title.*?>(.+?)</title>' 
comp = re.compile(regex) 
websites = [] 
for url in listSplit: 
    UrlsOpen = urllib2.urlopen(url) 
    ReadSource = UrlsOpen.read().decode('utf-8') 
    websites.append(re.findall(comp, ReadSource)) 

with open("SaveDataMyFile.txt", "w") as SaveDataFiles: 
    for website in websites: 
     for link in website: 
      pprint(link) 
      SaveDataFiles.write(link.encode('utf-8')) 
    SaveDataFiles.close()