タイトルタグの内容をPythonスクリプトで取得する

Question

Pythonで実際にスクリプトを作成して、指定されたWebページのタイトルタグから内容を取得し、それらをMySQLデータベースに入れたいとします。

私はPythonの経験はほとんどありませんが、これは私のプロジェクトで行う必要があります。どのように私はこれをできるだけ簡単な方法で行うことができますか？

私が尋ねようとしていることを理解できることを願っています。

Answer 1

1. study urllib2ウェブページのダウンロード方法をご覧ください。
2. BeautifulSoupを調べると、HTMLを解析してタイトルを引き出すことができます。
3. Python Database API Specificationを調べて、 のMySQLデータベースに行を挿入します。ここで

---

あなたが始めるためにいくつかのサンプルコードです：

import urllib2 
import BeautifulSoup 
import MySQLdb 

f = urllib2.urlopen('http://www.python.org/') 
soup=BeautifulSoup.BeautifulSoup(f.read()) 
title=soup.find('title') 
print(title.string) 

connection=MySQLdb.connect(
    host='HOST',user='USER', 
    passwd='PASS',db='MYDB') 
cursor=connection.cursor() 

sql='''CREATE TABLE IF NOT EXISTS foo (
      fooid int(11) NOT NULL AUTO_INCREMENT, 
      title varchar(100) NOT NULL, 
      PRIMARY KEY (fooid) 
     )''' 
cursor.execute(sql) 

sql='INSERT INTO foo (title) VALUES (%s)' 
args=[title.string] 
cursor.execute(sql,args) 
cursor.close() 
connection.close() 

Answer 2

urllib2を使用してWebページを開きます。次に、返されたテキストを正規表現で解析してタイトルを取得します。