Pythonスクリプト（テストではありません）を介してWebページにフォーム値を入力してください

Question

ターゲットページにフォーム値を入力し、Pythonでボタンをクリックする必要があります。私はSeleniumとWindmillを見てきましたが、これらはテストフレームワークです。テストはしていません。私はプログラムで第三者のウェブサイトにログインしようとしており、データベースに挿入する必要があるファイルをダウンロードして解析します。テストフレームワークの問題は、ブラウザのインス​​タンスを起動することです。私は、私が望むページを検索するために毎日実行するようにスケジュールすることができるスクリプトがほしいだけです。これを行う方法は？あなたがサンプルを提出Mechanize

フォームを探している

Answer 1

：

import re 
from mechanize import Browser 

br = Browser() 
br.open("http://www.example.com/") 
br.select_form(name="order") 
# Browser passes through unknown attributes (including methods) 
# to the selected HTMLForm (from ClientForm). 
br["cheeses"] = ["mozzarella", "caerphilly"] # (the method here is __setitem__) 
response = br.submit() # submit current form 

Answer 2

あなたはそうのようにこれを行うには、標準urllibライブラリを使用することができます。

import urllib 

urllib.urlretrieve("http://www.google.com/", "somefile.html", lambda x,y,z:0, urllib.urlencode({"username": "xxx", "password": "pass"})) 

Answer 3

Mechanizeの例を示唆しているようです働くフォームを送信した後、一部のコンテンツが生成されている場合は、検索エンジンで、あなたはそれを得るよう経由して、

br["kw"] = "rowling" # (the method here is __setitem__) 

：

print response.read() 

Answer 4

あり、あなたがテキストを入力する必要があります入力フィールドでは、のようなものを使用A Mechanizeのを使用して、この例に見て：それは基本的なアイデアを与えるだろう。

#!/usr/bin/python 
import re 
from mechanize import Browser 
br = Browser() 

# Ignore robots.txt 
br.set_handle_robots(False) 
# Google demands a user-agent that isn't a robot 
br.addheaders = [('User-agent', 'Firefox')] 

# Retrieve the Google home page, saving the response 
br.open("http://google.com") 

# Select the search box and search for 'foo' 
br.select_form('f') 
br.form[ 'q' ] = 'foo' 

# Get the search results 
br.submit() 

# Find the link to foofighters.com; why did we run a search? 
resp = None 
for link in br.links(): 
    siteMatch = re.compile('www.foofighters.com').search(link.url) 
    if siteMatch: 
     resp = br.follow_link(link) 
     break 

# Print the site 
content = resp.get_data() 
print content