PythonでSeleniumを使用してFirefoxでWebページを保存する

Question

SeleniumをPythonに入れて、MacOS Firefoxにウェブページを保存しようとしています。

これまでのところ、私はCOMMAND + SをクリックしてSAVE AS windowをポップアップさせました。 SAVE AS]ボタンをクリックし

1. 変更ファイルのディレクトリ、
2. 変更 ファイルの名前、および
3. ：しかし、

   私はどのように知りません。

誰かに助けてもらえますか？以下は

は私が COMMAND + Sをクリックし、使用を持っているコードです：

ActionChains(browser).key_down(Keys.COMMAND).send_keys("s").key_up(Keys.COMMAND).perform() 

また、私はこの方法を使用する理由は、私が遭遇したということですのUnicodeエンコードエラーときI： -

1. htmlファイルにpage_sourceを書き込み、
2. は、廃棄された情報をcsvファイルに保存します。

htmlファイルへの書き込み：

csv_file_write.writerow(to_write) 

エラー：

UnicodeEncodeError: 'ascii' codec can't encode character u'\xf8' in position 1: ordinal not in range(128)

Answer 1

あなたは、ファイルの保存などのシステムダイアログと対話することはできません

file_object = open(completeName, "w") 
html = browser.page_source 
file_object.write(html) 
file_object.close() 

書き込みcsvファイルへダイアログ。あなたはページのHTMLを保存したい場合は あなたはこのような何かを行うことができます。

page = driver.page_source 
file_ = open('page.html', 'w') 
file_.write(page) 
file_.close() 

Answer 2

何を達成しようとしていることはセレンで行うことは不可能です。開いたダイアログは、セレンが対話できるものではありません。

あなたができることは、page_sourceを収集して、1ページのHTML全体を取得し、これをファイルに保存することです。

import codecs 

completeName = os.path.join(save_path, file_name) 
file_object = codecs.open(completeName, "w", "utf-8") 
html = browser.page_source 
file_object.write(html) 

本当にウェブサイト全体を保存する必要がある場合は、AutoITのようなツールを使用して調べる必要があります。これにより、保存ダイアログとの対話が可能になります。

Answer 3

pyautoguiライブラリでこれを実現できますが、ループ内に複数のページを保存する必要がある場合は、画面上で他のタスクを実行することはできません。

import pyautogui 
import time 
pyautogui.hotkey('ctrl', 's') 
time.sleep(1) 
pyautogui.typewrite("file name") 
time.sleep(1) 
pyautogui.hotkey('enter') 

Answer 4

これは、提供回答RemcoWの完全な、実施例である：

あなたが最初にwebdriverをインストールする必要があり、例えばpip install selenium chromedriver_installer。

#!/usr/bin/env python 
# -*- coding: utf-8 -*- 

# core modules 
import codecs 
import os 

# 3rd party modules 
from selenium import webdriver 


def get_browser(): 
    """Get the browser (a "driver").""" 
    # find the path with 'which chromedriver' 
    path_to_chromedriver = ('/usr/local/bin/chromedriver') 
    browser = webdriver.Chrome(executable_path=path_to_chromedriver) 
    return browser 


save_path = os.path.expanduser('~') 
file_name = 'index.html' 
browser = get_browser() 

url = "https://martin-thoma.com/" 
browser.get(url) 

complete_name = os.path.join(save_path, file_name) 
file_object = codecs.open(complete_name, "w", "utf-8") 
html = browser.page_source 
file_object.write(html) 
browser.close()