Pythonを使用してウェブサイトにログインできません

Question

私はPythonリクエストとBeautifulSoupを使ってWebスクレーパーを試してみました。私はいくつかのソリューションをオンラインで使ってこのウェブサイトにログインしようとしましたが、できませんでした。

この理由の1つは、フォーム要素が従来の方式を使用していないことです。ウェブサイトコードのスニペットが以下に掲載されています。どんな助けもありがとう。

This image contains the code of the form element

編集1：私はこれにかなり新しいですので、非常に基本ステップで立ち往生されています。私は自分のログイン資格情報のキー値を変更しようとしましたが、それは役に立たないようです。

My code as of now

Answer 1

あなたはそれが動作することができますなぜいくつかの理由を持つことができます。あなたのコードも高く評価されます。最初の理由は私の心に来る人にはうまくいかず、それはGoogle ChromeやFirefoxのような実際のブラウザをエミュレートする必要があるからです。

実際には、ユーザーエージェントが必要です。デフォルトでは、Pythonユーザエージェントのリクエストはtrue user agentのようにはなりません。

weebサイトのクッキーをキャッチして、ログインに使用する必要がある場合。

あなたはそれを行うには多くの解決策があります。私は2つを説明することができます： - Seleniumは、ブラウザの動作を生成します。 - リクエストを使用しますが、ブラウザのようなすべてのオプションを使用します：ユーザーエージェントを生成し、Cookieも使用します（サーバーはあなたが真のユーザーだと考える必要があります）。

Answer 2

Dayle、質問にあなたのアプローチを投稿する必要があります。

私は、この方法により、クローラを作った

response = urlopen(page_url) 
    if 'text/html' in response.getheader('Content-Type'): 
     print("hello 123") 
     html_bytes = response.read() 
     html_string = html_bytes.decode("utf-8") 

とBeautifulSoupにこのhtml_stringを可決しました。

soup = BeautifulSoup(html_string, 'html.parser') 
html_string = soup.prettify() 

これははるかに簡単だと思います。