サイトで認証が必要な場合、Pythonを使用してhtmlを取得するにはどうすればよいですか？

Question

認証が必要ない場合、lxmlモジュールを使用してWebサイトのhtmlを取得できます。しかし、それが必要なときに、私はどのように 'ユーザー名'と 'パスワード'をPythonを使って入力するのですか？

Answer 1

これは、使用される認証方法によって大きく異なります。 HTTP Basic Authの場合は、リクエストとともにこれらのヘッダーを渡すことができるはずです。ウェブページベースのログインを使用している場合は、そのリクエストを自動化して、次のリクエストで使用されているクッキーやセッショントークンを返す必要があります。