Python - リクエストでWebスクレイピングのクッキーを有効にするにはどうすればいいですか？

Question

私はローカルコンピュータ上で完璧に動作するウェブサイトをスクラップするためのスクリプトを持っています。同じスクリプトをサーバーにデプロイすると、ターゲットサーバーからデータを取得できません。

デバッグが有効になっていて、ターゲットサーバーが「Cookieを有効にする必要があります」というエラーメッセージが表示されます。

以下はコードスニペットです。 Pythonバージョン2.7.3は、ローカルコンピュータとサーバーの両方で実行されています。

解決策をご理解いただきありがとうございます。

import requests 

BASE_URL = 'https://targetsite.com' 

CLIENT = requests.session() 

detail_page = CLIENT.get(BASE_URL, headers=HEADERS, verify=False, allow_redirects=True) 

Answer 1

ターゲットサーバーに問題があるようです。私は問題が解決されるよりも、ユーザーエージェントを検索エンジンに変更しました。私はそれがクッキーとは関係ないが、ターゲットサーバは間違ったエラーコードを与えていることも理解しています。