会社のイントラネットからのみアクセス可能な企業Webサイトから情報を抽出するクローラを作成します。 私のラップトップにインストールされているブラウザからそのWebサイトにアクセスできますが、他のWebクライアント(curl、nodejs要求など)からこれを実行しようとするとHTTP401が表示されます。他のWebクライアントからではなく、ブラウザからWindowsイントラネット上のHTTP認証を受け取ります。
私はプロキシと基本認証に関連するさまざまな設定で試してみましたが、動作する解決策が見つかりませんでした。
私はWindowsシステム上でIEネットワーク設定がここに関わっている可能性があるので、私は netsh winhttp import proxy source =ie
でIEからネットワークプロキシ設定を取得しようとしましたが、何の違いもありませんでした。
私は何が欠けていますか?どのようにすれば、ローカルのブラウザが他のウェブクライアントではなくそのウェブサイトにアクセスできるのかを判断できますか?私はChromeデベロッパーツールのリクエストを見てきましたが、そこに役立つものは何も見つかりませんでした。