web-scraping

0熱

1答えて

私の質問は、HTMLをスクレープするためにbs4を使用すると、スクラップできない場合は::beforeのようになります。私は会社がページ内のどのSDGに貢献しているか知りたいと思います。 https://www.unglobalcompact.org/participation/report/cop/create-and-submit/active/395091 ただし、チェックマークはソースコ

0熱

1答えて

（短） - POSTデータは、バイトまたは反復可能バイトでなければなりません。タイプがstrではありません

.csvファイルからリンクをフィードインし、各リンクから情報を抜き取り、.csvの他のカラムに書き込むだけです。私は数日間頭を掻いてきました。他の誰かがここに何が間違っているのを見ることができる？エラーがBeautifulSoup()のパラメータでなければなりませんsoup def scrape_data(csv_file): writer = csv.writer(csv_file) rea

1熱

1答えて

BeautifulSoupの `class =" accordion-toggle main-row "を持つ` tr`親タグの `td`を見つける方法は？

私はこのような異なるclass whith複数trタグを持っている： <tr class="accordion-toggle main-row" data-parent="#OrderPackages" data-target=".packageDetails1" data-toggle="collapse" id="package1"> <td>01629046</td><td>

-1熱

1答えて

スクラップモバイルウェブページの仕様

名前、価格、仕様などのウェブページに掲載されているすべてのモバイルの詳細を取得しようとしています。私は名前と価格を取得することに成功し、仕様についてはうんざりしていました。携帯電話の24のリストがあります、私は仕様を取得しようとすると、それは一緒にすべての仕様を取得します。私は彼らが属している電話に応じてそれらを分ける適切な方法を見つけることができません。どんな援助も訴えられるでしょう。 http

0熱

1答えて

Javaでスクラップ/抽出、coinmarketcap.comからの結果

Javaでページ上部からコインマーケットのキャップの量を抽出する必要があります（例：市場キャップ：$ 306,020,249,332）。添付の写真をご覧ください。私は、JavaのEclipseでjsoupライブラリを使用していたが、ボリュームを抽出しませんでした。 Jsoupは他の属性のみを抽出します。おそらく問題はJavaスクリプトライブラリからです。また、私は成功せず、HTMLユニットを使

1熱

1答えて

<dl>タグからHTMLテキストを掻き集める

私は議題を含むウェブサイトからダウンロードした説明リストを持っており、成功していないdata.frameを作成しようとしています。記述リストは、以下の構造を有する： <dl> <dt> (which contains a for day) <dd> (which contains a for hour and a

1熱

1答えて

scrapy-splashで従属ドロップダウンを選択する

私は次のウェブサイトを削っています：https://www.climatempo.com.br/climatologia/558/saopaulo-sp。 2番目のドロップダウンメニューには最初のものに応じて2番目のメニューがあるので、私はscrapyとsplashを使ってscrapy-splashを選択します。最初に状態を選択し、次に都市を選択することで、場所の変更を自動化する必要があります。

5熱

1答えて

Python：ブラウザの破片でチェックボックスをオフにするにはどうすればいいですか？

カートに以下の商品を追加したら：http://www.supremenewyork.com/shop/accessories/wau85w4km/cxv3ybp1wチェックアウトページ：https://www.supremenewyork.com/checkoutに、私がBrowser’s splinterでチェックアウトしようとしている利用規約のチェックボックスがありますが、それはできません：

0熱

1答えて

「詳細を読み込む」ボタンをクリックしてスクレープJS

私はロードボタンを押してウェブサイトをスクラップしようとしていますが、悪夢の中で再帰機能を実行することはできません。もし、あなたがテーブル内のデータをスクラップしたい場合は、この方法または任意の他のアイデア