web-scraping

1熱

1答えて

私はブラジル国債の現在の価格であるhttp://www.tesouro.fazenda.gov.br/tesouro-direto-precos-e-taxas-dos-titulosのテーブルを（BASHを使用して）スクラップしようとしています。私は同じテーブルを与えるスクリプトを開発して、端末出力にフォーマットして、エイリアスに割り当てて、価格をすばやく入手できるようにしたい（他の人も同様に使

1熱

1答えて

rvestを使用して検索結果のURLからID名を抽出するにはどうすればよいですか？（CSSセレクターが機能しません）

検索結果ページ（link here）から商品アイテム名のリストを抽出しようとしています。運と html_attr('href') ： character(0) を返し library(rvest) results <- read_html('https://www.fishersci.com/us/en/catalog/search/products?keyword=sodium+hyd

1熱

1答えて

Javaスクリプトで保護されたHackerearthページをスクラップする方法は？

私は要素を検査行うと、私は、しかし、ソースの表示を行う上での取得 https://www.hackerearth.com/@babe 、例えば、hackerearthページで解決される問題を取得したいです私はクラスダークウェイト700を見つけることができません。私はコンテンツがJavaスクリプトからロードされると思います。したがって、私はPythonのbs4ライブラリを使用すると、私はNone

0熱

1答えて

誤った結果を防ぐためにエラーを効率的に処理するにはどうすればよいですか？

私はいくつかのウェブサイトでいくつかのアイデンティティを特定するためにvbaにいくつかのコードを書いています。コードが正しい順序であれば、コードはうまくいきます。リンクが有効であれば、名前はaタグと一致し、最終的に正規表現はIDを見つけることができます。 3つのうちの3つまたは3つのいずれかが不良検索である場合、スクリプトはエラーをスローします。私はすでに下のスクリプトでエラーが発生する位置を指定

0熱

1答えて

スクラップしたURLを変更してその内線番号を変更する

私はプログラミングに慣れていないし、ウェブサイトから画像やPDFをダウンロードしようとしている。ソースコードでは、必要な項目は部分的なURLを持つオプションタグにあります。これらの項目はドロップダウンメニューにリストされ、iframeに表示されますが、各項目は完全なURLを使用して独自のページで開くことができます。これまでのところ、私のコードはオプションを見つけ、ページのベースアドレスに部分的な

1熱

1答えて

クラスでdiv要素を取得するjsoup

私はJsoup解析を初めて利用しています。これを行う方法は、実際にはdivタグでページを検査することです私が必要とするものに関連しています。まず、私もでも私ならば、第二（企業のリストを与えることになっているもの）、私のコンソルHTML出力にこれらのDIVタグを見つけることができません Document doc = Jsoup.connect("https://angel.co/companie

0熱

1答えて

PythonでウェブスクラップしながらHTMLで適切なタグを見つける

私はbitcoin、ethの現在の価格を表示していましたが、別のウェブサイトとhttps://cryptowat.ch/をスクラップしていましたが、ライブ価格を保存するタグは見つかりません。私はdivタグを解析するとき、それは私が私が理解からのpython <div class="rankings-col__header__segment"><h2>BTC</h2><weak>usd </weak

0熱

1答えて

フラッシュベースのウェブサイトをスクラップする方法は？

私は約何千もの写真をウェブサイトからダウンロードしようとしていましたが、スクリプトの知識はまだありません。これは非常に痛いので、助けが必要です。私がコンテンツをダウンロードしようとしているウェブサイトはフラッシュベースのウェブサイトなので、通常のHTMLのようなものは取りつかれません。「Web Scraper」というChromeウェブエクステンションを使用しようとしましたが、ウェブページ上で何も

0熱

1答えて

rvestはスクレイプされたテーブルからヘッダのみを返します

以下は、rvestを使用してスクレイプされた目的のテーブルからのヘッダのみを返します。 library(rvest) url <-("https://www.baseball-reference.com/draft/?year_ID=2017&draft_round=1&draft_type=junreg&query_type=year_round&from_type_jc=0&from_ty