scraper

1熱

1答えて

私はBeautifulSoupを使ってPythonスクリプトをスクラップしています。 re.findall('stream:\/\/.+', link) のようなリンクを見つけるように設計されています：これは私のコードです stream://987cds9c8ujru56236te2ys28u99u2s をしかし、それはまた、このような文字列を返します。 stream://987cds9c

0熱

1答えて

python、スクラブを使用してウェブサイトにログインするのに失敗しました

私はindeedに治療を使用して接続しようとしています。この部分は、scrapy docとcode reviewというトピックの例を参考にして、ログインしようとしました。 class IndeedSpider(scrapy.Spider): name = 'indeed' allowed_domains = ['indeed.com' ] star

0熱

1答えて

はどのように複数のスルーURLにそう私はできたループを航空会社コードを渡すことができるようにしたいと思い、このサイト

http://www.iata.org/publications/Pages/code-search.aspx 上のWebフォームへのURLを渡します。私は "？airlinecode = AL"などのようなものを渡すことを望んでいて、結果のためにhtmlをスクラップしていました。私はhtmlソースを見てきましたが、それは私の理解を超えています。誰かがこれを解決できるかどうか鑑賞してください。

0熱

1答えて

私は、このリンクでウェブサイトをこすりしようとしていますのpython

でサッカーサイトからJSONデータを取得：、私は概要からデータを取得したい https://www.whoscored.com/Players/11119/Show/Lionel-Messi 守備、攻撃タブと私はこれを試してみました： import requests # This is the json data link i wish to get from the defensive ta

0熱

1答えて

シンプルなHTML Domを使用してウェブサイトからデータを削る

私はgithubのウェブサイト（https://rushwallet.com/）のAPIを完成させる作業をしています。私はPHPを使用しており、このURLからウォレットアドレスを取得しようとしています：https://rushwallet.com/#n3GjsndjdCURphhsqJ4mQH7AjiXlGI。誰でも私を助けることができますか？これまで私のコードは： $url = "http

0熱

1答えて

Express res.render関数を使用して配列を渡すときに 'undefined'を取得する

初めて基本ノードアプリケーションで試してみます。 console.log（eventsArray）でこのファイル（> node index.js）を実行してテストすると、アレイはコマンドウィンドウのスクレーパーモジュールからのデータを正常に出力し、スクレーパーモジュールが機能しています。 eventsArray = ['this'、 'is'、 'test'、 'array'];を設定した場合、

0熱

1答えて

CheerioがIMGを見つけられませんsrc

私のcheerioコードは機能していないようです。指定されたリンクのimgWrap div内にある<img>タグからsrcを取得しようとしています。 ...私は .imgWrap imgとして .imgWrapを書き換えると findを削除しようとしましたが、それは私が $(element).children()または $(element).html()をすれば、私は私が期待する結果を参照してくだ

0熱

1答えて

どのように私はpython 2.7 keyerrorを修正できますか？（srcapeのfacebookページを試してみる）

私は研究のためにFacebookページを掻き集めなければならないし、これには問題がある。私はPythonの初心者です。ここで https://github.com/precognox-admin/FBscraper/blob/master/src/scrapeFB.pyは、コードの一部です：私はgithubの上のPythonコードを見つけ Traceback (most recent call l

0熱

1答えて

node.jsのリクエスト関数からの戻り値を取得する方法

私はサイトスクレーパーを作成しましたが、このリクエスト関数から他の関数で文字列を使用したいと思います。パイプの仕組みがわからない request(realAnswer, function (error, response, html) { if (!error && response.statusCode == 200) { var $ = cheerio.load(ht