scrapy

-2熱

1答えて

をデコードすることができ、私はscrapyを使用してWebページからデータを抽出しようとしています...と、すべてのデータでは、JavaScript <script type="text/javascript"> // Globals var ANUNTURI = [ { "ID": "2750801", "Data": "Azi 11:16", "Zile_piata": "146", "Z

0熱

1答えて

Scrapyを使用してサイト全体のすべてのURLを取得します

人！私はSEOの目的でサイト全体の内部URLをすべて取得しようとしていますが、最近私はこのタスクで私を助けるためにScrapyを発見しました。しかし、私のコードは常にエラーを返します： 2017-10-11 10:32:00 [scrapy.core.engine] INFO: Spider opened 2017-10-11 10:32:00 [scrapy.extensions.logst

2熱

1答えて

治療中の遅延要求

異なる遅延で同じURLを繰り返し削っていきたいと思います。問題を研究した後、適切な解決策は、構文解析に何かを使用することでした。 nextreq = scrapy.Request(url, dont_filter=True) d = defer.Deferred() delay = 1 reactor.callLater(delay, d.callback, nextreq) yield

0熱

1答えて

迷惑メールのログインに失敗しました

私はScrapyを使用してウェブサイトにログインしようとしています。私は正常に他のウェブサイトのためにこれをやったが、私はこの時間にトラブルを抱えているようだと私はなぜわからない。添付ファイルは、このコードを実行したときのレスポンスのスクリーンショットと、ログインしようとしているページの検査です。 import scrapy clas

0熱

1答えて

scrapyを使ってpythonでリストされたtdタグのリストに日付を表示するには？

<div class="fullwidth singleCalender"><table border="0" cellpadding="4" cellspacing="0"> <tbody> <tr style="display: table-row;"> <th colspan="7" style="text-align: right; font-weight: normal; pa

0熱

1答えて

治療FormRequestは投稿をリクエストできません

コンテンツのリストの説明を取得しようとしています。それはJavaScriptです。彼らは私にその情報を与えるためにmethod = 'POST'を使います。私はhtmlでウェブサイトを調べようとします。それらの記述については何もありません。スクリプトのみです。ページに（onClick）がロードされると、そのHTMLの記述内容が表示されます。しかし、治療のシェルではありません。 General:

-1熱

1答えて

どのようにスクラップを使用してPythonの 'a'タグからテキストを取得するには？

<div class="breadcrumbs pt10 pb10"> <a>Location :</a> "National Harbor , Maryland" <br> <a href="#" class="type">Venue : </a> "Gaylord National Resort & Convention Center " </div>

-1熱

1答えて

スクラップマルチパートフォームデータリクエスト

サイトからオーダーを解析したい。 ajax経由でロードしているリクエストとそのリクエストは次のようになります。 -----------------------------1662842698634843362034232373 Content-Disposition: form-data; name="query" { orders(skip: 30, limit: 30, filter: {le

0熱

1答えて

関数から別の関数への引数の受け渡し

parse_page関数内にwhileループがあり、それが限界に達するまでブレーキしたくありません。私は関数parse_pageからdescriptionに3つの引数を渡してから、description_itemに行きます。そして、それは関数description_itemを解析した後、parse_page関数内のwhileループに戻りたいと思います。これは私のコードの一部です： def p

1熱

1答えて

Scrapy dist-packages/cryptography/hazmat/bindings/_openssl.soで開始することができません

私はUnixとPythonでパッケージをインストールするのが初めてです。私はWindowsのUbuntuでBashに取り組んでいます。は私が使用してインストールScrapyを、学習を開始したい： apt-get install scrapy 私はプロジェクトを作成しようとしているときに、私は次のエラーを取得しています： root > scrapy startproject tutorial