scrapy CSS最後の子セレクタがテキストの選択に失敗する

Question

ScrapyフレームワークのCSSセレクタを使用してHTMLの要素を選択/一致させようとしています。しかし、最後の子セレクタで抽出したいフィールドの1つにぶつかりました。

<td class="Table-Standard-AwardName Table-Scholarship-AwardName"> 

<a id="ctl00_ContentPlaceHolder1_ScholarshipDataControl_grvScholarshipSearch_ctl02_hylScholarshipName" class="bold" href="/Scholarships/14123/Family-Bursary,-The">Family Bursary, The</a> 

<br> 

<span>Field of Study:</span> 

EcologyEnvironmental Science 

</td> 

テキスト "EcologyEnvironmental科学は" 私が一致していることである。ここでは

はHTMLです。

私は最後の子は出力が示す「研究分野」をセレクタ使用：

In [3]: response.css('td.Table-Standard-AwardName.Table-Scholarship-AwardName > *:last-child::text').extract_first() 
Out[3]: 'Field of Study:' 

私は他の質問を通して見て、無駄に、nth-last-child() and combined siblingセレクタのような複数の方法を試してみました。助けて！

Answer 1

それはすでにEcologyEnvironmental Scienceテキストはあなたが唯一のこのような何かをしようと、そのテキストを抽出する必要がある理由です、td要素の一部である、と言われていたよう：

values = response.css('.Table-Standard-AwardName.Table-Scholarship-AwardName::text').extract() 
out = next(filter(None, map(methodcaller('strip'), values))) 
# you can assign 'EcologyEnvironmental Science' to your item 

Answer 2

「EcologyEnvironmental Science」は要素（スパン、divなど）ではなく、その内容の一部です（td）。したがって、そのクラスのの直系の子である... > * ...を満たしていません。

CSSを使用してコンテンツの一部のみを選択できるようにするには、以下のような

... 
    <span>Field of Study:</span> 
    <span>EcologyEnvironmental Science</span> 
</td>