Python Scrapy：Xpathが存在しない場合はスキップする

Question

私はこのコードを使用して、数百ページを削っています。しかし、ときどきaのxpathが全く存在しない場合、どうすればこのスクリプトを停止しないで、bを取得してその特定のページに渡すことができますか？

`a = response.xpath("//div[@class='headerDiv']/a/@title").extract()[0] 
b = response.xpath("//div[@class='headerDiv']/text()").extract()[0].strip() 
items['title'] = a + " " + b 
yield items` 

Answer 1

extract()の結果を確認してください。

パドレイクカニンガムの良いアドバイスで

nodes = response.xpath("//div[@class='headerDiv']/a/@title").extract() 
a = nodes[0] if nodes else "" 

nodes = response.xpath("//div[@class='headerDiv']/text()").extract() 
b = nodes[0].strip() if nodes else "" 

items['title'] = a + " " + b 
yield items 

：あなたは次のように使用することができます

a = response.xpath("//div[@class='headerDiv']/a/@title").extract_first(default='') 
b = response.xpath("//div[@class='headerDiv']/text()").extract_first(default ='').strip() 
items['title'] = (a + " " + b).strip() 
yield items 

Answer 2

：

import lxml.etree as etree 

parser = etree.XMLParser(strip_cdata=False, remove_comments=True) 
root = etree.fromstring(data, parser) 

#Take Hyperlink as per xpath: 
#But Xpath returns list of element so we have to take 0 index of it if it has element 

a = root.xpath("//div[@class='headerDiv']/a/@title") 
b = response.xpath("//div[@class='headerDiv']/text()") 

if a: 
    items['title'] = a[0].strip() + " " + b[0].strip() 
else: 
    items['title'] = b[0].strip() 

yield items