カスタム値を渡す治療

Question

私は完全にうまく動作するスパイダーを持っていますが、今はアイテムに別の値を追加したいと思います。問題はstampの値がparseにあることです。 stamp値は私がget_detailsに渡すリンクと関連していますが、stampはオリジナルページだけです。生成するたびにstampの値を追加するコードを変更するにはどうすればよいですか？ありがとう

def parse(self, response): 
    stamp = response.xpath("//div[@class='byline']/time/@datetime") 

    for url in response.xpath("//h2[@class='post-title']/a/@href").extract(): 
     yield scrapy.Request(url, callback=self.get_details) 

def get_details(self, response): 
     article = ArticleItem() 
     article['title'] = response.xpath("//h1/text()").extract() 
     article['url'] = response.url 
     yield article 

Answer 1

確かに、ちょうどあなたの要求のメタ属性でスタンプデータを渡した後、あなたのget_details方法で応答オブジェクトから引き出します：

def parse(self, response): 

    # !! As I don't know the actual page these xpaths are my best guesses and need adjustments 
    for item in response.xpath("//li[contains(@class, 'river-block')]"): 
     url = item.xpath(".//h2[@class='post-title']/a/@href").extract()[0] 
     stamp = item.xpath(".//time/@datetime").extract() 
     yield scrapy.Request(url, callback=self.get_details, meta={'stamp': stamp}) 

def get_details(self, response): 
    article = ArticleItem() 
    article['title'] = response.xpath("//h1/text()").extract() 
    article['url'] = response.url 
    article['stamp'] = response.meta['stamp'] 
    yield article