Rubyのメモリリーク

Question

これは、いくつかのHTMLページを宝石にしてそれらを擦るパーサーですが、ガベージコレクションされていない多くのメモリを消費します。

結果をフォームに渡します。ここではメモリ使用量が発生します。

このコードに明らかなメモリリークはありますか？

def scrape(urls, item_selector) 
    collection = [] 
    urls.each do |url| 
     open(url) do |conn| 
     doc = Nokogiri::HTML(conn.read) # Opens URL 
     @items = doc.css(item_selector)#[0..1] # Sets items 
     @items = @items.map {|item| item['href']} 
     @items.map{|item| Addressable::URI.parse(item).normalize } 
     @items.map{|item| absolute_url(url, item) } 
     @items.each do |item| 
      open(item) do |connect| 
      page = Nokogiri::HTML(connect.read) 
      collection << { 
       :url  => item, 
       :title => get_title(page), 
       :price => get_price(page), 
       :image_url => get_image(page) 
      } 
      end # end connect 
     end # end items 
     end # end conn 
    end #end urls 
    collection 
    end 

Answer 1

この問題は、Puma + Ruby> = 2.1.xによるものでした。ルビー「2.0.0」にダウングレードしました。

メモリが不足しているか、メモリが膨れているかどうかは不明です。とにかく、この組み合わせはメモリが大変です。

2の方法は、以下のとおりです。

• は、Ruby 2.0.0

https://github.com/puma/puma/issues/342

にプーマ（WEBrickにまたはユニコーンはRubyの2.3.1で、この問題ではない持っている）

ダウングレードを使用しません