純粋なルビー：#selectでcsvの日付をフィルタリングしましたが、その日付範囲に基づいて別の列を取得したい

Question

これは基本的にRuby経由で巨大なCSVファイルの情報を検索しようとしています。 ）、私はUnixタイムスタンプを適切なTimeオブジェクトに変換し、それらをソートして#selectでフィルタリングしました。私は、この特定の時間範囲（start_date、end_dateで表される）を指定してpurchase_amtに関する情報を検索しようとしています。

現在、巨大なcsvでフィルタリングされた時間の配列しかありませんが、どのようにしてcsvでpurchase_amtを取得するために自分のコードを使用できますか？

Unix_time purchase_amt 
1352948920 12.40 

require 'csv' 
require 'date' 

start_date = DateTime.rfc3339('2014-06-22T00:00:00Z').to_time.to_i 
end_date = DateTime.rfc3339('2014-07-22T00:00:00Z').to_time.to_i 

csv = CSV.parse('sample_data.csv', headers: true, encoding: 'ISO-8859-1') 

csv.each do |row| 
    if (row['created_at'] >= start_date && row['created_at'] <= end_date) 
     final_arry<< row 
    end 
end 

puts csv 

Answer 1

のために働くなら、私はあなたが巨大なCSVを使用している場合、あなたはを使用する必要があります知ってみましょう。 ファイル全体をメモリにロードせずに行を順番に解析します。

Range#cover?も役立ちます：objが始まり、範囲の端部との間にある場合

はtrueを返します。

可能であれば、新しい配列を返さずにブロック内のすべての計算も行う必要があります。ので、ここで、あなたがが巨大な配列をしたいです思える行く：

require 'csv' 

amounts = [] 

start_date = Time.new(2012, 1, 22) 
end_date = Time.new(2014, 7, 22) 

search_range = (start_date.to_i..end_date.to_i) 

CSV.foreach('data.csv', headers: true, col_sep: "\s", skip_blanks: true) do |row| 
    next unless search_range.cover?(row['Unix_time'].to_i) 
    amounts << row['purchase_amt'].to_f 
end 

p amounts 

Answer 2

私が間違っていない場合は、start_date..end_dateの範囲に該当するレコードを抽出します。ここに述べたように

require 'date' 

DateTime.rfc3339('2015-05-27T07:39:59Z') 
#=> #<DateTime: 2015-05-27T07:39:59+00:00 ((2457170j,27599s,0n),+0s,2299161j)> 

DateTime.rfc3339('2015-05-27T07:39:59Z').to_time 
#=> 2015-05-27 09:39:59 +0200 

DateTime.rfc3339('2015-05-27T07:39:59Z').to_time.to_i 
#=> 1432712399 

：

： https://stackoverflow.com/a/30480999/2545197

は今、あなたのようなCSVファイルを介して実行することができるはずです は今より良い解決策はただのようなUnixタイムスタンプにあなたのSTART_DATEとEND_DATEを変換することです

csv = CSV.parse('sample_data.csv', :headers => true, :encoding => 'ISO-8859-1') 
csv.each do |row| 
    # apply your conditions here 
    # something like... 
    if row['date'] >=start_date && row['date']<=end_date 
    # append it to some array 
    # ary << row 
    end 
end 

これはあなた