Railsの並列バックグラウンドプロセス

Question

数日のうちに多数のAPIからデータをアクセスして取得する必要があります。これはストリーミングデータなので、プロセスは常に実行されます。それぞれのプロセスはデータを引き込んで別のGoogle融合表に挿入します。

私はこのプロセスをバックグラウンドで実行し、それらについて忘れてしまい、ただ失敗して再起動しないように監視することができます。

私はDelayed Job、Resque、Beanstalkなどを見てきました。私の質問はこれらのプロセスを同時に実行できます。私はバックグラウンドでプロセスを実行するだけでキューに入れたくない。

私はSpawnも見ましたが、それがどのように機能しているか完全に理解していませんでした。

私にはどのようなオプションがありますか、誰にも推奨はありますか？

Answer 1

私はwhenever gemを使用して、データをプルするためにcronジョブをスケジュールします。

every 2.hours do 
    YourApi.do_whatever 
    SecondApi.do_the_thing 
end 

Answer 2

カスタムバックグラウンドデーモンがあなたに適していると思われる場合は、daemon_generatorをご覧ください。ただし、同時に処理する必要がある場合は、処理を行う必要があるかもしれませんが、シリアルで処理するのは簡単です。