Curl：リクエスト間のスリープ/ディレイ

Question

次のコマンドを使用して、フラマの例外ログをダウンロードしようとしています。

curl --cookie ./flurry.jar -k -L "https://dev.flurry.com/exceptionLogsCsv.do?projectID=49999&versionCut=versionsAll&intervalCut=allTime&direction=1&offset=[0-100:10]" --output "exception#1.csv" 

正常に動作し、オフセット（10,20,30など）に基づいてCSVファイルをダウンロードします。私は各要求の間に遅延を挿入したいと思います。 CURLでそれを行うことは可能ですか？ bashシェル（Linux）の使用

Answer 1

：

while : 
do 
    curl --cookie ./flurry.jar -k -L "https://dev.flurry.com/exceptionLogsCsv.do?projectID=49999&versionCut=versionsAll&intervalCut=allTime&direction=1&offset=[0-100:10]" --output "exception#1.csv" 
    sleep 5m 
done 

それは無限ループであり、遅延がsleepコマンドによって与えられます。

編集。 Windowsマシンでは、あなたの代わりにこのトリックを行うことができます。

for /L %i in (0,0,0) do (
    curl --cookie ./flurry.jar -k -L "https://dev.flurry.com/exceptionLogsCsv.do?projectID=49999&versionCut=versionsAll&intervalCut=allTime&direction=1&offset=[0-100:10]" --output "exception#1.csv" 
    ping -n XX 127.0.0.1>NUL 
) 

sleepコマンドは、Windows上で使用できません。しかし、pingを使って "エミュレート"することができます。上記のXXを遅延させたい秒数で置き換えてください。

Answer 2

wgetのは、遅延オプションがあり

wget --wait=seconds 

ともランダム遅延オプション

wget --random-wait 

Answer 3

bashで、これは範囲0-60のランダムな秒数を一時停止します。

for d in {0..100..10} 
do 
    i=`printf "%03d" $d` 
    curl --cookie ./flurry.jar -k -L 'https://dev.flurry.com/exceptionLogsCsv.do?projectID=49999&versionCut=versionsAll&intervalCut=allTime&direction=1&offset='$d --output 'exception'$i'.csv' 
    sleep $(($RANDOM*60/32767)) 
done