大きなリモートファイルを処理する際にタイムアウトの問題が発生する

Question

私はリモートAPIから情報を収集する必要があるスクリプトに問題があるデータの行数がわずか200行だが、実行しようとするとすぐにスクリプトがうまく動作する大きなデータセットページは最終的にログを見るとタイムアウトメッセージが表示されます。エラーコードは500と表示されます。

これまでにメモリ制限、実行時間、入力時間を増やしてみました問題を解決することができますが、これまでのところ私が下に自分のスクリプトを投稿していない、誰かが私が間違ってやった何かを見ることができない場合やリモートで大きなファイルを処理する方法は非常に感謝する。

<?php 
set_time_limit (0); 
ini_set('memory_limit','128M'); 
ini_set('max_execution_time','999'); 
ini_set('max_input_time','999'); 

load site settings 
require_once ('config.php'); 

$id = mysql_real_escape_string($_GET['pr']); 
$q = mysql_query("SELECT * FROM ".PREFIX."pings WHERE holderID='$id'") or die(mysql_error()); 
while(false !== ($r = mysql_fetch_assoc($q))) { 


    $response = file_get_contents("https://secure.comcetera.com/npl?user=".PINGUSERNAME."&pass=".PINGPASSWORD."&apiver=2.3&msisdn=".$r['r1']);  
    $data = split("\n",$response); 

    if ($data[0]=="QUERYOK") 
    { 
     list($number,$network, $msg)=split(" ",$data[1]); 
     if($msg ==''){$msg='OK';} 
     $sql = mysql_query("SELECT network FROM ".PREFIX."networks WHERE code='".$network."'"); 
     $row = mysql_fetch_object($sql); 
     mysql_query("UPDATE ".PREFIX."pings SET response='$msg', network='$row->network', dateUpdated='$dateandtime' WHERE r1='".$r['r1']."' "); 
     //echo "Carrier for $number is $r->network"; 
    } 
    else 
    { 
     mysql_query("UPDATE ".PREFIX."pings SET response='".$data[0]."', dateUpdated='$dateandtime' WHERE r1='".$r['r1']."' "); 
    } 

} 
mysql_query("UPDATE ".PREFIX."pings_holder SET pinged='Yes' WHERE holderID ='$id' "); 
$_SESSION['success'] = 'Records Pinged '.$error; 

header('Location: '.DIR); 
exit(); 
    ?> 

Answer 1

このようなスクリプトを別のプロセスとして実行することをお勧めします。クライアントはプロセスを開始するだけです。待機せずにクライアントがブラウザを閉じる場合はどうすればよいですか？ それはあなたのスクリプトのみに行うのデータベースエントリとレポートを更新し、そのクライアントに送信されるいかなるAPI呼び出しの結果がないと、あなたは自分の処理スクリプト

exec("php pingRecords.php > /dev/null &"); 

をトリガし、それをクライアントに開始された報告ができそうです。

また、curl_multi関数を使用してAPI呼び出しを並列化することをお勧めします。 Curlもパフォーマンスが大幅に向上しているようです。「file_get_contents VS CURL, what has better performance?」

Answer 2

スクリプトをコマンドラインで実行する方がよいでしょう。これは、多くの場合、多くのデータを処理するスクリプトに適しています。

FTPユーザーにシェルアクセスがあることを確認してから、Puttyのようなものを使用して、サーバー上でPHPスクリプトを実行する必要があります。