MySQLのマルチクエリー非常に遅く、単純なトランケートクエリの代わりに？

Question

複数のページに分割されたJSONファイルを解析するPHPスクリプトのセットアップがあります。

このPHPスクリプトはJSONを解析し、それをMySQLデータベースに挿入します。

単一のクエリで

...（TRUNCATE声明なし）：multi_queryのオンscript execution time: 16.451724052429

で成功し

if ($count > 0) { 

//check toperform operation 

foreach ($jsondecode as $entries) { 

//getting variables here 

$sql = "INSERT INTO table (title, handle, imagesrc) 
VALUES ('".$title."', '".$handle."', '".$imagesrc."')"; 

if ($connect->query($sql) === TRUE) { 
echo "New record created successfully"; 
} else { 
echo "Error: " . $sql . "<br>" . $connect->error; 
} 
} 
} 

結果....：

if ($count > 0) { 
    $sql = "TRUNCATE table;"; 

foreach ($jsondecode as $entries) { 

//getting variables here 

$sql.= "INSERT INTO table (title, handle, imagesrc) 
VALUES ('".$title."', '".$handle."', '".$imagesrc."')"; 

if (!$mysqli->multi_query($sql)) { 
echo "Multi query failed: (" . $mysqli->errno . ") " . $mysqli->error; 
} 

do { 
if ($res = $mysqli->store_result()) { 
    var_dump($res->fetch_all(MYSQLI_ASSOC)); 
    $res->free(); 
} 
} while ($mysqli->more_results() && $mysqli->next_result()); 


} 
} 

結果script execution time: 278.05182099342、ほぼ5分で正常に終了しました。

TRUNCATEの前に、INSERTの表があります。

私はこのスクリプトを12時間ごとに実行する予定のWebサーバーCRONジョブでこれを実行します。

明らかに、1つのクエリと複数のクエリの間にこのような膨大な実行時間の差があります。何かできることは何ですか？

私の唯一の考えは、TRUNCATEステートメントを12時間ごとに実行するだけの、別のCRONジョブスクリプトを設定することです。このメインスクリプトが実行される1分前です。これはうまくいくはずですが、当然理想的ではないので、私は単なるスクリプトではなく複数のスクリプトを扱わなければなりません。

Answer 1

このような大きな違いがある理由は、余分なキャラクターが1つ存在する理由です！

$sql.= "INSERT INTO table (title, handle, imagesrc) 
VALUES ('".$title."', '".$handle."', '".$imagesrc."')"; 

既存のクエリに新しいクエリを追加し続けますが、ループ内でそのバルーンクエリを実行し続けます。コードを正しくインデントしていないため、明らかではない可能性があります。だから、ここで重大な間違いは黙っている！

JSONの入力行ごとにテーブルを切り捨て、すべてをもう一度挿入します。

さらに、これは実際には複数のクエリを使用するべきではありません。ループ外でtruncateクエリを実行します。次に、ループ内で挿入クエリを実行します。

他の人が、複数のVALUESセットを使用して1つの挿入クエリを作成することが少し速いかもしれないと指摘しているので。あるいは、トランザクション自動コミットをオフにして、最後にスイッチをオンに戻します。

if ($count > 0) { 
    $connect->query('TRUNCATE `table`'); 

    //check toperform operation 

    foreach ($jsondecode as $entries) { 

     //getting variables here 

     $sql = "INSERT INTO `table` (title, handle, imagesrc) 
     VALUES ('".$title."', '".$handle."', '".$imagesrc."')"; 

     if ($connect->query($sql) === TRUE) { 
      echo "New record created successfully"; 
     } else { 
      echo "Error: " . $sql . "<br>" . $connect->error; 
     } 

    } 
}