PHP Curlライブラリを使用した永続的/キープアライブHTTP？

Question

私は単純なPHPライブラリを使用して、HTTPを介してSOLRインデックスにドキュメントを追加しています。

現在、関連する3台のサーバがあります

1. データを保持
2. データベースボックスが
3. Solrのボックスインデックス付けされたインデックス作成ジョブを実行しているPHPボックス。

80文書/秒（百万文書のうち）で、私はPHPとソルボックスのネットワークインターフェイスで異常に高い割り込みレートに気付いています（2000 /秒;さらにグラフはほぼ同じ - PHPボックスの割り込みレートが急上昇すると、Solrボックスも大きくなりますが、データベースボックス（300 /秒）ではそれほど大きくなりません。これは、データベースサーバーとの1つの接続を開いて再利用するためだと思いますが、Solrクライアントライブラリの記述方法のおかげで、すべての単一のSolrリクエストが現在cURLを介して新しいHTTP接続を開始しています。

だから、私の質問は：

1. は、キープアライブセッションを開くようにすることがカールすることはできますか？
2. 接続を再利用するには何が必要ですか？ - cURLハンドルリソースを再利用するだけで簡単ですか？
3. 特別なcURLオプションを設定する必要がありますか？ （強制HTTP 1.1など）
4. cURLキープアライブ接続の問題がありますか？このスクリプトは一度に数時間実行されます。単一の接続を使用できるか、定期的に再接続する必要がありますか？

Answer 1

cURLのPHPのドキュメント（curl_setopt）は言う：

CURLOPT_FORBID_REUSEからTRUEを、それが処理を完了した、と は、再利用のためにプールされていないときに接続 明示的に近い を強制します。だから、

：デフォルトで

1. はい、実際にそれがなければならない再利用の接続は、限り、あなたはとしてのcURLハンドルを再使用しています。
2. デフォルトでは、cURLは永続的な接続を単独で処理します。 CURLOPT_HTTPHEADER
3. サーバがキープアライブタイムアウトを送信することがある（デフォルトのApacheインストールでは、15秒か100リクエストのどちらか早い方のどちらか早い方） - ただし、cURLはそれが起こったときに別の接続を開くだけです。あなたはキープアライブアクセスしているサーバーで

Answer 2

リクエストからの応答を気にしない場合は、非同期に実行できますが、SOLRインデックスのオーバーロードの危険性があります。私はそれを疑う、SOLRはかなり気分がいい。

Asynchronous PHP calls?

Answer 3

1. 有効にする必要があり、最大キープアライブ要求は合理的でなければなりません。Apacheの場合は、apache docsを参照してください。

2. 同じcURLコンテキストを再使用する必要があります。

3. CURLコンテキストを設定する場合、キープアライブタイムアウトとヘッダーに有効：

   curl_setopt($curlHandle, CURLOPT_HTTPHEADER, array(
       'Connection: Keep-Alive', 
       'Keep-Alive: 300' 
   )); 
   

Answer 4

カールは、デフォルトではキープアライブヘッダを送信しますが、：

1. 作成パラメータなしでcurl_init()を使用するコンテキスト。 curl_exec()
2. を使用して要求を実行コンテキストに
3. をURLを渡す
4. 店、それが（ローカルVARない）生き残るスコープのコンテキスト
5. 使用CURLOPT_URLオプションでは、との接続を閉じないでくださいcurl_close()

非常に基本的な例：

function get($url) { 
    global $context; 
    curl_setopt($context, CURLOPT_URL, $url); 
    return curl_exec($context); 
} 

$context = curl_init(); 
//multiple calls to get() here 
curl_close($context);