HAProxy TCPセッション数が400で終了する

Question

TCP負荷分散にHAProxyを使用しようとしています。接続は1つのIP上でポートXに入り、HAProxyは接続の数を均等に保つために "leastconn"バランス方法を使用してこれらの接続をバッ​​クエンドに均衡させます。これはUbuntu 10.04 x64上にあります。

カーネル設定のfile-maxを70万に設定しました。私はプロセスごとのulimitを約40万に上げました。私はmaxconnをhaproxy設定で200,000にしました。

show info 
Name: HAProxy 
Version: 1.3.22 
Release_date: 2009/10/14 
Nbproc: 1 
Process_num: 1 
Pid: 1355 
Uptime: 0d 4h38m46s 
Uptime_sec: 16726 
Memmax_MB: 0 
Ulimit-n: 400013 
Maxsock: 400013 
Maxconn: 200000 
Maxpipes: 0 
CurrConns: 1113 
PipesUsed: 0 
PipesFree: 0 
Tasks: 1113 
Run_queue: 1 
node: XXXXX 

このフロントエンドは、5つのバックエンドシステム間で負荷分散を行います。しかし、バックエンドごとに400セッションに達すると、バランスがとれなくなり、追加の接続が延期されます。私はこれを "smax" statで見ることができます。各セッションの最大セッション数は400、最大セッション数は2000です。

show stat 
# 
pxname,svname,qcur,qmax,scur,smax,slim,stot,bin,bout,dreq,dresp,ereq,econ,eresp,wretr,wredis,status,weight,act,bck,chkfail,chkdown,lastchg,downtime,qlimit,pid,iid,sid,throttle,lbtot,tracked,type,rate,rate_lim,rate_max, 
protoa,FRONTEND,,,958,2000,2000,12624,6230219,6445523,0,0,0,,,,,OPEN,,,,,,,,,1,1,0,,,,0,0,0,406, 
protoa,XXX1672,0,0,191,400,,3222,1249403,1286659,,0,,221,0,664,0,no check,1,1,0,,,,,,1,1,1,,2559,,2,0,,198, 
protoa,XXX1674,0,0,192,400,,3106,1242103,1289247,,0,,178,0,535,0,no check,1,1,0,,,,,,1,1,2,,2572,,2,0,,171, 
protoa,XXX1707,0,0,193,400,,3043,1266305,1305311,,0,,164,0,492,0,no check,1,1,0,,,,,,1,1,3,,2551,,2,0,,161, 
protoa,XXX1782,0,0,189,400,,3046,1236790,1282690,,0,,204,0,619,0,no check,1,1,0,,,,,,1,1,4,,2429,,2,0,,190, 
protoa,XXX1851,0,0,193,400,,3060,1235618,1281616,,0,,189,0,570,0,no check,1,1,0,,,,,,1,1,5,,2490,,2,0,,180, 
protoa,BACKEND,0,0,958,2000,2000,12624,6230219,6445523,0,0,,956,0,2880,0,UP,5,5,0,,0,17645,0,,1,1,0,,12601,,1,0,,406, 
protob,FRONTEND,,,4,6,2000,28,15204,15726,0,0,0,,,,,OPEN,,,,,,,,,1,2,0,,,,0,0,0,2, 
protob,XXX1672,0,0,2,2,,5,2313,2322,,0,,0,0,0,0,no check,1,1,0,,,,,,1,2,1,,5,,2,0,,1, 
protob,XXX1674,0,0,0,2,,5,3520,3803,,0,,0,0,0,0,no check,1,1,0,,,,,,1,2,2,,5,,2,0,,1, 
protob,XXX1707,0,0,0,2,,8,3303,3214,,0,,0,0,0,0,no check,1,1,0,,,,,,1,2,3,,8,,2,0,,1, 
protob,XXX1782,0,0,1,2,,5,3529,3745,,0,,0,0,0,0,no check,1,1,0,,,,,,1,2,4,,5,,2,0,,1, 
protob,XXX1851,0,0,1,1,,5,2539,2642,,0,,0,0,0,0,no check,1,1,0,,,,,,1,2,5,,5,,2,0,,1, 
protob,BACKEND,0,0,4,6,2000,28,15204,15726,0,0,,0,0,0,0,UP,5,5,0,,0,17645,0,,1,2,0,,28,,1,0,,2, 

この制限はどこから来ていますか。私は本当にこのハプロキシのインスタンスに数十万の接続を窮屈にしたい。 （マシンにはネットワーク、CPU、RAMがあります）

Answer 1

バージョン1.3.xのソースを読むと、私はそれを知ります： 最大値は2つです。 1つはグローバルmax＃接続です。コマンドラインで-n、グローバル設定でmaxconnを設定します。 もう1つは、プロキシごとのmax＃接続です。コマンドラインで-Nを設定するか、configでプロキシごとに設定します。 特に、コマンドライン以外では、プロキシごとにデフォルトの最大＃接続数を設定することはできません！ デフォルトは...待ちます... 2000！ /etc/haproxy/haproxy.cfgファイルの "listen"セクションに "maxconn 200000"を追加すると、この問題は解決します。

文書がかなり良いにもかかわらず、これを説明するうまくやっていないことに注意してください。具体的には、ドキュメントを読むことから、グローバルmaxconnは各プロキシにも適用されると思いますが、そうではありません。グローバルmaxconnはであり、合計接続数はですが、特定のプロキシフロントエンドのローカル最大接続数を明示的に指定する必要があります。