条件で行を選択し、1行のコマンドで数える

Question

nginxログを分析するのに助けが必要です。ログのサンプル：

10.10.10.10 - - [21/Mar/2016:00:00:00 +0000] "GET /example?page=&per_page=100&scopes= HTTP/1.1" 200 769 "-" "" "1.1.1.1" 
10.10.10.10 - - [21/Mar/2016:00:00:00 +0000] "GET /example?page=&per_page=500&scopes= HTTP/1.1" 200 769 "-" "" "1.1.1.1" 
11.11.11.11 - - [21/Mar/2016:00:00:00 +0000] "GET /example?page=&per_page=10&scopes= HTTP/1.1" 200 769 "-" "" "1.1.1.1" 
12.12.12.12 - - [21/Mar/2016:00:00:00 +0000] "GET /example?page=&per_page=500&scopes= HTTP/1.1" 200 769 "-" "" "1.1.1.1" 
13.13.13.13 - - [21/Mar/2016:00:00:00 +0000] "GET /example HTTP/1.1" 200 769 "-" "" "1.1.1.1" 

それは、カウントをPER_PAGEパラメータと、このパラメータが100以上含まれているすべてのuniqのIPアドレスを選択することは可能ですか？

ので、出力は任意の形式にすることができます。

10.10.10.10 - 2 # ip 10.10.10.10 was found twice 
12.12.12.12 - 1 

それは1つのコマンドで取得することはできますか？

Answer 1

$ awk '/per_page=[0-9]{3}/{cnt[$1]++} END{for (ip in cnt) print ip, cnt[ip]}' file 
12.12.12.12 1 
10.10.10.10 2 

これは絶対に基本的なawkのです - あなたがUNIX内の他のテキストファイル処理するつもりならアーノルド・ロビンス著有効なawkプログラミング、第4版を、読んで。