Node.js HTTP_USER_AGENTを取得してHTTrackをブロックする

Question

私のウェブサイト上のすべてのボット（HTTrackのような）をブロックしたい。通常、私はRewriteCond %{HTTP_USER_AGENT} HTTrack [NC,OR]経由でボットをブロックするために.htaccessファイルを使用します。

ただし、私のサーバーでNode.js Expressが実行されています。 Node.jsでHTTP_USER_AGENTを取得し、ブロックまたは再書き込みを行うにはどうすればよいですか？

Answer 1

そのためのミドルウェアがありますが、express-nobotsと呼ばれる：

var noBots = require('express-nobots'); 

// must be the first middleware 
app.use(noBots()); 

あなたはブロックされたボットinside a source fileの一覧を見ることができます。