Node.js erhalten HTTP_USER_AGENT und Block HTTrack

Question

Ich möchte alle Bots (wie ein HTTrack) auf meiner Website blockieren. Normalerweise würde ich die .htaccess-Datei verwenden, um Bots über RewriteCond %{HTTP_USER_AGENT} HTTrack [NC,OR] zu blockieren.

Mein Server führt jedoch Node.js Express aus. Wie kann ich HTTP_USER_AGENT erhalten und eine Block- oder Neuschreibungs-Zeit auf Node.js machen?

Answer 1

Es ist eine Middleware für das, genannt express-nobots:

var noBots = require('express-nobots'); 

// must be the first middleware 
app.use(noBots()); 

Sie können inside a source file die Liste der blockierten Bots sehen.