Nous sommes actuellement explorés à un rythme plus rapide que ce que nous pouvons gérer.
Je n'arrive pas à bloquer le googlebot avec nginx
server {
location /ajax/sse.php {
if ($http_user_agent ~* "Mozilla/5.0 (compatible; Googlebot/2.1; +http://www.google.com/bot.html)" ) {
return 403;
}
}
}
Nous avons dû en arriver à le bloquer dans le script php -
if ($_SERVER['HTTP_USER_AGENT'] == 'Mozilla/5.0 (compatible; Googlebot/2.1; +http://www.google.com/bot.html)') {
header('HTTP/1.0 403 Forbidden');
exit();
}
Qu'est-ce qui ne va pas avec ma configuration nginx?