Google met en garde contre l’utilisation des codes 403 ou 404 pour limiter la vitesse d’exploration de Googlebot

Dans un post publié sur Google Search Central le 17 février 2023, Gary Illyes de Google demande solennellement aux propriétaires de sites et aux CDN (Content Delivery Network) d’arrêter d’utiliser des codes de statut 403 et 404 dans le but de réduire la vitesse d’exploration (taux de crawl) de Googlebot. En plus d’être inefficace, cette méthode aurait pour effet d’envoyer un signal contreproductif qui pourrait nuire au site.

Google met en garde contre l’utilisation des codes 403 ou 404 pour limiter la vitesse d’exploration de Googlebot