[INFO] fail2ban vs crawler: attention ban

[pouloupoupo]

Salut à tous
Je poste ici à titre info.
J'ai repris un vieux site internet qui avait été modifié
Les précédents dev n'ont pas fait de réécriture d'url et donc quand les crawler viennent revisiter les liens connus ils se font bannir par le script [apache-noscript] de fail2ban.
Googlebot peut aussi se voir bannir quand il teste les 404.Je ne sais pas si les autres bots le font?
Seule solution que je vois: rajouter les ip des robots

ignoreip = 127.0.0.1 66.249.66.169

Ou désactiver ce script momentanément

C'est un cas particulier mais ça peut éviter des sacrés ennuis à certains

++

 

[Julia41]

La meilleure solution reste d'avoir un site mieux codé ou alors de désactiver ce script.
Si tu as une page qui fait 10 erreurs 404 (par exemple) d'un coup, tu bannies du coup tous tes utilisateurs.

 

[ZelkiN]

Un bon vieux site maison avec une bonne programmation rien de mieux pour éviter ce genre de mésaventure, c'est vrai que repasser derniere quelqu'un qui plus ai tu as a l'air de dire que c'est un vieux site c'est pas le top, merci quand meme