Googlebot goinfre de bande passante

[conishiwa]

Bonjour,
est-ce que c'est déjà arrivé à quelques un, que googlebot soit pris d'une frénésie, et indexent trop et tellement qu'il mange toute la bande passante de votre site ?
Je suis chez un hébergeur qui limite à 10 gigas la bp mensuelle, et depuis le 13 aôut, impossible d'accéder à mon site, car au-délà des limites de bp, le site est temporairement bloqué.
Sans comprendre, je viens houspiller mon hébergeur en prétextant que la visite sur mon site est restée constante.
C'était oublier un détail dans mes stats, le traffic invisible.
En effet, dans les stats sur les robots, je vois et j'hallucine,
googlebot => 54066 hits , bande passante => 9.89 gigas , d'une visite datant du 13 aôut à 15 H 46.
Soit en un passage, cher google m'a mangé presque 99% de ma bande
passante, hallucinant, non ?

J'ai surtout eu l'impression d'être victime d'un bug de google qui indexe de manière récursive.

Merci google...

 

[Ohax]

tu fait allusion au site de ton profil ?

 

[conishiwa]

Oui, c'est bien celui là.
D'ailleurs dans l'absolu, je ne suis pas trop mal référencé, mais à ce prix là je me demande si ça en vaut la peine.

 

[Ohax]

bizarre tu as peu de contenu pourtant :s


google ta puni pour cacher du texte ? :mrgreen:

Moi-même Nicolas Ferrand, développeur spécialisé php, mais également ouvert à toutes les technologies web, asp .net, j2ee, jakarta struts, java beans, perl.
Je peux gérer un projet de a à z, le référencement, et le développement de base de données.

 

[conishiwa]

ça serait cher payé la phrase cachée, d'aillleurs c'est bien la seule...
Je pencherais plus pour un bug, à qui se plaindre dans ce cas précis ?
Ce n'est parce que ils ont l'hégémonie qu'on doit la fermer.
Je suis vraiment dégouté, mais à peu près sûr que c'est déjà arrivé à d'autres personnes.

 

[ptitcastor]

Moi personnellement googlebot me prend 13% de ma bande passante sur 15Go par mois avec un PageRank 5 (passage fréquant) . Mais avec un PageRank 3, je trouve ça bizare.

Est-Il possible de voir tes "Usage Statistics"?

 

[Daktari]

Y aurait pas un bug sur cette page ?

http://www.conishiwa.org/dir/Animation_ ... /Animation

 

[daffsteam]

Y aurait pas un bug sur cette page ?

http://www.conishiwa.org/dir/Animation_ ... /Animation

un peu mon neveu 8)

 

[cthierry]

Y aurait pas un bug sur cette page ?

http://www.conishiwa.org/dir/Animation_ ... /Animation

J'aime bien la police et la taille, façon Assistant Accessabilité de windows :-D

Google chez moi c'est 11% moyenne sur 6 mois avec des pointes à 19% et d'autres a moins de 6% suivant les mois (effet bourbon :-D)

 

[conishiwa]

Effectivement cette page bug et pourrait être la cause de cette récursion infernale.
J'explique ce qui se passe sur cette page :
J'ai commencé à penser à un système d'annuaire (non finalisé), qui en fait n'utilise qu'une page php, rewrité (via l'url-rewriting avis aux connaisseurs).
Tout ce qui est après dir est en fait passé comme un paramètre.
D'où une infinité de possibilités d'url de pages.

Et effectivement certains liens sur cette page d'annuaire ne sont pas corrects, pointe vers d'autres liens différents et ainsi de suite.

comme par exemple http://www.conishiwa.org/dir/Animation_-_manga/
qui pointe vers http://www.conishiwa.org/dir/Animation_ ... a.org/dir/ qui pointe vers http://www.conishiwa.org/dir/Animation_ ... a.org/dir/
et ainsi de suite, jusqu'à la mort de mon quota de BP.

Et voila.