WRInaute accro
Bonjour,
Je ne sais pas si d'autres ont constaté comme moi une augmentation anormale du nombre de crawl et en particulier le 17 sur un de mes sites.
Le site statique n'avait pas bougé depuis 1an et j'avais malgré tout un taux de crawl de 20 pour 94 pages, en moyenne sur 90 jours. Je trouve que c'était déjà bien pour un site qui n'évolue pas d'une virgule.
J'ai commencé à remplacer le thème, page par page, à partir du 31 mai. Aussitôt le nombre de crawl s'est mis à augmenter. Jusque là rien d'anormal. Je trouve que Google a été très réactif sur ce coup.
Mais voilà, mon taux a quand même augmenté de 50% en seulement 20 jours pour passer à une moyenne de pages visitées de 20 à 30 sur les 90 derniers jours. Il y a notamment le 17 où j'ai carrément eut 488 visites du bot pour 94 pages (dont seulement une cinquantaine ont été mises à jour sur le serveur). Ca m'interpelle.
En vérifiant mes autres sites je remarque pour chacun un pic dans le nombre le crawl. Il y en a un c'était le 18 mai avec un nombre de crawls deux fois plus élevé que le max jusque là. Pour un autre c'était le 10 juin mais c'est moins flagrant. Ces autres sites n'ont pas bougé depuis également un an.
Ma seconde réaction a été de me demander si les scripts que j'avais ajouté (du Jquery notamment) n'avaient pas ajouté à mon insu des urls fantômes. La commande site:www.example.com me donne aussitôt la réponse en m'annonçant 95 urls dans l'index au lieu de 94.
J'ai vite fait de trouver l’intruse, il s'agit de l'url www.example.com/?18264
Elle correspond à une copie en DC de ma page d'accueil.
Mais ça vient d'où ce truc ?
Du coup je balise et je me demande si mon augmentation anormale de crawl ne viendrait pas d'une multitude d'url imaginaires. Mais c'est troublant que cette url n'apparaisse qu'après 20 jours seulement. Il y a encore quelques jours elle n'existait pas dans la commande site:
Et pourquoi l'augmentation subite du nombre de visites le 17 juin et pas plus tôt ? Depuis le 31 mai j'avais bien une augmentation du nombre de crawls mais je trouvais cette augmentation assez naturelle du fait que je remplaçais mes pages une à une.
La date du cache de la page fantôme est du 13 juin. Alors pourquoi pas avant alors que c'est la page d'accueil ?
Est-ce qu'en ajoutant une balise canonical sur chaque page vers elle-même va résoudre le problème ?
Difficile en effet de faire des redirections 301 sachant que je ne connais pas les urls fantômes et que je ne sais même pas s'il y en aura d'autres.
Je ne sais pas si d'autres ont constaté comme moi une augmentation anormale du nombre de crawl et en particulier le 17 sur un de mes sites.
Le site statique n'avait pas bougé depuis 1an et j'avais malgré tout un taux de crawl de 20 pour 94 pages, en moyenne sur 90 jours. Je trouve que c'était déjà bien pour un site qui n'évolue pas d'une virgule.
J'ai commencé à remplacer le thème, page par page, à partir du 31 mai. Aussitôt le nombre de crawl s'est mis à augmenter. Jusque là rien d'anormal. Je trouve que Google a été très réactif sur ce coup.
Mais voilà, mon taux a quand même augmenté de 50% en seulement 20 jours pour passer à une moyenne de pages visitées de 20 à 30 sur les 90 derniers jours. Il y a notamment le 17 où j'ai carrément eut 488 visites du bot pour 94 pages (dont seulement une cinquantaine ont été mises à jour sur le serveur). Ca m'interpelle.
En vérifiant mes autres sites je remarque pour chacun un pic dans le nombre le crawl. Il y en a un c'était le 18 mai avec un nombre de crawls deux fois plus élevé que le max jusque là. Pour un autre c'était le 10 juin mais c'est moins flagrant. Ces autres sites n'ont pas bougé depuis également un an.
Ma seconde réaction a été de me demander si les scripts que j'avais ajouté (du Jquery notamment) n'avaient pas ajouté à mon insu des urls fantômes. La commande site:www.example.com me donne aussitôt la réponse en m'annonçant 95 urls dans l'index au lieu de 94.
J'ai vite fait de trouver l’intruse, il s'agit de l'url www.example.com/?18264
Elle correspond à une copie en DC de ma page d'accueil.
Mais ça vient d'où ce truc ?
Du coup je balise et je me demande si mon augmentation anormale de crawl ne viendrait pas d'une multitude d'url imaginaires. Mais c'est troublant que cette url n'apparaisse qu'après 20 jours seulement. Il y a encore quelques jours elle n'existait pas dans la commande site:
Et pourquoi l'augmentation subite du nombre de visites le 17 juin et pas plus tôt ? Depuis le 31 mai j'avais bien une augmentation du nombre de crawls mais je trouvais cette augmentation assez naturelle du fait que je remplaçais mes pages une à une.
La date du cache de la page fantôme est du 13 juin. Alors pourquoi pas avant alors que c'est la page d'accueil ?
Est-ce qu'en ajoutant une balise canonical sur chaque page vers elle-même va résoudre le problème ?
Difficile en effet de faire des redirections 301 sachant que je ne connais pas les urls fantômes et que je ne sais même pas s'il y en aura d'autres.
