Configuration de la vitesse d'exploration de Googlebot

[WebRankInfo]

J'ai fait un petit article au sujet de la nouvelle fonctionnalité pour configurer la vitesse d'exploration de Googlebot sur son site.

 

[Robinson]

Gogogogo.... vitesse maximaleeee :lol:

 

[Eroan]

Allez, avec mon énorme dédié je mets le max, histoire de tester ça

Je vous dirai si j'ai des résultats significatifs... et d'ici combien de temps !

 

[ayor]

vitesse maximale pour moi aussi...

par contre ce qui est bizarre, c'est que ca ne positionne cette préférence que pour 4 mois

 

[e-kiwi]

ah dis donc, oui, il m'avait remis en normal après sa mise à jour, alors que sur l'ancienne version, j'étais en "plus rapide"

 

[WebRankInfo]

c'est pas 4 mois c'est 90 jours, c'est marqué dans la doc

 

[Madrileño]

Quel est le temps le plus rapide possible, indiqué pour la vitesse de crawl (du GoogleBot) ? (Curiosité).

 

[HawkEye]

Chez moi le max c'est:

400%
2.5 demandes/sec
0.4 sec entre les demandes

 

[Panza]

Pour moi le max c'est:
16567% modification du paramètre actuel
0.5 demandes/sec
2 sec entre les demandes

C'est vraiment beaucoup, je vais voir dans les jours à venir si c'est néfaste...

 

[HawkEye]

Reste à voir ce qu'ils appellent "demande", comme le souligne nonchalamment Olivier dans l'article.

Si c'est des "hits", c'est pas pareil que si c'est des crawls de pages: en l'occurence, 0.5/sec ça fait son 43K pages/jours: sur un p'tit mutu ça fait mal.


Note en passant: quand c'était encore l'ancien système, je l'avais mis sur "Maximum" (raf, gros dédié pour un seul site, on y va...): c'es descendu tout seul au niveau "normal" après quelques mois... mais je n'ai pas vu de réelle différence en charge ou en vitesse de présentation dans les SERPs.

 

[aurelien59]

Bonne nouvelle mais j'ai ce message:

Des paramètres spécifiques ont été définis pour la vitesse d'exploration de votre site. Vous ne pouvez pas modifier la vitesse d'exploration.

Et c'est bien un ndd propre.

 

[e-kiwi]

moi je suis a 10 demandes par secondes, 0.1 entre chaque demande

 

[Eroan]

Déduisez-en que le max dépend de votre serveur !

Avec mon gros serveur, Google me propose au max :

7 demandes par seconde
0,143 secondes entre les demandes

Ce que j'ai sélectionné !

Concernant le retour c'est hyper rapide, depuis hier j'ai eu + 11500 pages référencées... avec un petit changement de structure du site en même temps mais je ne sais pas quelle modif a le plus joué.

Réellement efficace donc

 

[Tom_Tom]

J'ai un nom de domaine en propre mais je n'ai pas accès à ce réglage : "Your site has been assigned special crawl rate settings. You will not be able to change the crawl rate."

 

[Leonick]

J'ai un nom de domaine en propre mais je n'ai pas accès à ce réglage : "Your site has been assigned special crawl rate settings. You will not be able to change the crawl rate."

parce que tu dois être sur du mutualisé

 

[Tom_Tom]

Exact !
Dommage pour moi !

 

[l.alibert@anmv.fr]

Bonjour,

Moi je suis sur du mutualisé et pourtant j'y ai accès
Je voudrais simplement savoir si vous pouvez me donner une vitesse correcte que je peux paramétrer?

Merci
Lionel

 

[YoyoS]

Je crois pas que ça dépende du serveur, mais plutôt du site concernant. J'ai plein de sites sur un même dédié et comme par hasard les petits ont une petite valeur maximum et pas les plus gros.

 

[l.alibert@anmv.fr]

Bonjour YOYOS,

J'ai envoyé mon sitemap hier sur gg et il a été validé dans la foulée. Cependant, je ne vois pas la liste des pages indexées, sais tu combien de temps cela peut prendre? D'autre part, comment puis-je connnaître la date du dernier passage de ggbot sur mon site et sa fréquence de passage?

MRCI

Lionel

 

[YoyoS]

Tu ne peux pas voir la liste des pages indexées mais juste un nombre de pages indexées / total de pages dans ton sitemap.

Pour la modification de la fréquence de passage de GoogleBot c'est dans les paramètres de ton compte GWT.

 

[l.alibert@anmv.fr]

Donc je ne peux pas savoir si mes pages ont été indexées?
D'autre part, je n'ai accès qu'à ces outils dans GWT/paramètres:
-Zone géographique ciblée
-Domaine favori
-Recherche d'images
-Vitesse d'exploration

M'en manquerait 'il?

Merci de ta réponse

Lionel

 

[beloute]

Chez OVH en mutualisé on ne peu plus régler la vitesse.

 

[Marie-Aude]

Bonjour YOYOS,

J'ai envoyé mon sitemap hier sur gg et il a été validé dans la foulée. Cependant, je ne vois pas la liste des pages indexées, sais tu combien de temps cela peut prendre? D'autre part, comment puis-je connnaître la date du dernier passage de ggbot sur mon site et sa fréquence de passage?

Je ne suis pas YoyoS mais je me permet de répondre
La vitesse de crawl du sitemap est une chose, la vitesse d'indexation une autre.
Pour le passage du bot tu peux utiliser un outil comme Crawlsat, ou tes logs.
Pour les pages indexées, la commande site: est ton amie

J'ai fat un article dans mon blog sur les parties de cache-cache du bot... http://www.lumieredelune.com/encrelune/google-bot-sitemap-index-webmas ... ls,2009,02