Grosse augmentation des visites de GoogleBot suite à passage aux résultats IA

WRInaute passionné
Un effet du passage aux résultats générés par l'IA sur Google est une augmentation énorme du crawl sur mon site... depuis le 23 juillet où il y avait environ 5000 pages explorées par jour sur Smartphone de façon assez linéaire, la demande de pages est passée à plus de 55000/jour !

C'est juste pour information, mais ça va faire crever nos serveurs une telle demande...

D'autres constatent-ils cette poussée affolante dans GSC?

Pour le trafic généré par GG search, je ne vois rien de notable, ça semble stable mais mon site d'informations avait déjà tellement baissé dans les résultats "texte" que je ne risquais plus de perdre grand chose... :rolleyes:
demande GG IA.jpg
 
WRInaute impliqué
J'avais mal lu, j'ai cru que c'était la courbe des clics depuis les SERP, je me disais wahou, impressionnant, quelle chance !
Si c'est que les URL explorées, c'est déjà beaucoup moins intéressant :confused:

Bref, j'ai regardé chez moi : aucun changement particulier.
 
WRInaute occasionnel
Un petit test avec l'api Cloudflare :

Code:
curl --silent --show-error --get "https://api.cloudflare.com/client/v4/radar/bots/timeseries" --data-urlencode "botOperator=Google" --data-urlencode "botCategory=SEARCH_ENGINE_CRAWLER" --data-urlencode "aggInterval=1d" --data-urlencode "dateStart=2026-07-15T00:00:00Z" --data-urlencode "dateEnd=2026-07-21T23:59:59Z" --data-urlencode "dateStart=2026-07-22T00:00:00Z" --data-urlencode "dateEnd=2026-07-28T23:59:59Z" --data-urlencode "name=15-21 juillet 2026" --data-urlencode "name=22-28 juillet 2026" --header "Authorization: Bearer votre-api-token" | jq '.result as $r | ($r["15-21 juillet 2026"].values | map(tonumber) | add) as $a | ($r["22-28 juillet 2026"].values | map(tonumber) | add) as $b | {semaine_15_21:$a,semaine_22_28:$b,multiplication:($b/$a),augmentation_pct:((($b/$a)-1)*100)}'

réponse :

Code:
{
  "semaine_15_21": 0.987538,
  "semaine_22_28": 6.837554,
  "multiplication": 6.923838880124106,
  "augmentation_pct": 592.3838880124106
}

Donc les stats Cloudflare donne bien une multiplication des requêtes de crawl émanant de Google (tous les bots, pour les sites utilisant Cloudflare, moyenne) par 6.92 (7) pour la semaine du 22-28/7 par rapport à la semaine précédente du 15-21/7/2026.

https://developers.cloudflare.com/radar/concepts/normalization/
https://api.cloudflare.com/client/v4/radar/bots/timeseries

Mais, je ne constate pas d'augmentation pour les domaines que je gére (GSC) .

Cordialement,

Eric

PS : inspiré par https://websearchapi.ai/blog/search-engine-referal-report-insights
 
WRInaute occasionnel
A mon envie l'enjeu n'est pas l'augmentation du crawl car quand google nous utilise pour ses réponses IA il a besoin comme les autres IA de crawler et recrawler l'url pour voir si l'information n'a pas changé pour donner une information fiable, l'enjeu reste le clic ou le nurturing cognitif en étant cité par les IA...bref du marketing d'influence...et là il me semble qu'il faut une forte empreinte différenciante dans le knowledge graph pour en arriver là....mais je note quand même que l'écosystème IA de google est plus fidèle sur la durée que chatgpt sur les url sélectionnées tout simplement parce que le knowledge graph a besoin de stabilité sur les entités et les triplets sémantiques informationnels....bref on reste indexés et 'positionnés" longtemps mais ça ne rapporte pas des clics nécessairement comme avant....D'ailleurs avoir comme moi des logs serveurs où bot et IA se régalent posent aussi la question du serveur, et heureusement que je ne suis pas sur un serveur partagé.... Bonne fin de week end à tous....
 
WRInaute impliqué
@colonies : j'aurai bien aimé que ce soit une augmentation des clics... :p
Est-ce que le nombre de pages connues reste stable ?

J'imagine que tu as vérifié, mais ça serait dommage de louper une multiplication d'URL avec des paramètres générés à l'infini (ou même, dans le pire des cas, un malware chopé qui crée des fausses pages).
 
WRInaute passionné
@colonies : tout est stable, c'est vraiment le crawl énorme de GG qui a décuplé.

Curieusement, avec l'arrivée de l'IA dans les résultats de recherche, je m'attendais à une légère baisse de trafic, mais il n'en est rien du tout ... pour l'instant, c'est stable et conforme à une sorte de "normale". Mon site tourne au ralenti en été, donc je vais attendre la 1er septembre pour voir ce qu'il en est réellement.

@EUSKAL CONSEIL : tu m'as un peu perdu... je vais me contenter de répondre sur l'aspect serveur.

De mon côté, le site a subi de grosses chutes en mars 2024 (arrivée de l'intention de la requête) puis idem en 2025. Avec l'IA dans les réponses GG, certaines pages qui avaient été "sanctionnées" (style page 3 ou 5...) en 2024 remontent pour celles citées dans les réponses IA.

J'ai ma petite idée du pourquoi du comment. Mais pour ceux qui veulent performer dans les IA, il va falloir revoir le temps de réponse du chargement des pages. GG en a souvent parlé mais maintenant, je suis assez persuadé que les temps de réponse et d'affichage d'une première page (j'insiste sur le 'première') deviennent importants (cf. les Core Web Vitals). Les CMS type WordPress qui chargent 25 fichiers Script et CSS vont se faire mettre dehors pour les réponses IA, justement à cause de la charge serveur que l'IA GG impose. D'ailleurs, c'est un constat actuel et juste pour l'instant, je ne trouve aucun site WP dans les réponses IA dans les domaines qui m'intéressent en recherche (biologie au sens large).

Je n'ai jamais "travaillé" spécifiquement pour les robots et encore moins pour les IA (de toute façon, reprendre un site de 25000+ pages, on oublie!) mais toujours pour le visiteur.

Au passage, je kiffe le terme "Raisonnement" exposé par GG le temps qu'il génère la réponse IA... c'est assez drôle.:rolleyes:
 
WRInaute occasionnel
anemone: je suis d'accord avec toi pour la dimension technique de wordpress, et je suis en train de travailler sur un site modeste sur les auteurs des articles de blogs et leurs compétences, car les IA ont besoin de sources de savoirs fiables pour voir si ça influe sur le trafic, comme le site a été fait par quelqu'un d'autre je n'ai pas accès au serveur et je suis novice sur wordpress donc j'avoue que je n'arrive pas à voir les logs serveurs pour voir l'intensité du crawl ou pas...et j'imagine qu'en plus qu'il doit être sur un serveur partagé, donc un peu inquiète...

Moi ce que je n'arrive pas à comprendre c'est les questions de colonies? car finalement ce qu'on cherche c'est du trafic et du clic...car depuis mon expérience d'être hyper crawlée et avoir pleins d'impression, la difficulté n'est ni l'indexation ni l'exploration mais plutôt le clic et l'identification du trafic et des requêtes quand ça vient de l'IA car pour ma part ce trafic apparait en direct sur mes url longues d'articles de blog (je suis sur un .com et un site trilingue)....
 

➡️ Offre MyRankingMetrics ⬅️

pré-audit SEO gratuit avec RM Tech (+ avis d'expert)
coaching offert aux clients (avec Olivier Duffez ou Fabien Faceries)

Voir les détails ici

coaching SEO
Discussions similaires
Haut