Crawlé à 99% par googlebot-mobile, 1% par googlebot?

Discussion dans 'Crawl et indexation Google, sitemaps' créé par strekk, 11 Juillet 2010.

  1. strekk
    strekk WRInaute discret
    Inscrit:
    23 Décembre 2009
    Messages:
    169
    J'aime reçus:
    0
    Hello,

    J'ai une petite boutique en ligne, avec une version classique, et une version web (même nom de domaine mais répertoires différentes).

    Depuis une dizaine de jours, googlebot-mobile crawle les pages comme un fou (et depuis le temps il les a toutes faites plusieurs fois), avec le user-agent suivant à chaque fois :
    DoCoMo/2.0 N905i(c100;TB;W24H16) (compatible; Googlebot-Mobile/2.1; +https://www.google.com/bot.html)

    Par contre Googlebot classique, lui, ne doit même pas faire 1% des requetes, or c'est quand même la version qui reçoit la très grande majorité des visites, qui a quasiment tous les backlinks, etc.

    Avez-vous déjà vu ce comportement, est-ce que ça dénote une erreur quelque part sur la structure de mes sites?

    Strekk
     
  2. Madrileño
    Madrileño Membre Honoré
    Inscrit:
    7 Juillet 2004
    Messages:
    32 079
    J'aime reçus:
    283
    Il est possible que le bot préfère la version mobile.
     
Chargement...
Similar Threads - Crawlé 99% googlebot Forum Date
Signaler aux crawler de ne pas suivre un lien qui nécessite une connexion Crawl et indexation Google, sitemaps 9 Juin 2021
Stimuler GoogleBot pour crawler de nouvelles pages Crawl et indexation Google, sitemaps 24 Janvier 2021
Comment éviter un piège à bots avec un crawler ? Crawl et indexation Google, sitemaps 3 Décembre 2020
Urls orphelines crawlées par Google + Robots.txt ? Crawl et indexation Google, sitemaps 3 Avril 2020
Pages crawlées mais non indexées Crawl et indexation Google, sitemaps 9 Décembre 2019
Impact des crawlers sur le taux de rebond et le référencement Crawl et indexation Google, sitemaps 19 Septembre 2019
Crawler un site volumineux Crawl et indexation Google, sitemaps 4 Septembre 2019
googlebot crawle des pages inexistantes Crawl et indexation Google, sitemaps 16 Août 2019
Empêcher Googlebot de crawler/indexer tout un dossier Débuter en référencement 19 Avril 2019
Comment trouver la vraie adresse IP d'un crawler ? Développement d'un site Web ou d'une appli mobile 13 Février 2019