Crawlé à 99% par googlebot-mobile, 1% par googlebot?

Discussion dans 'Crawl et indexation Google, sitemaps' créé par strekk, 11 Juillet 2010.

  1. strekk
    strekk WRInaute discret
    Inscrit:
    23 Décembre 2009
    Messages:
    163
    J'aime reçus:
    0
    Hello,

    J'ai une petite boutique en ligne, avec une version classique, et une version web (même nom de domaine mais répertoires différentes).

    Depuis une dizaine de jours, googlebot-mobile crawle les pages comme un fou (et depuis le temps il les a toutes faites plusieurs fois), avec le user-agent suivant à chaque fois :
    DoCoMo/2.0 N905i(c100;TB;W24H16) (compatible; Googlebot-Mobile/2.1; +https://www.google.com/bot.html)

    Par contre Googlebot classique, lui, ne doit même pas faire 1% des requetes, or c'est quand même la version qui reçoit la très grande majorité des visites, qui a quasiment tous les backlinks, etc.

    Avez-vous déjà vu ce comportement, est-ce que ça dénote une erreur quelque part sur la structure de mes sites?

    Strekk
     
  2. Madrileño
    Madrileño Membre Honoré
    Inscrit:
    7 Juillet 2004
    Messages:
    31 566
    J'aime reçus:
    280
    Il est possible que le bot préfère la version mobile.
     
Chargement...
Similar Threads - Crawlé 99% googlebot Forum Date
Crawler une url présente dans un select Développement d'un site Web ou d'une appli mobile 28 Mars 2022
Liens internes invisibles pour les crawlers Demandes d'avis et de conseils sur vos sites 7 Décembre 2021
Signaler aux crawler de ne pas suivre un lien qui nécessite une connexion Crawl et indexation Google, sitemaps 9 Juin 2021
Stimuler GoogleBot pour crawler de nouvelles pages Crawl et indexation Google, sitemaps 24 Janvier 2021
Comment éviter un piège à bots avec un crawler ? Crawl et indexation Google, sitemaps 3 Décembre 2020
Urls orphelines crawlées par Google + Robots.txt ? Crawl et indexation Google, sitemaps 3 Avril 2020
Pages crawlées mais non indexées Crawl et indexation Google, sitemaps 9 Décembre 2019
Impact des crawlers sur le taux de rebond et le référencement Crawl et indexation Google, sitemaps 19 Septembre 2019
Crawler un site volumineux Crawl et indexation Google, sitemaps 4 Septembre 2019
googlebot crawle des pages inexistantes Crawl et indexation Google, sitemaps 16 Août 2019
Empêcher Googlebot de crawler/indexer tout un dossier Débuter en référencement 19 Avril 2019
Comment trouver la vraie adresse IP d'un crawler ? Développement d'un site Web ou d'une appli mobile 13 Février 2019
URL incompréhensibles crawlées non indéxées Crawl et indexation Google, sitemaps 30 Janvier 2019
Google crawle des pages existant sur d'autres sites Crawl et indexation Google, sitemaps 1 Janvier 2019
Google crawle encore des liens désavoués qui me font des 404 Référencement Google 22 Décembre 2018
pages non indexées mais crawlées Crawl et indexation Google, sitemaps 5 Novembre 2018
Crawler des URLs depuis un CSV Crawl et indexation Google, sitemaps 30 Août 2018
Search Console crawle et indexe des page bloquées par robot.txt Crawl et indexation Google, sitemaps 16 Mars 2018
Projet : Crawler de site pour mise en cache chez Fasterize Développement d'un site Web ou d'une appli mobile 7 Septembre 2017
Comment crawler la version mobile de mon site? Administration d'un site Web 13 Juillet 2017