Pourquoi le crawler ne passe-t-il pas ?

Discussion dans 'Débuter en référencement' créé par bdamman, 10 Février 2004.

  1. bdamman
    bdamman Nouveau WRInaute
    Inscrit:
    15 Janvier 2004
    Messages:
    30
    J'aime reçus:
    0
    J'ai installé l'excellent robotstats le 14 janvier dernier, et je vois bien l'activité de plusieurs robots sur mon site, et en particulier GoogleBot.
    Par contre, je ne vois pas le crawler qui est censé venir avec l'adresse 216.239.46. D'ailleurs, même dans les logs depuis 6 mois en arrière je ne le vois jamais. Or, j'ai bien des pages dans Google et le Googlebot est venu 397 fois sur les 2 dernières semaines de janvier et 191 fois en février.
    A la dernière GoogleDance, tout était prêt et le site avait beaucoup bougé, mais pas de crawler en vue...
    Quelqu'un a une idée de ce qui peut se passer ?
    En plus, depuis 4 jours GoogleBot ne vient plus qu'une fois par jour, et uniquement sur la page d'accueil...

    Merci d'avance

    P.S. Si je n'ai pas posté ce message au bon endroit, dites-le moi
     
  2. mahefarivony
    mahefarivony WRInaute accro
    Inscrit:
    14 Octobre 2002
    Messages:
    8 176
    J'aime reçus:
    0
    a plus
     
  3. bdamman
    bdamman Nouveau WRInaute
    Inscrit:
    15 Janvier 2004
    Messages:
    30
    J'aime reçus:
    0
    Désolé, mahefarivony, mais je ne comprend pas ta réponse...
    Si tu peux éclaicir ma lanterne...
     
  4. sdamain
    sdamain WRInaute passionné
    Inscrit:
    14 Octobre 2003
    Messages:
    1 070
    J'aime reçus:
    0
    Ce crawler n'existe plus
     
  5. bdamman
    bdamman Nouveau WRInaute
    Inscrit:
    15 Janvier 2004
    Messages:
    30
    J'aime reçus:
    0
    Ah d'accord, merci beaucoup.
    Y en a-t-il un qui le remplace ?
    Quand dans les messages, on lit : je me fait crawler par Google, c'est pour quelle adresse (64.68.82.) ?
    J'avais cru comprendre qu'une semaine environ la Google Dance, un robot venait indexer massivement les sites. Ca n'est plus d'actualité alors ?
     
  6. mahefarivony
    mahefarivony WRInaute accro
    Inscrit:
    14 Octobre 2002
    Messages:
    8 176
    J'aime reçus:
    0
    désolé, j'essayerai de plus parler la bouche pleine :mrgreen:
    oui il n'y a plus que 2 type de robot google : l'un pour le moteur et l'autre pour l'adsense.. les deux commencent par 64.68.

    l'indexation, ou plutot le crawl est maintenant quotidien... mais bon, effectivement, quand on se rapproche de la dance, il y a grosse montée en charge, je pense qu'a ce moment la les robots "terminent leurboulot" en aspirant massivement les dernieres pages qu'ils ont sur leurs liste.
     
  7. bdamman
    bdamman Nouveau WRInaute
    Inscrit:
    15 Janvier 2004
    Messages:
    30
    J'aime reçus:
    0
    Ok, merci beaucoup, ça me rassure !
     
Chargement...
Similar Threads - crawler Forum Date
Impact des crawlers sur le taux de rebond et le référencement Crawl et indexation Google, sitemaps 19 Septembre 2019
Crawler un site volumineux Crawl et indexation Google, sitemaps 4 Septembre 2019
Empêcher Googlebot de crawler/indexer tout un dossier Débuter en référencement 19 Avril 2019
Comment trouver la vraie adresse IP d'un crawler ? Développement d'un site Web ou d'une appli mobile 13 Février 2019
Crawler des URLs depuis un CSV Crawl et indexation Google, sitemaps 30 Août 2018
Projet : Crawler de site pour mise en cache chez Fasterize Développement d'un site Web ou d'une appli mobile 7 Septembre 2017
Comment crawler la version mobile de mon site? Administration d'un site Web 13 Juillet 2017
Crawler un site mobile m.monsite.fr avec Xenu Link Sleuth? Crawl et indexation Google, sitemaps 10 Janvier 2017
Hide from backlink crawlers? Administration d'un site Web 27 Décembre 2016
Ne pas indexer ni faire crawler Crawl et indexation Google, sitemaps 10 Juin 2016
  1. Ce site utilise des cookies. En continuant à utiliser ce site, vous acceptez l'utilisation des cookies.
    Rejeter la notice