GoogleBot en folie

Discussion dans 'Crawl et indexation Google, sitemaps' créé par yannouk, 19 Février 2004.

Tags:
  1. yannouk
    yannouk WRInaute passionné
    Inscrit:
    11 Octobre 2003
    Messages:
    1 568
    J'aime reçus:
    0
    je sais pas vous, mais ggbot crawle 100 a 300 pages de mon site chaque jour depuis plus de 10 jours....la menace yahoo? :)!
     
    #1 yannouk, 19 Février 2004
  2. George Abitbol
    George Abitbol WRInaute passionné
    Inscrit:
    6 Juin 2003
    Messages:
    1 536
    J'aime reçus:
    0
    Ah ben il doit pas trop se sentir menacé chez moi, alors... Pas de crawl depuis un bail... J'aimerais bien voir les résultats de quelques tests, pourtant...

    Fred
     
    #2 George Abitbol, 19 Février 2004
  3. herveG
    herveG WRInaute accro
    Inscrit:
    5 Mars 2003
    Messages:
    8 063
    J'aime reçus:
    0
    de mon coté, ce n est pas dans ces chiffres que je me place mais je constate une plus forte frequence aussi (a la louche, je dirais environ 4 a 5 fois plus).
     
    #3 herveG, 19 Février 2004
  4. caro
    caro WRInaute impliqué
    Inscrit:
    21 Juillet 2003
    Messages:
    765
    J'aime reçus:
    0
    moi j'ai une augmentation des crawls mais que sur les pages d'index,
    quelques rares autres pages mais vraiment pas beaucoup.

    allez petit bot :lol:
     
    #4 caro, 19 Février 2004
  5. DAVID86
    DAVID86 WRInaute impliqué
    Inscrit:
    15 Octobre 2003
    Messages:
    834
    J'aime reçus:
    0
    de mon coté, ça vivote à 4 5 pages par jour, puis tout les 10 jours, un crawl à niveau -2 mais c'est tout... j'ai l'impression que quand les pages de niveau suppérieur ne sont pas mises à jour, il ne va pas voir "en dessous"
    Vous en pensez quoi?
     
    #5 DAVID86, 19 Février 2004
  6. Mies Van der Rohe
    Mies Van der Rohe WRInaute passionné
    Inscrit:
    7 Décembre 2002
    Messages:
    1 178
    J'aime reçus:
    0
    idem 500-600 pages par jour
     
    #6 Mies Van der Rohe, 19 Février 2004
  7. yannouk
    yannouk WRInaute passionné
    Inscrit:
    11 Octobre 2003
    Messages:
    1 568
    J'aime reçus:
    0
    alors la je comprends plus rien je fonctionne toujours a l'envers faut croire!!!

    constats avec robotstats:

    il remplit les forumlaires et ne sarrete plus a 1 ou 2 variab'les, puisqu'il me crawle des pages du style:

    /recherche_simple_results.php?annonce=%25&type=(tous)&piece1=&piece2=&surface1=&surface2=&prix1=&prix2=&type_prix=0&ville=&keyword=&onlypros=1&max_ann=10&page=0&ordre_tri=DESC&champ_tri=id&tri=0&Submit=Rechercher

    paradoxalement, il n'indexe plus que 39 pages, au lien de plusieurs centaines!!!
     
    #7 yannouk, 19 Février 2004
  8. George Abitbol
    George Abitbol WRInaute passionné
    Inscrit:
    6 Juin 2003
    Messages:
    1 536
    J'aime reçus:
    0
    T'es sûr que c'est pas le robot d'Adsense ?

    Fred
     
    #8 George Abitbol, 19 Février 2004
  9. DAVID86
    DAVID86 WRInaute impliqué
    Inscrit:
    15 Octobre 2003
    Messages:
    834
    J'aime reçus:
    0
    peut être que google s'attaque au web invisible, mais la, il a du boulot! :)
    et ça lui fait des millions de possibibités (ou plus!) par site!
     
    #9 DAVID86, 19 Février 2004
  10. yannouk
    yannouk WRInaute passionné
    Inscrit:
    11 Octobre 2003
    Messages:
    1 568
    J'aime reçus:
    0
    fred, le robot d'adsense est detecte en tant que googlebot 2.1 dans robotstas?
     
    #10 yannouk, 19 Février 2004
  11. yannouk
    yannouk WRInaute passionné
    Inscrit:
    11 Octobre 2003
    Messages:
    1 568
    J'aime reçus:
    0
    edit: apres une recherche sur le forum, effectivement, c'est adsense :(
    dsl pour la fausse alerte
    je suis decu :p
     
    #11 yannouk, 19 Février 2004
  12. legolfquebecois
    legolfquebecois WRInaute discret
    Inscrit:
    2 Janvier 2004
    Messages:
    76
    J'aime reçus:
    0
    moi c'est l'index tous les jours et rien d'autre depuis 3 semaines, il m'a oublié :(
     
    #12 legolfquebecois, 19 Février 2004
  13. Remi L.
    Remi L. WRInaute impliqué
    Inscrit:
    6 Septembre 2003
    Messages:
    909
    J'aime reçus:
    0
    J'ai eu un crawl complet hier d'un site sur lequel je fais pas mal de mises à jour en ce moment, mais sinon pour les autres il est plutôt bien calme en ce moment.
    (je parle du bot/2.1, celui de Adsense ne vient jamais me voir ;))
     
    #13 Remi L., 19 Février 2004
  14. anguenot.com
    anguenot.com WRInaute impliqué
    Inscrit:
    14 Mai 2003
    Messages:
    644
    J'aime reçus:
    0
    Mon site a été (presque) full-crawlé le 17/2

    Pour ce qui est des pages en cache:
    - environ 50% datent du 17/2
    - l'autre moitié date du 24/1

    Pour ce qui est des nouvelles pages: les pages mises en lignes depuis le 24/1 apparaissent (enfin) dans l'index
     
    #14 anguenot.com, 19 Février 2004
(Vous devez vous identifier ou vous inscrire pour poster ici.)
Chargement...
Similar Threads - GoogleBot folie Forum Date
Googlebot confusion des sous domaines serveur ou bot en folie? Crawl et indexation Google, sitemaps 30 Juin 2013
Fréquence passage googlebot Crawl et indexation Google, sitemaps 30 Janvier 2021
Stimuler GoogleBot pour crawler de nouvelles pages Crawl et indexation Google, sitemaps 24 Janvier 2021
Comment augmenter la fréquence de passage de GoogleBot Crawl et indexation Google, sitemaps 10 Décembre 2019
Site inaccessible pour GoogleBot Crawl et indexation Google, sitemaps 21 Octobre 2019
En décembre 2019 changement de l'user agent de Googlebot Crawl et indexation Google, sitemaps 5 Octobre 2019
googlebot crawle des pages inexistantes Crawl et indexation Google, sitemaps 16 Août 2019
Les pages 404 avec googlebot Crawl et indexation Google, sitemaps 14 Juin 2019
Evergreen Googlebot, basé sur Chromium (Chrome open source) Référencement Google 9 Mai 2019
Empêcher Googlebot de crawler/indexer tout un dossier Débuter en référencement 19 Avril 2019