Comment se comporte GGbot chez vous?

Discussion dans 'Crawl et indexation Google, sitemaps' créé par yannouk, 10 Décembre 2003.

  1. yannouk
    yannouk WRInaute passionné
    Inscrit:
    11 Octobre 2003
    Messages:
    1 568
    J'aime reçus:
    0
    Je pense qu'il serait interressant de savoir si googlebot se comporte a peu pres de la meme maniere chez tlm ou pas.

    Pour ma part, il passe sur l'index a peu pres 1 fois par jour, et repart aussitot :p
    Les nouvelles pages ne sont indexées a peu pres qu'une fois par mois, lors d'un deepcrawl apres la ggdance
    et vous?
     
  2. DAVID86
    DAVID86 WRInaute impliqué
    Inscrit:
    15 Octobre 2003
    Messages:
    834
    J'aime reçus:
    0
    le deep crawl commence ces jours ci... ouf. environ 100 pages par jour
    Romain
     
  3. snakeface
    snakeface WRInaute discret
    Inscrit:
    9 Octobre 2003
    Messages:
    184
    J'aime reçus:
    0
    Yes yannouk, moi aussi c'est deep crawl après ggdance !
    Indexation je ne sais pas encore quand il va la faire! 8O

    Après le fullcrawl plus de visites pour l'instant! (ça fait 3 jours)

    J'attends d'apparaitre sur l'index :lol:
     
  4. sdamain
    sdamain WRInaute passionné
    Inscrit:
    14 Octobre 2003
    Messages:
    1 070
    J'aime reçus:
    0
    Pour moi aussi. 196 assages pour 15 pages :?
     
  5. France-spiderman
    France-spiderman WRInaute discret
    Inscrit:
    17 Juin 2003
    Messages:
    75
    J'aime reçus:
    0
    Chez moi alors qu'il venait tous les jours, ggbot ne vient plus depuis 8-10 jours et ça m'inquiète. Même plus sur ma page d'accueil...
    Bizarre. Il doit avoir trop de boulot en ce moment avec les fêtes.... lol
     
  6. MagiX
    MagiX WRInaute impliqué
    Inscrit:
    10 Janvier 2003
    Messages:
    545
    J'aime reçus:
    0
    Soit j'ai rien compris (c'est + que possible ;-) ) soit... Je ne puis participer a ce genre de discutions vu que je n'ai pas de php et demeure tres html... Il est seulement dommage que l'outil idoine propose par WRI (pour surveiller le petit robot) ne fonctionne qu'avec "du" php...
     
  7. kilik
    kilik WRInaute discret
    Inscrit:
    4 Octobre 2003
    Messages:
    140
    J'aime reçus:
    0
    bah magix, met toi zy au php, c'est facile, (j'suis pas programmeur de formation, et pourtant j'ai reussi a comprendre assez vite)
    c'est pratique, c'est rapide, c'est extensible, meme si d'autres langages ont des fonctions différentes, le php couvre a peu pres les besoins basique d'un site internet.
    Je ne dirai pas qu'il dépasse l'asp ou le cfm, ou d'autres langages, mais il est assez puissant
     
  8. DAVID86
    DAVID86 WRInaute impliqué
    Inscrit:
    15 Octobre 2003
    Messages:
    834
    J'aime reçus:
    0
    je dirais qu'il dépasse l'asp en terme de souplesse tout au moins :)
     
  9. Nitou
    Nitou WRInaute impliqué
    Inscrit:
    1 Décembre 2002
    Messages:
    696
    J'aime reçus:
    0
    Chez moi, il vient tous les jours pour indexer environ 4-5000 pages
     
  10. yannouk
    yannouk WRInaute passionné
    Inscrit:
    11 Octobre 2003
    Messages:
    1 568
    J'aime reçus:
    0
    wahou...bah nitou apparement t en pole position la :p
     
  11. WebRankInfo
    WebRankInfo Admin
    Membre du personnel
    Inscrit:
    19 Avril 2002
    Messages:
    19 079
    J'aime reçus:
    333
    c'est marrant Nitou, on a environ autant de pages indexées dans Google, mais moi il vient voir 2 fois moins de pages.
    peut-être qu'il commence à les connaitre par coeur :)
     
  12. Nitou
    Nitou WRInaute impliqué
    Inscrit:
    1 Décembre 2002
    Messages:
    696
    J'aime reçus:
    0
    C'est pas plus mal, ça conserve de la bande passante ;-) mais c'est vrai qu'il revisite régulièrement des pages déjà indexées. Peut-être que le contenu de mon site est un peu plus dynamique.
     
  13. cleden
    cleden WRInaute impliqué
    Inscrit:
    6 Janvier 2003
    Messages:
    917
    J'aime reçus:
    0
    Pas très sympa Googlebot avec mon site, il n'a visité que 21 pages de mon site aujourdh'ui :cry: Je me rassure en me disant que 21 pages sur a peu près 30 c pas mal :lol:

    D'autre part, G a affecté un PR de 4 à tous les index de mes repertoires... étrange, sachant que certains n'ont presque pas de BL. Mais bon, on ne va pas se plaindre...

    Loïc
     
  14. sdamain
    sdamain WRInaute passionné
    Inscrit:
    14 Octobre 2003
    Messages:
    1 070
    J'aime reçus:
    0
    GG est occupé a indexé pas mal de pages chez moi, il en est à 78 pages :)
    Espérons que ca va durer et que toutes les page vont y passer cette nuit.
     
  15. yannouk
    yannouk WRInaute passionné
    Inscrit:
    11 Octobre 2003
    Messages:
    1 568
    J'aime reçus:
    0
    je suis jaloux, pas encore de deepcrawl chez moi :)
     
  16. DAVID86
    DAVID86 WRInaute impliqué
    Inscrit:
    15 Octobre 2003
    Messages:
    834
    J'aime reçus:
    0
    en fait, il n'a visité que 132 pages alors que pompos m'en a visite 4800... et il n'a plus l'air d'avoir faim :( le fénéant!
    Romain, deepcrawl amorcé, mais juste amorcé...
     
  17. iconso
    iconso WRInaute occasionnel
    Inscrit:
    8 Avril 2003
    Messages:
    358
    J'aime reçus:
    0
    Pour moi le deep crawl est toujours bien identifiable dans les passages du bot, il a commencé le 08/12 et continue encore en ce moment : plus de 25000 pages crawlées depuis cette date.

    Fred
     
  18. DAVID86
    DAVID86 WRInaute impliqué
    Inscrit:
    15 Octobre 2003
    Messages:
    834
    J'aime reçus:
    0
    et ce sont des robots en 64.68.82?
     
  19. iconso
    iconso WRInaute occasionnel
    Inscrit:
    8 Avril 2003
    Messages:
    358
    J'aime reçus:
    0
    oui oui c'est bien du 64.68.82.XXX
    En fait maintenant j'appelle deep crawl une méthode de crawler, qui n'est pas (plus) en relation avec les anciens bots qui étaient dédiés à cette tache : si les bots ont changés, les méthodes sont très similaires.

    Il semblerait que ce que certains appellent everflux soit uniquement dédié à certaines pages, bien rankées (ou potentiellement bien "rankables"). Pour les autres le schéma ancien reste en partie vrai j'ai l'impression...

    Fred
     
  20. DAVID86
    DAVID86 WRInaute impliqué
    Inscrit:
    15 Octobre 2003
    Messages:
    834
    J'aime reçus:
    0
    potenciellement bien rankable : tu veux dire, en lien avec une page de PR5 par ex, mais encore à 0?
     
  21. iconso
    iconso WRInaute occasionnel
    Inscrit:
    8 Avril 2003
    Messages:
    358
    J'aime reçus:
    0
    Oui c'est presque ca. En fait beaucoup de gens sur ce forum se plaignent que certaines pages ne sont meme pas visitées par le bot : pour ces gens il faut attendre le "Full Crawl".

    D'autres au contraire voient les nouvelles pages indexées et bien positionnées en quelques jours seulement, et cela quelle que soit la date de mise en ligne. Ces pages sont ajoutées dans l'index et apparaissent avec un PageRank 0, mais sont assez bien classées sur les requetes, et ne disparaissent pas de l'index au bout de quelques jours.

    Pour moi la différence est peut être liée à l'importance potentielle (futur PR) de la page, sinon tout le monde serait logé à la même enseigne. Mes nouvelles pages profondes du site sont ajoutées seulement après le full crawl, alors que j'ai vu récemment une catégorie (liée par ma home) être indexée presque immédiatement dès sa mise en ligne et pas en full crawl. Avant il fallait que j'attende le full crawl meme pour les pages liées de ma home.

    En plus du rank potentiel de la page, je pense qu'il y a d'autres critères comme :
    - L'ancienneté du site
    - La fréquence de mise à jour générale

    Fred
     
  22. DAVID86
    DAVID86 WRInaute impliqué
    Inscrit:
    15 Octobre 2003
    Messages:
    834
    J'aime reçus:
    0
    oui, j'ai cru remarquer que les pages mises à jour souvent sont crawlées -ce qui est logique- pratiquement tout les jours.
    Mais l'ancienneté d'un site, c'est l'ancienneté dans sa base (ce que je pense), ou la date de création du fichier (et la, je sais pas comment il la récupère)?
     
  23. iconso
    iconso WRInaute occasionnel
    Inscrit:
    8 Avril 2003
    Messages:
    358
    J'aime reçus:
    0
    Attention je parle ici uniquement de pages nouvelles, non présentes dans l'index Google. Les pages connues de Google sont crawlées plus ou moins régulièrement selon d'autres critères (meme s'ils sont assez proches).

    Dans le concept d'ancienneté du site, je pense qu'il faut plutot considérer qu'un site trop jeune ne peut pas bénéficier de l'everflux car Google n'a pas assez d'infos sur ses mises à jour, son nombre de pages, etc..

    Fred
     
  24. puppetMaster
    puppetMaster WRInaute discret
    Inscrit:
    16 Octobre 2003
    Messages:
    154
    J'aime reçus:
    0
    il a fait 2 deep crawl : lundi et jeudi dernier.
     
  25. DAVID86
    DAVID86 WRInaute impliqué
    Inscrit:
    15 Octobre 2003
    Messages:
    834
    J'aime reçus:
    0
    pour l'instant, google n'a pas été en dessous du niveau -2 chez moi... et vous? Jusqu'à quel niveau vas t'il??
    Romain
     
  26. puppetMaster
    puppetMaster WRInaute discret
    Inscrit:
    16 Octobre 2003
    Messages:
    154
    J'aime reçus:
    0
    lundi dernier et jeudi il a été jusqu'au dernier niveau chez moi apparemment (niveau 5,6,7).
     
  27. chitopila
    chitopila WRInaute discret
    Inscrit:
    12 Août 2003
    Messages:
    110
    J'aime reçus:
    0
    Chez moi, Google passe environ 2 fois par semaine mais il ne crawle que 8 à 10 pages à chaque fois. Je n'ai encore jamais eu de deep crawl !!!
     
  28. Kaledonie
    Kaledonie WRInaute discret
    Inscrit:
    11 Août 2003
    Messages:
    138
    J'aime reçus:
    0
    Salut,

    Pour ma part GG passe tous les jours voir ma première page (PR 6)
    Depuis une semaine, il fait un full crawl à raison de 80-100 pages par jour, avec des IP en 64.68.80, 64.68.82 et 64.68.84

    Voilà, voilà :D
     
  29. yannouk
    yannouk WRInaute passionné
    Inscrit:
    11 Octobre 2003
    Messages:
    1 568
    J'aime reçus:
    0
    erf moi toujours pas de full crawl a l'horizon :(
     
  30. DAVID86
    DAVID86 WRInaute impliqué
    Inscrit:
    15 Octobre 2003
    Messages:
    834
    J'aime reçus:
    0
    Une petite partie des Niveaux 3 visité depuis ce matin... et chez moi, ça descend jusqu'à 5 ...
     
  31. cucupidon
    cucupidon Nouveau WRInaute
    Inscrit:
    30 Octobre 2003
    Messages:
    19
    J'aime reçus:
    0
    Idem sauf que moi c'est plutot 10 a 15 pages... Mais le plus surprenant c'est qu'il enticipe la cration de nouvelle pages ex:

    -www.monsite.com/brows?1
    a
    -www.monsite.com/brows?82 sont des pages existantes

    A chaque passage il test la derniere page existante +1 (ici dans lexemple:www.monsite.com/brows?83) . Ce qui est bizard c'est que dans tous les cas (meme si il fait +500) il y aurait une page de generée avec header et footer mais sans contenu intermediare ce qui pourait qd meme etre compté comme une page classique mais il ne cherche pas a extrapoler plus que le +1...
     
Chargement...
Similar Threads - comporte GGbot Forum Date
Prestashop - Comportement bizarre d'une requête SQL e-commerce 1 Décembre 2018
Comportement de l'utilisateur Google Analytics 12 Avril 2018
Décalage entre suivi d'objectifs sur événements et événements dans Comportement Google Analytics 4 Juillet 2016
Analyser le comportement des visiteurs sur une landing page AdWords 12 Mai 2016
Que signifie "taux d'abandon" dans les flux de comportement et d'utilisateurs ? Google Analytics 30 Avril 2016
Comportement du serveur pour des URLs inexistantes URL Rewriting et .htaccess 22 Décembre 2015
Virer pub comportementale sur son site AdSense 29 Novembre 2015
Comportement inconnu dans google images pour une redirection YouTube, Google Images et Google Maps 3 Septembre 2015
Suivre avec précisions le comportement de pages Youtube en site référent Google Analytics 26 Août 2015
Statistiques "Google et le comportement des internautes" Référencement Google 27 Mai 2015
  1. Ce site utilise des cookies. En continuant à utiliser ce site, vous acceptez l'utilisation des cookies.
    Rejeter la notice