Le fullcrawl, c'est pour quand ?

Olivier Duffez (admin)
Membre du personnel
tu seras prévenu dès que l'un d'entre nous aura vu débarquer un robot full crawl, t'inquiète pas comme ça !!!
 
WRInaute occasionnel
salut,

qu'est ce que t'appelle le passage du bot? son ip?

216.239.46.xxx (celui là c'est un full)
ou

64.68.82.xx(celui ci un fresh)

il y a une grosse difference..
 
WRInaute impliqué
La question à ne pas poser ... :(

On venait juste de s'y faire, aux changements chez Google... On avait presque oublié cette histoire de full crawl.

Ben, p'tet qu'y en aura un... p'tet qu'y en aura pas... on peut pas dire... :?

En principe, y'a un type là... un américain... qui bosse chez Google... qui a laissé entendre que ... oui, mais pas sûr... qu'en tout cas ça serait le dernier.

Bref on patine dans le yaourt, on sait pas, on surveille les passages de Googlebot, qui crawle comme jamais (mais les freshbots seulement). 8)

Et le premier qui voit un deepbot sonne l'alerte :D
 
WRInaute impliqué
meuuuh ! je vais aller me suicider à grandes lampées de cariboo :?

deepcrawl, pourquoi nous as tu abandonnés ???
 
WRInaute discret
juste pour dire que la dernéire fois kil étai passé sur mon site
ct le Samedi 26 Avril 2003, c'est dingue ! et vous ?
 
WRInaute impliqué
Well, perso, honnettttement, je pense que si j'ai fait 1000 visiteurs de plus ce mois, les bebettes de Google doivent y etre pour quelque chose ; non ?...

J'ai des visiteurs dit "divers" signale par Xiti (en 3eme position, les 1er restent la France et les USA en 2 !) ; pour moi, ces divers ne peuvent etre que des robots... Car meme les visiteurs venant d'AOL sont identifies LOL !
 
WRInaute impliqué
Puisque tu en parles, justement cela m'a consolé :lol: !

J'ai été violemment indexé par le bot de deepindex, qui a crawlé soigneusement l'un de mes sites...

Au moins, on est pas abandonné par tout le monde...
 
WRInaute impliqué
Gilbert Wayenborgh a dit:
je suis rassuré ;-)

Ouais : dommage que les crawller ne soit pas identifie (autrement que par vos moyens un peu hards et de specialistes), je veux dire : par les outils de stat, autrement que en "indetermines"...
 
WRInaute discret
luckyluk a dit:
j'utilise direct-stats.com pour mes stats..
ça ne detecte pas les visite de bot...
Xiti o eStats non plus d'ailleurs, c'est ce qui rend GoogleStats indispensable !
Jusqu'à ce qu'une de ces boites ait l'idée d'implanter ça dans ses stats...
Elles devraient peut-être racheter GoogleStats d'ailleurs si Olivier a déposé un brevet.

Bientôt une nouvelle startup : Duffez Technologies ;)
 
Olivier Duffez (admin)
Membre du personnel
je vais plutôt le déposer pour RobotStats car avec GoogleStats je risque quelques problèmes juridiques avec la boite d'un certain moteur de recherche...
 
WRInaute passionné
ah d'accord! moi qui pensais que tu changeais par rapport aux multitudes de robots autres que GOOGLE, mais oui t'as raison faut il se rappeler de l'affaire anu
 
WRInaute discret
De toutes façons robotstats est une bonne idée, rien ne dit que Google restera toujours #1, il faut penser à l'avenir.
 
F
ffaucouneau
Guest
Question idiote : 64.68.82.74

C'est un fresh ou un deep?
 
WRInaute discret
En tout cas, ya eu du changement pendant cette nuit.
Un de mes site qui avait été destitué de la première place, et vu l'indexation de son index tout bonnement supprimé au profit d'une sous page semble il choisi totalement aléatoirement, vient de faire sa réaparition: l'index de mon site est à nouveau present dans les recherches avec description dmoz et tout, mais le placement est toujours mauvais, et mes sites les plus récents absents.

Du mieux, mais reste à faire. Peut etre on il remis des backup anciens mais plus récents ?
 
WRInaute discret
Et tout est redevenu aujourd'hui comme dans la phase precedente: classement catastrophique.
Changer à ce point de jour en jour, j'espère qu'ils ont une bonne raison, outre les spéculations d'ici et de là.
 
WRInaute discret
Moi j'ai l'impression que Google est complètement à la rue en ce moment.
C'est pas normal ces changements incessants et depuis plusieurs semaines.
Ils ont de GROS problèmes on dirait.
 
WRInaute occasionnel
salut,

il commence serieusement à nous gonfler ce google....

c'est là qu'on se rend compte.....que sans lui....y a pas grand chose..

le probleme...c'est que tout le monde l'utilise...
 
WRInaute accro
bin a mon avis, si la situation perdure, il y en aura plus des masses qui vont l'utiliser !

et c'est la qu'on découvre les autres moteurs qui ma foi.. sont vraiment très bien !
 
WRInaute discret
mahefarivony a dit:
Ben tu es pas difficile, la plupart des liens sur le mot clef "ossau" (que je surveille particulièrement) sont des sites vides dont je n'utilise plus l'url depuis des années ! Et il ne connaît même pas Ossau.net qui a plus de 3 mois. Non là tu te trompes !

Sinon, j'aime particulièrement www.alltheweb.com ou mes deux sites sont en première place sur le mot clef "ossau", ce que je trouve tout à fait logique :p
Plus sérieusement c'est quand même une preuve de rapidité car ces deux sites ont moins de 4 mois.
 
WRInaute impliqué
La phase de raz le bol :?: Sérieusement, qui en a raz le bol? Les webmasters et les "commerçants" du web. Pas le surfer lambda qui n'a même pas remarqué que google peinait ces temps-ci (parlez-en autour de vous aux non-initiés, vous verrez). Soit une écrasante majorité qui ne jure encore que par gogol.

Non non, il est trop tôt pour parler de relève ou de déclin. Mais la concurence arrive. Billou is preparing for the fight :twisted:
 
WRInaute impliqué
Je crois qu'il n'y aura pas de deepcrawl cette fois ci.

Googleguy vient d'en rajouter une couche (la troisième) cette nuit sur le thème :

"Hé, je pens que plein de gens ont remarqué que les "freshbots" allaient indexer plus profond dans les sites, là où les deepbot allaient auparavant."

http://www.webmasterworld.com/forum3/13443-19-15.htm

Bref, la fin des deepcrawl se confirme.
 
WRInaute occasionnel
caribou, ton lien débouche sur une page vide pour moi...

Je viens de lire ça sur WebmasterWorld, je ne sais pas si quelqu'un en a déjà parlé ici :
GoogleGuy a dit:
Stefan a dit:
"Ahem, GG, does that mean we will see an actual deepcrawl again?"

If you're asking whether you'll see crawls from the IP range formerly known as deepbot, I would say "probably not." If you're asking whether we'll continue to deeply crawl and index the web, then the answer is "definitely yes."

Hopefully that makes sense. The index that's coming out now was crawled by what people call freshbot. But freshbot can crawl deeply too. It would make more sense for people to rename it deepfreshbot.

En français (traduction libre, plaignez vous au traducteur) :
GoogleGuy a dit:
Stefan a dit:
GG, est-ce que celà veut dire que l'on va encore assister à un deepcrawl ?"

Si ta question est de savoir si vous allez recevoir des visites de la part des groupes d'adresses IP identifiés comme étant des deepbots, je répondrais : "probablement pas." Si la question est de savoir si nous allons continuer à faire des "visites profondes" des sites web et indexer le web, alors la réponse est : "oui, tout à fait"

Heureusement ça a une signification. L'index qui est rendu public maintenant a été "crawlé" par ce que les gens appellent freshbot. Mais les freshbot peuvent faire du "deep crawl" aussi. Ce serait encore mieux si les gens les renommaient en deepfreshbot.

Jocelyn
 
Haut