Dans : Indexation Google - Par Olivier Duffez, le Vendredi 5 septembre 2008
Cet article présente le système de crawl (récupération des documents web) et d'indexation (analyse des documents web) par Google.
Dans : Actualité - Par Olivier Duffez, le Jeudi 29 mars 2007
Le robot chargé de crawler le web pour l'indexation dans le moteur de recherche Yahoo était encore rattaché à Inktomi, racheté pourtant par Yahoo il y a plusieurs années. Son nom d'hôte sera désormais crawl.yahoo.net
Dans : Actualité - Par Olivier Duffez, le Dimanche 13 juin 2004
Le
Réseau Abondance a lancé la semaine dernière un nouveau site avec l'outil gratuit Spider Simulator, qui permet de voir en un coup d'oeil ce que les robots récupèrent de la page en venant l'indexer.