Petit changement pour Slurp (le robot de Yahoo)
Si vous souhaitez être prévenu dès qu'un autre article d'actualité est publié sur ce blog, il suffit de vous inscrire au flux RSS et d'utiliser un logiciel ou un outil en ligne.
Cliquez sur le bouton de votre choix :
Par
Olivier Duffez, jeudi 29 mars 2007
Le robot chargé de crawler le web pour l'indexation dans le moteur de recherche Yahoo était encore rattaché à Inktomi, racheté pourtant par Yahoo il y a plusieurs années. Son nom d'hôte sera désormais crawl.yahoo.net
Slurp, le robot de Yahoo, avait jusqu'à présent une adresse IP reliée au domaine inktomisearch.com ; ce sera désormais crawl.yahoo.net.
Voilà c'est tout ! Pas d'autre changement : le nom officiel reste Yahoo! Slurp (que l'on peut utiliser dans le fichier robots.txt par exemple si l'on souhaite interdire à ce robot d'indexer certaines pages d'un site).
Lire l'annonce faite par Priyank Garg.
Vous souhaitez en savoir plus sur le référencement ? Venez assister aux séminaires de formation que j'organise prochainement (optimiser son référencement, référencer un site dynamique, améliorer son netlinking et utiliser les blogs)).
Tags : Crawler, Fichier robots.txt, Inktomi, Robot d'indexation, Référencement Yahoo, Slurp, User Agent, Yahoo Slurp
Cet article vous a plu ?
Votez pour lui sur Scoopeo et Yoolink (un petit clic suffit !) :
Ajoutez ce blog à vos favoris Technorati !
Référencement gratuit ultra rapide
Si vous souhaitez améliorer le référencement de votre site, il vous faut absolument des bons backlinks... Et sur WebRankInfo c'est très simple, il suffit d'inscrire tous vos sites dans l'annuaire, sans oublier d'indiquer vos flux RSS (ça fait 10 liens de plus à chaque fois).
En plus des liens vous aurez aussi des visiteurs : grâce à sa notoriété, l'annuaire WebRankInfo (repris sur DicoDuNet) génère plus de 250.000 visites par mois sur l'ensemble des sites inscrits...
Si vous respectez bien les consignes d'inscription, votre site sera validé en quelques jours à peine. Par ici le référencement gratuit !
Trackbacks
Aucun trackback.
Les trackbacks pour ce billet sont fermés.
Actualité du mois de Septembre 2008
Ce blog est géré par Dotclear
Commentaires
Aucun commentaire pour le moment.
Ajouter un commentaire
Les commentaires pour ce billet sont fermés.
A lire aussi dans l'actualité WebRankInfo
Yahoo vient d'annoncer que son robot allait désormais gérer les options avancées du fichier robots.txt qui permet aux webmasters d'indiquer quels fichiers ou répertoires doivent être exclus du crawl.
Yahoo vient d'annoncer le support d'une nouvelle valeur pour la balise meta robots : "noydir" sert désormais à préciser qu'on ne veut pas que Yahoo utilise (dans les pages de résultats de son moteur de recherche) le titre du site tel qu'il est référencé dans l'annuaire de Yahoo. Explications...
Comme annoncé par Priyank Garg sur le blog officiel de Yahoo Search, le moteur Yahoo vient d'être mis à jour...
Jusqu'à présent il n'était pas vraiment possible d'empêcher les moteurs de recherche d'indexer une ou plusieurs parties d'une page web. On pouvait éventuellement se débrouiller pour générer une partie de la page avec du JavaScript, ce langage étant (pour l'instant) ignoré des moteurs. Yahoo introduit aujourd'hui la possibilité d'indiquer à son robot Slurp des zones de pages à ignorer, grâce à une classe CSS intitulée robots-nocontent.
Google a annoncé l'acquisition du groupe californien JotSpot, un fournisseur de wikis (produits collaboratifs sur Internet).
Comme vous le savez sans doute, il existe deux principaux types de redirection serveur : permanente (code 301) et temporaire (code 302). Les redirections temporaires posent depuis longtemps des problèmes de référencement (hijacking). Voici comment Yahoo gère tous les cas de figure parmi ces redirections.