• Configuration de l'affichage du site :
  • Affichage en pleine largeur
  • Affichage en basse résolution (800px)
  • Affichage en texte seul

Référencement :
conseils, outils, actualité, forum
tout ça gratuit !

Vous êtes ici : Actualités » Robots.txt

Robots.txt

Robots.txt dans l'actualité

  • Robots.txt : Yahoo supporte les options avancées - Le 04-11-2006
    Yahoo vient d'annoncer que son robot allait désormais gérer les options avancées du fichier robots.txt qui permet aux webmasters d'indiquer quels fichiers ou répertoires doivent être exclus du crawl.

Egalement dans l'actualité

  • Déclarer son fichier sitemap dans le fichier robots.txt - Le 16-04-2007
    Maintenant que les moteurs se sont accordés pour un protocole commun de fichier SiteMap, ils simplifient la soumission de fichier sitemap en proposant d'utiliser le fichier robots.txt (qui est pourtant historiquement utilisé pour indiquer les parties que l'on ne souhaite pas indexer...).
  • Comment gérer simplement les sitemaps de plusieurs sites au même endroit - Le 28-02-2008
    Si vous gérez plusieurs sites, vous avez peut-être rencontré le cas où ça aurait été plus simple pour vous de centraliser au même endroit (sur un même site) tous les sitemaps de ces différents sites. C'était possible depuis octobre 2007 mais un peu compliqué, aujourd'hui c'est facilité par le biais du fichier robots.txt : explications...
  • Petit changement pour Slurp (le robot de Yahoo) - Le 29-03-2007
    Le robot chargé de crawler le web pour l'indexation dans le moteur de recherche Yahoo était encore rattaché à Inktomi, racheté pourtant par Yahoo il y a plusieurs années. Son nom d'hôte sera désormais crawl.yahoo.net
  • Exalead rejoint le protocole Sitemaps.org - Le 25-06-2007
    Et de 5 ! (ou plutôt 4...) On a appris via ExaleadGuy il y a quelques jours dans le forum Exalead sur WebRankInfo qu'Exalead supporte désormais le protocole Sitemaps initié par Google, rejoint par Yahoo et Ask (et bientôt MSN/Live mais on attend toujours).
  • Alexa lance un moteur de recherche d'images - Le 18-12-2006
    Alexa, qui proposait déjà un moteur de recherche classique, vient de sortir un moteur de recherche d'images.

Robots.txt dans le forum

Rechercher dans l'actualité

Utilisez ce formulaire pour chercher dans les actualités et le forum WebRankInfo