Portrait Olivier Duffez

Olivier Duffez

Créateur de WebRankInfo,
consultant en référencement

Bingbot : le crawler de Bing

Jusqu’à présent, le nom officiel du robot du moteur de recherche de Microsoft n’a pas évolué aussi rapidement que les noms du moteur : il s’appelle toujours msnbot, du nom de MSN Search, l’ancêtre de Live Search, celui-là même qui a engendré l’actuel Bing :-) A partir du 1er octobre 2010 le nom d’agent sera donc Bingbot.

Quel est l’impact de ce changement ?

Logo de Bing

Bing et son crawler

Dean Wierman and Fabrice Canel l’ont annoncé sur le blog officiel avec plusieurs mois d’avance, histoire que tous les développeurs web se préparent à tenir compte de ce changement. Rien d’exceptionnel, mais ce changement peut concerner certains d’entre vous :

  • ceux qui analysent les crawlers dans leurs logs
  • ceux qui utilisent le fichier robots.txt pour indiquer au robot de Bing les rubriques du site qu’il ne doit pas crawler
  • ceux qui font du cloaking en fonction du UserAgent (par exemple pour supprimer les identifiants de session…)
  • ceux qui utilisent des extensions comme UserAgentSwitcher
  • si j’ai oublié d’autres cas, signalez-moi, merci !

Le UserAgent de Bing

Voici le nouveau nom officiel complet du robot de Bing, en vigueur au 01/10/2010 :

Mozilla/5.0 (compatible; bingbot/2.0 +http://www.bing.com/bingbot.htm)

(Pour l’instant la page http://www.bing.com/bingbot.htm ne semble pas répondre, c’est sans doute trop tôt).

Dans le fichier robots.txt, il faudra utiliser « bingbot » (sans les guillemets bien entendu).

Si vous rencontrez des problèmes avec ce crawler, les équipes chez Microsoft ont mis en place un système très performant de communication avec les webmasters : l’email ! Il vous suffit en effet d’écrire à bingbot@microsoft.com pour raconter vos soucis…

Je n’ai pas vu d’infos concernant les petits frères de MSNbot, à savoir MSNBot-Media, MSNBot-NewsBlogs, MSNBot-Products et MSNBot-Academic (d’ailleurs j’ignore s’ils existent encore ?).

Cet article vous a-t-il plu ?

Cliquez pour voter !

Laisser un commentaire

Remarques :

  • Si vous souhaitez poser une question ou détailler un problème technique, il ne faut pas utiliser le formulaire ci-dessous qui est réservé aux avis. Posez votre question directement dans le forum Gmail de WebRankInfo. L'inscription est gratuite et immédiate.

  • En postant un avis, vous acceptez les CGU du site WebRankInfo. Si votre avis ne respecte pas ces règles, il pourra être refusé. Si vous indiquez votre adresse email, vous serez informé dès que votre avis aura été validé (ou refusé...) ; votre adresse ne sera pas utilisée pour vous envoyer des mailings et ne sera pas revendue ou cédée à des tiers.

6 commentaires

Jef

Concernant MSNBot-Media, je le vois de temps en temps : il doit toujours exister. Pour ls autres, ce n’est pas certain.

Répondre
Compare Mandataire

Je ne sais pas si l’on peut considérer cela comme une bonne nouvelle. Cela ne change pas grand chose pour ma part. Y’en a-t-il qui se servent de l’user agent pour faire du black hat ?

Répondre
delbecques

Dommage que msn mette du temps à référencer un site par rapport à google. Google est le plus important certes mais msn apporte un peu de trafic.

Répondre
zecat

Ca sonne bizarre Bingbot …

Ca donne envie de répondre : « Oui, entrez c’est ouvert » Lol

Répondre
moterc

Assiste-t-on uniquement à un changement de nom ? Ou va-t-on également avoir des crawls plus fréquents ?

Répondre
greg

bing semble plus rapide qu’avant à référencer un site c’est une bonne nouvelle.

Répondre