Robots.txt

[evasoph]

Bonsoir,
mon outil de statistique m'informe que les robots ne trouve pas mon fichier robots.txt. Je sais que les robots qui ne trouve pas ce fichier indexent toute les pages par defaut.
Mais la question qui me vient alors a l'esprit est : le robot ne met il pas un point positif au site qui lui facilite la tache en mettant un robots.txt vide? En gros est ce que ca revient au meme ? est ce que certain pense que google a un leger penchant?
Merci

 

[Aquarius]

Pour moi, que tu en mettes un vide ou que tu n'en mettes pas revient au même.

le robot ne met il pas un point positif au site qui lui facilite la tache en mettant un robots.txt vide?

Pourquoi devrait-il le faire ? Et en quoi est-ce facilitant de mettre un robots.txt vide ? En rien.

 

[Serious]

Non, ce n'est absolument pas un probleme. L'absence d'un fichier robots.txt est tout a fait normale et c'est le cas sur la plupart des sites. Ce fichier n'est la que pour indiquer les pages que l'on souhaite interdire. Ca peut etre utile pour des raisons de confidentialite ou pour eviter une surcharge inutile (un Gbot ou un Msnbot qui passe, c'est lourd).

 

[Aquarius]

(un Gbot ou un Msnbot qui passe, c'est lourd)

C'est quand même grâce à eux que tu peux avoir des visiteurs sur ton site.