le mieux pour robot.txt ?

[DISCRET]

vaut-il mieux déclarer user-agent : * ou bien user-agent : all ?

Et une autre question, pourquoi ia_archiver ne relève que le robot.txt et ne vas pas plus loin alors que les autres robots passe sans difficultés ?
ia_archiver serait- il plus ou moins lié à Dmoz ?

 

[Blini]

Je ne suis pas sûr que "all" soit autorisé. A ta place, j'utiliserais "*".

 

[DISCRET]

merci, c'est ce que j'ai mis, mais je commençais à douter car ça fait un mois et demi que IA ne vient que sur le robot.txt et s'arrête là.
Pas grave le temps fera les choses

 

[fredwat]

je rappelle que le fichier en question doît se nommer
robots.txt
:wink:
Fred
(peut être s'agit-il simplement d'une "coquille" dans la frappe :lol: )

 

[Blini]

Ah oui, bien vu. S'il s'agit d'une co(q)uille, elle est présente dans le titre du post, et dans le post original... Bonne piste

 

[fredwat]

Merci mon poulet :lol:
c'est un peu "familier" je le concède..
A+
Fred :wink:

 

[Blini]

c'est pas un poulet, c'est un phénix... bon, ok, il est un poil rachitique, mais quand même ...

 

[DISCRET]

non c'est juste une coquille vide ;-) le nom du fichier est bien avec un S à la fin.