Mon robots.txt

WRInaute discret
Bonjour,

Voici mon fichier robots.txt :

Code:
User-Agent: *
Allow: /
Sitemap: http://www.site.com/sitemap.xml
Disallow: /admin/

Est-il correct ? Que signifie t-il ?

Merci pour vos réponses...

Greg
 
WRInaute accro
ivoyages a dit:
Bonjour,

Voici mon fichier robots.txt :

Code:
User-Agent: *
Allow: /
Sitemap: http://www.site.com/sitemap.xml
Disallow: /admin/

Est-il correct ? Que signifie t-il ?

Merci pour vos réponses...

Greg


Bonjour Monsieur

L'instruction "Allow" n'est pas valide dans un fichier robots.txt

Les urls sont acceptées par défaut, sauf celles qui sont refusées avec "Disallow".

Quant au Sitemap, il est tout à fait correct. C'est très bien de le mettre au début, je crois qu'on peut le mettre n'importe où.

En ce qui me concerne, mon fichier robots.txt devrait être syntaxiquement valable, et est considéré comme tel par Google Webmaster Tools, mais quand il y avait un outil sur Wri pour valider sa syntaxe, le message retourné indiquait qu'il y avait une erreur dans la syntaxe.

Je crois que le message disait que ma propre instruction Sitemap était défectueuse, mais je n'ai jamais réussi à savoir pourquoi.

Je ne sais plus où est cet outil sur Wri maintenant, mais comme Google m'a validé, alors... ;)

Bien à vous.

Amicalement.

Jean-François Ortolo ( surnommé The GrosLoto )
 
WRInaute discret
Merci d'avoir pris le temps de répondre.

ortolojf a dit:
L'instruction "Allow" n'est pas valide dans un fichier robots.txt

Les urls sont acceptées par défaut, sauf celles qui sont refusées avec "Disallow".

Si j'ai bien saisi, je peux effacer la ligne Allow ?
 
WRInaute accro
ivoyages a dit:
Merci d'avoir pris le temps de répondre.

Si j'ai bien saisi, je peux effacer la ligne Allow ?



Bonjour Monsieur

Effectivement.

Pour que ton fichier robots.txt soit valide syntaxiquement, il faut que tu effaces la ligne "Allow".

Toutes les urls autres que celles non permises par les lignes "Disallow", seront encore accessibles et indexables par les moteurs de recherche.

Amicalement.

Jean-François Ortolo
 
WRInaute discret
En regardant le code source de votre index, je note que la balise meta robots est sur "no index"
Si vous voulez voir votre site indexé, je vous conseille de la mettre en "follow".
 
WRInaute discret
Hopefull a dit:
En regardant le code source de votre index, je note que la balise meta robots est sur "no index"
Si vous voulez voir votre site indexé, je vous conseille de la mettre en "follow".

Merci. Quel con je suis :!:

ça devrait se répandre maintenant :)
 

➡️ Offre MyRankingMetrics ⬅️

pré-audit SEO gratuit avec RM Tech (+ avis d'expert)
coaching offert aux clients (avec Olivier Duffez ou Fabien Faceries)

Voir les détails ici

coaching SEO
Discussions similaires
Haut