Pb avec fichier robots.txt

neell · 15 Janvier 2013

Bonjour,

J'ai lu déjà pas mal de sujets sur votre forum concernant les fichiers robots mais je n'ai pas trouvé de solution à mon problème...
J'ai conçu un site sous Wordpress et lorsque l'on cherche sur google ce message s'affiche "La description de ce résultat n'est pas accessible à cause du fichier robots.txt de ce site. En savoir plus"

Sauf que je n'ai jamais conçu de fichier robots !! Donc je ne sais pas où le trouver, ni où le modifier ou simplement le supprimer, car je n'en ai pas besoin.

Suite à certains posts lu sur votre forum, j'ai regardé à la racine du FTP mais il n'y a rien, j'ai parcouru tout mes dossiers en vain, j'ai vidé et désactivé les extensions de cache (que je n'ai pas le souvenir d'avoir installées...) mais rien n'y fait, mon site semble toujours bloqué...

J'ai même installé l'extension WP ROBOTS TXT mais je ne trouve pas ce fichier robots...

Voilà ce qui s'affiche lorsque je tape monsite/robots.txt :
User-agent: *
Disallow: /wp-admin/
Disallow: /wp-includes/

J'aimerai pouvoir supprimer ce fichier robots, pouvez-vous m'aider ??

Je ne sais plus quoi faire !!!

Merci...

neell · 15 Janvier 2013

C'est bon, je n'avais pas vu que l'extension avait installé une fenêtre dans "vie privée", me permettant de modifier mon fichier robots.

passion · 16 Janvier 2013

Il va falloir attendre quelques jours maintenant pour que les robots repassent sur votre site web.

Similar Threads - fichier robots	Forum	Date
Search Console Prestashop \| Robot.txt bloque des URL mais Outil de test du fichier robots.txt l'Authorise...	Crawl et indexation Google, sitemaps	21 Novembre 2019
Aide sur le format de mon fichier robots.txt	Crawl et indexation Google, sitemaps	25 Octobre 2019
Page de test et fichier Robots.txt	Crawl et indexation Google, sitemaps	9 Octobre 2019
Search Console un fichier robots.txt pour chaque protocole	Débuter en référencement	15 Août 2019
Search Console bloquée par le fichier robots.txt	Crawl et indexation Google, sitemaps	25 Juin 2019
Search Console Passage de HTTP à HTTPS (Fichiers ROBOTS.TXT et SITEMAP) 0	Crawl et indexation Google, sitemaps	16 Mai 2019
"Indexée malgré le blocage par le fichier robots.txt" Que faire si ce message ?	Crawl et indexation Google, sitemaps	12 Février 2019
noindex fr-fr dans fichier robots.txt avec translatepress	Référencement international (langues, pays)	18 Décembre 2018
Indexée malgré le blocage par le fichier robots.txt	Débuter en référencement	5 Décembre 2018
Bloquer une section dans mon fichier robots.txt	Débuter en référencement	9 Novembre 2018
Mon site est bloqué par le fichier robots.txt	Crawl et indexation Google, sitemaps	12 Septembre 2018
fichier robots.txt bloquer paramètre p=	Crawl et indexation Google, sitemaps	4 Septembre 2018
Où puis-je configurer le fichier robots.txt et le htaccess ?	Débuter en référencement	10 Avril 2018
Résolu Toutes les URL bloquées par le fichier robots.txt	Crawl et indexation Google, sitemaps	28 Mars 2018
Prise en compte du fichier robots.txt	Crawl et indexation Google, sitemaps	22 Avril 2017
Mon fichier robots.txt wordpress	Développement d'un site Web ou d'une appli mobile	24 Octobre 2016
Ne pas indexer une page avec le fichier robots.txt	Débuter en référencement	20 Juillet 2016
Page panier indexée plusieurs fois (duplicate content) ainsi que robots.txt et fichier map	Crawl et indexation Google, sitemaps	17 Mars 2016
La description de ce résultat n'est pas accessible à cause du fichier robots.txt	Crawl et indexation Google, sitemaps	31 Juillet 2015
[Robots.txt] Réindéxer un site suite à une erreur dans le fichier robots.txt	Crawl et indexation Google, sitemaps	23 Janvier 2015