fichier robots.txt

Bonjour, Je me pose la question de désindexer des pages zombies sur un de mes sites. Parmi les pages zombies identifiées, il y a notamment les...

Bonjour, à tous, j'ai des ressources bloquer et du coup Google m'indique que mon site n'est pas responsive. Voici la page des erreurs :...

bonjour quelqu’un peut aider pour ajouter un variable au fichier robots.txt pour bloquer affichage des (?p=3 ?p=4 ?p=5 ?p=6 ....) exemple d'un...

hello, Pouvez vous me dire ce qui se trouve dans le robots.txt de wordpress/woocommerce et ce que vous bloquez ? Google indexe toutes les pages...

Bonjour à tous, j'ai reçu un message de google me disant que j'avais un "problème de couverture de l'indexe" je ne sais pas quoi faire pour...

Bonjour à tous , je tiens à vous demander de m'indiquer où puise-je configuré le fichier robots.txt et le htacess ?? cordialement ...

Bonjour Je viens de mettre en ligne un site réalisé avec Wordpress avec seulement 3 pages d'accueil pour le moment (FR/EN/ES). Je l'ai ensuite...

Bonjour, J'ai un souci dans le Google Search Console, suite au passage en https. Dans la nouvelle propriété en https il est indiqué un petit...

Bonjour, Je travaille sur des cocons. Pour pouvoir respecter ceux-ci, il faut éviter que ça s'éparpille partout pour avoir vraiment une structure...

Bonjour à tous, Dans mon robots.txt, j'ai mis en disallow ces éléments : Disallow: /wp-login.php Disallow: /wp-admin Disallow: /wp-includes...

Bonjour, Google crawl toujours mon ancien robots.txt A chaque fois il me sort en erreur mes vielles pages de mon site web. J'ai basculé mon...

Hello, Je viens de tomber sur cet extrait concernant le robots.txt : Ensuite, et c’est moins connu, les URLs bloquées par le robots.txt ont un...

Bonjour, Sur mon site j'ai beaucoup de pages de type : https://www.monsite.fr/page.html?code=82&idpartenaire=60876 Ne souhaitant pas que Google...

bonjour à tous, sur mon CMS prestashop j'ai cette ligne qui est considérée comme "erreur grave" dans GWT (outil test robots.txt) : Disallow: /*?...

Bonjour, J'ai il y a plus de 2 mois modifié mes urls (url rewrtitting) sur un de mes sites et ai fait en sorte que les anciennes renvoient une...

Lors de crawl sur mon site, je me suis rendu compte que j'avais presque 30 000 pages, pour seulement 6 000 produits. Pour chacun de mes articles,...

Bonjour, mon site en SPIP à la particularité de mettre en disallow sur le robot.txt le repertoire /local/ où se trouve les images. Bravo...Selon...

Bonjour, j'ai quelques pages de mon e-commerce que je n'ai aucune raison d'indexer: le panier, la page de login, d'inscription, etc. Je les ai...

User-agent: * Disallow: /wp-admin/ Disallow: /wp-content/ Allow: /wp-content/uploads/ Disallow: /cgi-bin Disallow: /wp-login.php Disallow:...

Bonjour à tous, Google Search Console m'indique qu'un certain nombre de ressources bloquées sont détecté sur mon site. En scrutant mon fichier...

Bonjour, J'aimerais avoir des renseignements sur le fonctionnement du robots.txt, s'il vous plaît. Je souhaite que tous les moteurs indexent...

Bonjour, sur le site que j' ai créé : www.aller-en-chine.net, je souhaite que mes mentions légales ne soient pas indéxées par les moteurs de...

Bonjour, J'ai cherché sur GG des conseils par ci par là mais assez contradictoires (ex: JS à exclure ou pas...) D'où ma question quel serait le...

Bonjour WRI, J'ai une petite question concernant le robots.txt et la commande : Disallow: /*? Dans le cas d'un site multilingue qui gère les...

hello J'ai un fichier robots.txt configuré sur un wordpress comme ceci mais webmaster tools me dit qu'il ne peut pas explorer certaines urls à...

Bonjour, Que signifie ce robots.txt? User-agent: * Disallow: / Allow: /$ Que seule la page d'index est autorisée? Si j'ajoute: Allow:...

Bonjour, Tout d'abord désolé si la question à déjà été posée, j'ai cherché dans le forum mais je n'ai pas trouvé. Je possède un petit site...

Bonjour à tous, Je viens de friser la crise cardiaque en voyant tous mes sites en alerte sur GWT. Et cela concerne des fichiers robots que je...

Bonjour tout le monde, J'ai une petite question concernant un site qui tourne sous Prestashop. Dans mon robots.txt, je refuse tout ce qui se...

Bonjour à tous. N'ayant rien trouvé sur ce sujet spécifique j' espère trouver une réponse sur ce lumineux forum. Sachant que Google n'aime pas...

Bonjour, étant donné que seul Google accepte la balise Noindex dans le fichier robots.txt, je souhaite donc mettre disallow pour les autres...

Bonjour, fin aôut, j'ai fait une grosse moulinette : passage en https avec redirection 301 http vers https dans mon .htaccess, passage sous...

Bonjour, j'aimerais vos avis sur le récent commentaire de John Mueller, sur le fait qu'il fallait éviter d'utiliser la commande noindex dans le...

Bonjour à Tous, Je me présente, je m'appelle Gabriel et je suis nouveau sur ce Forum. Je ne suis pas Webmaster de métier, mais le fait d'avoir...

Bonjour, Dans mon fichier robots.txt j'ai indiqué (entre autres insctructions) ceci : ... Disallow: /?villes ... Dans google je fais ceci...

Bonjour, J'ai des pages que je ne souhaite ni faire suivre par les MR, ni indexer. Je précise qu'elle n'ont pas encore été mises en ligne. Il me...

bonjour j'ai parcouru un peut le site, et malgré l'aide de notre amis google, j'avoue que je ne suis pas sûr que ça marche,...

bonsoir j'ai bien vue qu'apperement olivier disait que ça pouvait être un soucis, mais j'ai bing qui n'indexe pas correctement mon site ça passe...

Bonjour, si dans un fichier robots.txt , j'ai User-agent:* et User-agent:Googlebot faut il que je repète les Disallow pour googlebot, du genre...

Bonjour à tous, J'ai effectué il y a quelques jours une migration de mon site en souscrivant à un hébergement chez gandi. J'ai reconstruit...

Bonjour, J'ai récemment fait une grossière erreur en manipulant les robots.txt qui m'a coûté la désindexation totale de mon site...

Bonjour à tous, Ma question est dans le titre ! :) En fait j'ai cherché sur le forum et il me semble avoir trouvé de vieux post qui parlent de...

Bonjour, suite à la mise en ligne d'un nouveau site fait un peu trop vite, le fichier robots.txt qui empêchait l'indexation du site en...

Bonjour, Je viens vers vous aujourd'hui car je suis un peu désespérée. :cry: J'ai créé un blog via bloggeur il y a 10 jours, j'ai installé...

Bonjour à tous, J'ai crée un site sur Wordpress. A sa mise en ligne, je n'avais pas supprimé les pages natives de mon thème, que Google a crawlé...

Bonjour, Je voudrai une confirmation quant a l'utilisation de mon fichier Robots.txt Je voudrai en fait faire quelque chose mais je ne suis pas...

Bonsoir, Voici mon robots.txt : User-agent: * Sitemap: http://www.aair-parachutisme.fr/sitemap.xml Est-il bon de proposer directement mon...

Bonjour, Mon prestataire a ajouté un fichier robots.txt à mon site et depuis je n'ai plus de visites sur mon site. Voici le contenu du fichier :...

Bonjour, Mes sources obscures sur le SEO m'ont toujours conseillé de disallow mon dossier images car on me disait que puisqu'il y avait pas de...

bonjour à tous, à ma grande surprise google m'a indexé une url (/123.pdf) contenant un fichier pdf. quelle est la bonne méthode pour que cette...

Bonjour, Comment bloquer un type d'url précise via le robots.txt. Par exemple : Disallow: /Forum/post bloque...

Bonjour, J'aimerai protéger des fichier avec un document.htaccess pour que les internautes n'arrivent pas a tous les télécharger. J'utilise...

Vu dans le fichier robots.txt d'une grosse société de formations en web : User-agent: * Allow: / Disallow: /prive/ Noindex: /prive/ J'ai raté...

Bonjour, Il se passe une chose que j'ai du mal à saisir dans les GWT. Google trouve 1372 URL bloquées par le robots.txt que voici pour vous...

Bonjour Par avance je m'excuse si ma question peut paraître stupide ou si elle a déjà été résolue, j'ai cherché mais je n'ai rien trouvé ! Voilà...

Bonjour, Je viens de mettre mon nouveau site en ligne (date de mise en ligne Lundi 7 juillet en fin de journée). Je rencontre actuellement un...

Hello, Je cherche a extraire des informations du fichier robots.txt s'il existe.. plus précisément, j'aimerais savoir si cette ligne "Disallow:...

A l'occasion des 20 ans du standard, je vous propose des astuces et conseils sur le fichier robots.txt

Bonjour, J'ai un petit soucis avec mon robots.txt. Il se trouve en effet que j'ai certaines balises title manquantes, en double, etc. du fait...

Bonjour, Je me pose actuellement une question sur le fonctionnement de google et de l'impact potentiel sur le SEO. Voilà ma question : Si...

Bonjour à tous, J'ai eu la surprise de découvrir que mon fichier robots.txt était indexé? Surprenant? non? Est ce normal, ou il y a t il un...

Bonjour, voici mon htaccess : RewriteEngine On RewriteRule ^(.+)$ /? [R=301,L] RewriteCond %{HTTP_HOST} !www\.monsite.fr$ RewriteRule ^(.*)...

Bonjour Mon client a conservé à la racine de son serveur, des anciennes pages de liens, comme on en faisait à l’époque avec des dizaines de liens...

Bonjour, j'ai une question: voilà que un client me dit que ses url malgré qu'elles soient interdites à l'indexation par les robots.txt sont...

Bonjour, Pensez-vous que mettre en place des redirections 301 sur des URL en disallow soit préjudiciable, voir pénalisé par Google ? Bonne journée !

Bonjour, dans mes outils Webmasters-Tools je constate du duplicate à "Améliorations HTML" - Balises META description en double - Balises title...

Bonjour Suite à des avis, je veux tester Wordpress... Mais je ne veux pas que mes essais soient indexés... Actuellement, j'ai ce robot.txt qui...

Bonjour à tous, J'ai donc mis en ligne un nouveau site la semaine dernière. http://pandadub.fr/ Problème classique, lorsque j'envoie mon...

Google ne traite pas bien les fichiers robots.txt qui renseignent les sitemaps. Cela fait quelques semaines ( ou mois ) que je lui ai renseigné l...

Bonjour à tous, Sur un site sur lequel je travaille, l'agence qui s'occupe du développement à mis en ligne la nouvelle version jeudi. Au moment...

Bonjour Dans les résultats Google j'ai ce problème : [img] J'utilise wordpress :cry:

Bonjour, en lançant la fonction "voir comme google" sur GWT, parmi les erreur sont indiquées toutes les photos, j'aimerai comprendre comment ça...

Bonjour! Je viens de voir un post et dans mon fic hier robots.txt j'avais seulement qu'une ligne... User-agent: * Je viens de la remplacer par...

Bonjour à tous. J'ai eu le bonheur de me faire hacker il y a quelques jours, mon fichier robots avait un beau disallow all. Depuis mon fichier...

Bonjour, Lors d'une chute du référencement de mon site (un ecommerce tournant sous prestashop), et en creusant avec mon webmaster (qui me...

bonjour, j'ai depuis peu mis en ligne un second site sur l'hébergement utilisé pour mon premier site. Sans modifier le fichier robots.txt du...

Bonjour tout le monde, Depuis un petit moment, Google indexe mes différentes pages (Home, pages "catégorie", etc.). Ce qui pose quelques soucis...

Bonjour, Hier, j'ai mis un fichier "robots.txt" sur mon site qui est disponible ici : http://dailymobile.fr/robots.txt , or lorsque je vais sur...

Bonjour à tous, Je viens vers vous car après avoir suivi les procédures de google, wordpress et autres sur le web, je n'ai toujours pas trouvé...

Bonjour, Voilà j'ai un problème dont je n'arrive pas à me dépêtrer ! Nous avons lancé notre nouveau site le 15 mai, à la suite de quoi, j'ai...

J'ai regroupé dans un même dossier les résultats de plusieurs tests que j'ai effectués ces dernières semaines, sur le crawl, l'indexation et les...

Bonjour à tous ! Petite question qui me taraude aujourd'hui et après de nombreuses recherches je ne trouve que des contradictions. Voici l'étude...

Bonjour à tous, Un petit point de précision m'intéresse : Si je souhaite désindexer des pages avec des paramètre du type:...

Bonjour, j'avais un site sous Magento et je l'ai migrer vers Prestashop. Je suis en mode "remplissage" de la boutique de lingerie sous Prestashop...

Bonjour, J'ai plusieurs erreurs qui sortent dans les GWT et qui concernent les dossier d'un forum, à savoir des url de type :...

Bonjour, je me demande si il faut indexer le dossier img de mon site pour qu'il apparaissent dans le moteur de recherche de Google Images. Mon...

Bonjour à tous, je possède un site internet, sur certain mot clé j’étaie dans les premier, maintenant que je teste je le suis pas j'essaye de...

Bonjour, J'ai sur une page de mon site un formulaire avec un traitement via un script php localisé sur mon serveur. Une donnée est passée dans...

Salut à tous, Je cherche à supprimer des pages de l'index de Google à partir du fichier robot.txt. Exemple /page-de-mon-site existe aussi en...

Bonjour :) J’espère que vous aller pouvoir m'aider. GWT remonte un grand nombre d'erreur 404 (ce sont des backlinks qui redirige sur d'anciennes...

Bonjour à tous, Pour empêcher l'indexation d'un sous domaine type "m.domaine.fr" avec le robots.txt, est-ce que le code ci-dessous est ok ?...

Bonjour, Je me permets de vous contacter car j'ai un robots.txt à faire et j'aimerais empêcher l'accès à toute une partie du site qui est...

Bonjour, Il me semble que notre ami GoogleBot procède dans un premier temps à l'exploration des URLs d'un site, puis à l'indexation des pages...

Bonjour à tous! Je compte sur les experts de ce forum pour me sortir du pétrin... Il y a environ 1 semaine j'ai mis en ligne mon site e-commerce...

Bonjour J'ai un hébergement professionnel pour mon domaine principal (disons 'mondomaine.net'...) qui me laisse assez d'espace disque pour y caser...

Bonjour, Je n'arrive pas à trouvé une info clairement expliqué sur ce problème : Voila j'ai des url du type : mon-site/informations/add.html...

Bonjour, J'ai créé mon compte google webmasters avant-hier. Ce matin, 3 erreurs d'exploration : - DNS - connectivité du serveur - exploration par...

Bonjour, J'ai lu déjà pas mal de sujets sur votre forum concernant les fichiers robots mais je n'ai pas trouvé de solution à mon problème... J'ai...

Bonjour, il y a 6 semaines, suite à une refonte de mon site internet et de son blog, mon webmaster a changé l'url de mon blog et par conséquent...