Quel robots.txt pour un wordpress "jeune" ?

Discussion dans 'Référencement Google' créé par toutatix, 24 Juin 2016.

Tags:
  1. toutatix
    toutatix WRInaute discret
    Inscrit:
    6 Septembre 2010
    Messages:
    208
    J'aime reçus:
    6
    Bonjour,

    J'ai cherché sur GG des conseils par ci par là mais assez contradictoires (ex: JS à exclure ou pas...)

    D'où ma question quel serait le contenu d'un robots TXT pour un site naissant 15 pages et 3 articles Qu'est ce qui serait important d'exclure ?

    Merci pour votre retour.
     
    #1 toutatix, 24 Juin 2016
  2. spout
    spout WRInaute accro
    Inscrit:
    14 Mai 2003
    Messages:
    9 152
    J'aime reçus:
    334
    Meilleur robots.txt:
    Code:
     
    #2 spout, 24 Juin 2016
  3. ABCWEB
    ABCWEB WRInaute passionné
    Inscrit:
    22 Octobre 2015
    Messages:
    1 289
    J'aime reçus:
    169
    Moi j'exclu l'interface d'administration
     
    #3 ABCWEB, 24 Juin 2016
  4. toutatix
    toutatix WRInaute discret
    Inscrit:
    6 Septembre 2010
    Messages:
    208
    J'aime reçus:
    6
    Je vois que votre conseil est de laisser les choses se faire naturellement mais...

    Wordpress ne crée pas naturellement de "doublons" ? par "category" / "author" / "Year" etc ?
     
    #4 toutatix, 24 Juin 2016
  5. Marie-Aude
    Marie-Aude WRInaute accro
    Inscrit:
    5 Juin 2006
    Messages:
    16 662
    J'aime reçus:
    134
    Cela se gère avec du noindex, follow, pas dans le robots.txt
     
    #5 Marie-Aude, 24 Juin 2016
  6. toutatix
    toutatix WRInaute discret
    Inscrit:
    6 Septembre 2010
    Messages:
    208
    J'aime reçus:
    6
    merci :)
     
    #6 toutatix, 24 Juin 2016
(Vous devez vous identifier ou vous inscrire pour poster ici.)
Chargement...
Similar Threads - robots wordpress jeune Forum Date
Wordpress et le robots.txt Débuter en référencement 21 Juin 2021
meta robots Wordpress Demandes d'avis et de conseils sur vos sites 26 Octobre 2018
WOOCOMMERCE wordpress ROBOTS.TXT, que bloquez vous ? e-commerce 22 Juin 2018
Mon fichier robots.txt wordpress Développement d'un site Web ou d'une appli mobile 24 Octobre 2016
Robots spameurs commentaires wordpress bonne nouvelle ! Débuter en référencement 10 Février 2015
Site wordpress url bloquée par robots.txt Problèmes de référencement spécifiques à vos sites 17 Juin 2013
Site wordpress url bloquée par robots.txt Problèmes de référencement spécifiques à vos sites 24 Novembre 2012
Robots.txt, wordpress et gwt Crawl et indexation Google, sitemaps 1 Octobre 2011
WordPress - Robots.txt Crawl et indexation Google, sitemaps 16 Juin 2010
Optimisation de ROBOTS.TXT et blog WordPress Problèmes de référencement spécifiques à vos sites 1 Décembre 2008
Pourquoi ne pas utiliser le robots.txt pour interdire l'indexation ? Débuter en référencement 14 Avril 2022
canonical et robots=index sur une même page Débuter en référencement 7 Décembre 2021
le noindex dans le robots.txt Débuter en référencement 19 Novembre 2021
suppression des pages bloquées par robots.txt Débuter en référencement 18 Octobre 2021
Faut-il déclarer le sitemap dans le robots.txt ou search console ? Crawl et indexation Google, sitemaps 14 Juillet 2021
Les mots-clés de mon site ne sont pas détectés par les robots de référencement Problèmes de référencement spécifiques à vos sites 7 Juillet 2021
Search Console noindex détecté dans la balise Meta robots Débuter en référencement 21 Mai 2021
Urls filtrées indexées et crawl robots.txt Crawl et indexation Google, sitemaps 19 Mai 2021
Robots : n'autoriser que les 4 ou 5 moteurs de recherche principaux Crawl et indexation Google, sitemaps 15 Janvier 2021
erreurs robots.txt Crawl et indexation Google, sitemaps 23 Décembre 2020