fichier robot.txt et worpress

Discussion dans 'Crawl et indexation Google, sitemaps' créé par zen la tortue, 4 Avril 2011.

  1. zen la tortue
    zen la tortue WRInaute occasionnel
    Inscrit:
    10 Septembre 2006
    Messages:
    261
    J'aime reçus:
    0
    bonjour,
    je débute avec worpress et je me demandais quel fichier robot.txt mettre à la racine car je n'aime pas trop le plugin SEO.

    User-agent: Mediapartners-Google*
    User-agent: *
    Sitemap: http://www.monsite.com/sitemap.xml
    Disallow: /wp-admin
    Disallow: /wp-includes
    Disallow: /wp-content/plugins



    voila aprés le reste je pense que le boot google pour le indexer


    merci de me renseigner
     
  2. UsagiYojimbo
    UsagiYojimbo WRInaute accro
    Inscrit:
    23 Novembre 2005
    Messages:
    12 011
    J'aime reçus:
    133
    Les plugin SEO ne font pas que ça, et gère très bien le robots.txt (du moins YOAST, AIOSEO, je ne me souviens plus).
     
  3. zen la tortue
    zen la tortue WRInaute occasionnel
    Inscrit:
    10 Septembre 2006
    Messages:
    261
    J'aime reçus:
    0
    merci pour ta réponse mais ma question est si je fais un robot.txt à la main pour interdire aux robots d'indexer les dossiers suivant:

    Disallow: /wp-admin
    Disallow: /wp-includes
    Disallow: /wp-content/plugins

    savoir si cela ne va pas perturber l'indexation des pages de mon blog ,
    et si je doit interdir d'indexer d'autres pages ou dossier pour optimiser l'indexation de mon blog.
    merci par avance.
     
Chargement...
Similar Threads - fichier robot worpress Forum Date
Page de Login et fichier Robots.Txt Débuter en référencement 11 Septembre 2022
Search Console Prestashop | Robot.txt bloque des URL mais Outil de test du fichier robots.txt l'Authorise... Crawl et indexation Google, sitemaps 21 Novembre 2019
Aide sur le format de mon fichier robots.txt Crawl et indexation Google, sitemaps 25 Octobre 2019
Page de test et fichier Robots.txt Crawl et indexation Google, sitemaps 9 Octobre 2019
Search Console un fichier robots.txt pour chaque protocole Débuter en référencement 15 Août 2019
Search Console bloquée par le fichier robots.txt Crawl et indexation Google, sitemaps 25 Juin 2019
Search Console Passage de HTTP à HTTPS (Fichiers ROBOTS.TXT et SITEMAP) 0 Crawl et indexation Google, sitemaps 16 Mai 2019
"Indexée malgré le blocage par le fichier robots.txt" Que faire si ce message ? Crawl et indexation Google, sitemaps 12 Février 2019
noindex fr-fr dans fichier robots.txt avec translatepress Référencement international (langues, pays) 18 Décembre 2018
Indexée malgré le blocage par le fichier robots.txt Débuter en référencement 5 Décembre 2018
Bloquer une section dans mon fichier robots.txt Débuter en référencement 9 Novembre 2018
Mon site est bloqué par le fichier robots.txt Crawl et indexation Google, sitemaps 12 Septembre 2018
fichier robots.txt bloquer paramètre p= Crawl et indexation Google, sitemaps 4 Septembre 2018
Où puis-je configurer le fichier robots.txt et le htaccess ? Débuter en référencement 10 Avril 2018
Résolu Toutes les URL bloquées par le fichier robots.txt Crawl et indexation Google, sitemaps 28 Mars 2018
Prise en compte du fichier robots.txt Crawl et indexation Google, sitemaps 22 Avril 2017
fichier robot.txt introuvable Débuter en référencement 8 Avril 2017
Mon fichier robots.txt wordpress Développement d'un site Web ou d'une appli mobile 24 Octobre 2016
Ne pas indexer une page avec le fichier robots.txt Débuter en référencement 20 Juillet 2016
Fichier robot.txt Référencement Google 25 Juin 2016