Indexer ou pas /wp-content/ (et son contenu) ?

Discussion dans 'Référencement Google' créé par toutatix, 28 Mai 2019.

  1. toutatix
    toutatix WRInaute discret
    Inscrit:
    6 Septembre 2010
    Messages:
    207
    J'aime reçus:
    6
    Bonjour à tous,

    J'ai un doute affreux, j'ai bloqué: /wp-content/ (et son contenu), sur WP vous l'aurez reconnu.

    Est-ce une erreur ?

    Je me retrouve avec des urls bloquées du genre: wp-content/cache/et/1344/et-core-unified-15587358739844.min.css

    Ca me semble peu important si c'est en cache mais là aussi je fais peut-être fausse route...

    Bref votre avis est plus que le bienvenu !
     
  2. Johanwri
    Johanwri WRInaute occasionnel
    Inscrit:
    13 Mars 2018
    Messages:
    330
    J'aime reçus:
    63
    Quand tu dis "bloque", c'est dans le fichier robots ?
    Tu as inclu
    Code:
    Disallow: /wp-content/
    Si c'est le cas, c'est effectivement une erreur car le fichier /wp-content/ contient toutes les images, tu bloc donc aussi l'acces aux images.
    Google a aussi besoin d'acceder au fichier CSS et Javascript pour retourner ta page comme elle apparait.
    Si wp-content contient des CSS et/ou Javascript cela va donc altere le rendu de ta page.

    Il faut donc etre prudent avec l'utilisation de disallow sur des dossiers core Wordpress.

    Si tu veux bloquer l'acces au cache pourquoi ne pas bloquer uniquement le repertoire cache ?
    Code:
    Disallow: /wp-content/cache/
    
     
  3. toutatix
    toutatix WRInaute discret
    Inscrit:
    6 Septembre 2010
    Messages:
    207
    J'aime reçus:
    6
    En fait j'ai pas bloqué le répertoire /wp-content/ comme je pensais m'en souvenir mais j'ai écrit ca dans robots.txt:
    User-agent: *
    Disallow: /admin/
    Disallow: /author/
    Disallow: /wp-admin/
    Disallow: /contrib/
    Disallow: /doc/
    Disallow: /lib/
    Disallow: /modules/
    Disallow: /plugins/
    Disallow: /scripts/
    Disallow: /tmp/

    Mon thème WP est divi.

    Avec ces retrictions, savez-vous si Google a accès à mes CSS ?

    Merci
     
  4. Johanwri
    Johanwri WRInaute occasionnel
    Inscrit:
    13 Mars 2018
    Messages:
    330
    J'aime reçus:
    63
    Je pense que tu vas trop loin
    Il me semble que tu bloque trop de repertoires d'une part mais aussi tu ne les bloque pas justement.

    Exemple /plugins/, cela veut dire que le repertoire est accessible par tonsite.com/plugins/ ce qui n'est pas le cas, le dossier plugins est un sous repertoire de wp-content
    Peu importe le theme puisque tous les themes WP sont dans /wp-content/themes/
    Le code devrait donc etre
    Code:
    Disallow : /wp-content/plugins/
    Il y a des CSS dans les plugins et tu n'as pas besoin de bloquer ce repertoire

    Google ne reference pas (plus depuis longtemps en tout cas) des fichiers systeme.
     
  5. spout
    spout WRInaute accro
    Inscrit:
    14 Mai 2003
    Messages:
    9 003
    J'aime reçus:
    284
    +1 @Johanwri , je ne vois pas l'intérêt de bloquer wp-content, il faut simplement désactiver le directory listing (Options -Indexes avec Apache).
    Sinon tu peux aussi bloquer :
    Code:
    ?foo
    ?bar
    ?baz
    ?qux
    ?spam
    ?eggs
    ?parrot
    
    AMHA le meilleur robots.txt c'est :
    Code:
    
    
     
  6. Johanwri
    Johanwri WRInaute occasionnel
    Inscrit:
    13 Mars 2018
    Messages:
    330
    J'aime reçus:
    63
    Je ne dis pas de bloquer le wp-content au contraire !
    Relis mon post Je dis "Il y a des CSS dans les plugins et tu n'as pas besoin de bloquer ce repertoire"

    Je prenais uniquement un exemple avec le repertoire plugin, j'aurai pu prendre un autre exemple, pour preciser qu'en plus de bloquer des repertoires, il y a aussi des erreurs dans la syntaxe.
     
    spout apprécie ceci.
  7. NicolasH
    NicolasH WRInaute occasionnel
    Inscrit:
    4 Mai 2016
    Messages:
    312
    J'aime reçus:
    22
    le "+1" indique qu'il est d'accord avec toi.

    Pareil que vous 2 : Ama il vaut mieux ne rien bloquer à l'indexation en tout cas pas le wp-content. Les autres dossiers ne sont pas tous dans le document root donc il ne sont pas accessibles donc il est inutile de les ajouter dans le robots.txt
     
Chargement...
Similar Threads - Indexer content (et Forum Date
1000 pages par villes à indexer : duplicate content ? Techniques avancées de référencement 20 Novembre 2018
Ne pas indexer les duplicate content, solution ou pas ? Référencement Google 23 Septembre 2014
Dire a google de ne pas indexer un div en particulier pour éviter le duplicate content. Débuter en référencement 1 Mars 2013
Désindexer les pages http (sans certificat SSL) après piratage japonais Référencement Google Hier à 16:47
WordPress désindexer les pages feed Crawl et indexation Google, sitemaps 8 Juin 2020
Indexer une page d'un site que l'on ne possède pas Débuter en référencement 17 Mai 2020
Désindexer liste d'URL en générant un sitemap Crawl et indexation Google, sitemaps 2 Mai 2020
Comment empecher google d'indexer "une suite d'URL". Débuter en référencement 8 Mars 2020
WordPress Yoast - Attachment-sitemap.xml à faire indexer ? Débuter en référencement 1 Février 2020
Crédits et mentions légales : pages à désindexer ou pas ? Référencement Google 22 Janvier 2020
  1. Ce site utilise des cookies. En continuant à utiliser ce site, vous acceptez l'utilisation des cookies.
    Rejeter la notice