Conseil pour fichier robots.txt

Discussion dans 'Demandes d'avis et de conseils sur vos sites' créé par islem, 8 Décembre 2014.

  1. islem
    islem WRInaute discret
    Inscrit:
    24 Janvier 2006
    Messages:
    110
    J'aime reçus:
    0
    Bonjour,

    Je voudrai une confirmation quant a l'utilisation de mon fichier Robots.txt

    Je voudrai en fait faire quelque chose mais je ne suis pas sur de comment le faire..

    Quand je fais :

    Disallow: /*feed

    Ça veux dire que toutes les urls "commençant" par feed seront ignoré par les robots, la on est d’accord, mais si je fais :

    Disallow: /*feed*

    Toutes les urls qui "contiennent" le mot "feed" seront ignoré? c'est ce que je veux en fait mais je suis pas sur si je dois l’écrire comme ça ou autrement




    Autre chose, je veux en fait ignoré certaines url qui commencent par un mot et finissent par php uniquement, des urls du genre :

    www.exemple com/mot-123.php
    www.exemple com/mot-1234.php
    www.exemple com/mot-1235.php
    www.exemple com/mot-12346.php
    www.exemple com/mot-123777.php


    Dois-je faire un turc du genre :


    Disallow: /*mot-*.php

    ???

    Merci d'avance



    Cordialement

    Islem
     
  2. baud74
    baud74 WRInaute impliqué
    Inscrit:
    21 Juillet 2014
    Messages:
    580
    J'aime reçus:
    0
    non, c'est des url finissant par feed

    Disallow: /mot-*.php
    suffira si les exemples d'url sont bien représentatifs.
     
  3. WebRankInfo
    WebRankInfo Admin
    Membre du personnel
    Inscrit:
    19 Avril 2002
    Messages:
    20 667
    J'aime reçus:
    748
    le signe * n'est pas officiellement reconnu par le "standard" robots.txt, même si Google le gère bien

    islem : tu es bien conscient que ça ne fera pas disparaître de Google les URL concernées, si jamais elles sont actuellement indexées ?
     
Chargement...
Similar Threads - Conseil fichier robots Forum Date
Astuces et conseils sur le fichier robots.txt Crawl et indexation Google, sitemaps 1 Juillet 2014
Conseils DNS et fichier de zone (OVH) Administration d'un site Web 17 Novembre 2015
Besoin de conseils pour mise en place réseau/serveur partage de fichiers en interne Le café de WebRankInfo 4 Août 2011
Conseils pour fichier joint : nouvelle fonctionnalité Gmail ? Gmail, Google Talk, Blogger et Orkut 30 Novembre 2010
Conseils pour gérer des fichiers sur plusieurs serveurs Administration d'un site Web 18 Juillet 2009
Conseil pour une interface de fichiers à télécharger dans une formulaire Demandes d'avis et de conseils sur vos sites 11 Mars 2009
Conseil pour accélérer l'indexation de mon nouveau site Problèmes de référencement spécifiques à vos sites 9 Avril 2022
WordPress Bonjour, J'aimerai avoir des conseils. Mon site internet est-il bien construit ? Débuter en référencement 29 Mars 2022
Conseils pour site Hightech Demandes d'avis et de conseils sur vos sites 16 Mars 2022
besoin de conseils pour mon site Débuter en référencement 9 Mars 2022
Avis aux experts webmarketing BtoB : demande de conseil Demandes d'avis et de conseils sur vos sites 8 Mars 2022
Tout simplement à la recherche de conseils... Débuter en référencement 13 Novembre 2021
Quelle formation poussée sur Facebook Ads me conseillez-vous ? Facebook 3 Novembre 2021
Blog, silo et sens des liens conseillés Techniques avancées de référencement 15 Juillet 2021
[conseil] hébergement mutualisé pas cher avec muti-domaine Administration d'un site Web 8 Juillet 2021
Votre conseil pour un app builder ? Développement d'un site Web ou d'une appli mobile 8 Juin 2021
Hébergement Cloud, VPS infogéré... besoin de conseils Administration d'un site Web 8 Juin 2021
conseils sécurité sur internet Le café de WebRankInfo 1 Juin 2021
Conseils Mots Clés Débuter en référencement 19 Mars 2021
Recherche conseils et aide pour hébergement Administration d'un site Web 14 Mars 2021