Avis sur mon fichier robots.txt pour Google

Discussion dans 'Débuter en référencement' créé par serged, 4 Octobre 2012.

  1. serged
    serged Nouveau WRInaute
    Inscrit:
    4 Octobre 2012
    Messages:
    4
    J'aime reçus:
    0
    Bonjour à tous,
    Je suis nouveau sur le forum avec des connaissances très limitées.... :roll:
    Pouvez vous m'indiquer si mon fichier robots.txt ci-dessous est correct ?

    Pour info, mon site à été réalisée il y a pas mal de temps avec la version 1.2
    en allant dans les outils pour webmaster, il était indiqué beaucoup de balises doubles
    on m'a donc conseillé de rajouter sur mon fichier les 3 lignes ci-dessous....
    Disallow: /*orderby=
    Disallow: /*orderway=
    Disallow: /*token=


    Depuis j'ai baissé dans le référencement et je souhaitais savoir si à votre avis si cette situation était liée à la modification apportée ou pas ...
    Avec tous mes remerciements, vos conseils seront les bienvenus à un néophyte de l'informatique ! :D

    # robots.txt automaticaly generated by PrestaShop e-commerce open-source solution
    # http://www.prestashop.com - http://www.prestashop.com/forums
    # This file is to prevent the crawling and indexing of certain parts
    # of your site by web crawlers and spiders run by sites like Yahoo!
    # and Google. By telling these "robots" where not to go on your site,
    # you save bandwidth and server resources.

    # For more information about the robots.txt standard, see:
    # http://www.robotstxt.../wc/robots.html

    User-agent: *
    # Directories
    Disallow: /classes/
    Disallow: /config/
    Disallow: /download/
    Disallow: /mails/
    Disallow: /modules/
    Disallow: /translations/
    Disallow: /tools/
    # Files
    Disallow: /addresses.php
    Disallow: /address.php
    Disallow: /authentication.php
    Disallow: /cart.php
    Disallow: /discount.php
    Disallow: /footer.php
    Disallow: /get-file.php
    Disallow: /header.php
    Disallow: /history.php
    Disallow: /identity.php
    #Disallow: /images.inc.php
    Disallow: /init.php
    Disallow: /my-account.php
    Disallow: /order.php
    Disallow: /order-slip.php
    Disallow: /order-detail.php
    Disallow: /order-follow.php
    Disallow: /order-return.php
    Disallow: /order-confirmation.php
    Disallow: /pagination.php
    Disallow: /password.php
    Disallow: /pdf-invoice.php
    Disallow: /pdf-order-return.php
    Disallow: /pdf-order-slip.php
    Disallow: /product-sort.php
    Disallow: /search.php
    Disallow: /statistics.php
    Disallow: /*orderby=
    Disallow: /*orderway=
    Disallow: /*token=
     
  2. ph.gras
    ph.gras WRInaute discret
    Inscrit:
    19 Mai 2011
    Messages:
    89
    J'aime reçus:
    0
    Il y a un onglet dans Google Webmaster Tool pour tester son robots.txt. L'avis de Google sera toujours plus judicieux que le mien.
    Il est préférable cependant de gérer l'indexation via la balise "META ROBOTS NOINDEX", parce que les robots ne vont pas toujours vérifier à la racine du site s'ils ont droit d'indexer telle ou telle page.
    D'ailleurs je soupçonne Google d'avoir oublié un critère de vérification vers le robots.txt pour son programme d'index. Le fichier robots.txt est généralement chargé une fois par jour (cf. dans l'onglet correspondant de GWT), sans que Google en tienne compte le restant de la journée pour ses mises à jour dans l'index.
    Mais ces problèmes de duplication de contenus sont vraiment… problématiques pour son référencement. Je me suis résolu pour ma part à interdire complètement certains répertoires aux robots pour leurs visites, car les instructions fournies dans mon robots.txt n'étaient JAMAIS suivies !!!!
     
  3. serged
    serged Nouveau WRInaute
    Inscrit:
    4 Octobre 2012
    Messages:
    4
    J'aime reçus:
    0
    Bonjour,

    C'est très sympathique de votre part d'avoir pris le temps de me répondre, je dois avouer que la balise dont vous parlé 'META ROBOTS NOINDEX" me laisse perplexe, je n'y connais pas grand chose...
    Comment dois je procéder avec cette balise, doit elle figurer dans mon fichier robots.txt ?
    Je vais regardé dans les outils de webmaster Tools pour tester mon fichier.

    Avec tous mes remerciements pour votre réponse rapide.
     
  4. ph.gras
    ph.gras WRInaute discret
    Inscrit:
    19 Mai 2011
    Messages:
    89
    J'aime reçus:
    0
    https://www.webrankinfo.com/dossiers/techniques/guide-balises-meta#robots

    Pour les mettre en place, il faut toucher au code quelque part, mais je ne suis pas en mesure de vous dire où avec les informations que vous avez données. Il existe aussi des extensions SEO pour les différents CMS en usage qui permettent de les gérer via un panneau d'administration, mais là encore, je ne sais pas ce que vous utilisez…
     
  5. serged
    serged Nouveau WRInaute
    Inscrit:
    4 Octobre 2012
    Messages:
    4
    J'aime reçus:
    0
    Bonsoir,

    J'utilise Prestshop 1.2, pour le code mes connaissances sont limités...
    En revanche je me pose la question suivante : concernant les trois lignes rajoutées dans mon fichier robots.txt
    Disallow: /*orderby=
    Disallow: /*orderway=
    Disallow: /*token=

    J'ai remarqué une descente très rapide dans le classement "Google" de la 4eme à la 10 eme page, pensez vous qu'il puisse y avoir une cause liée à cette modification, pour être complet j'ai renvoyé mon sitemap..

    Merci pour vos conseils et votre l'aide
     
  6. ph.gras
    ph.gras WRInaute discret
    Inscrit:
    19 Mai 2011
    Messages:
    89
    J'aime reçus:
    0
    Je ne connais Prestashop que de nom, désolé. Mais il y a des internautes plus calés que moi sur ce CMS dans le forum. Sinon oui, les pages dupliquées ont très certainement été pénalisées. Cela m'est arrivé l'année dernière avec un WordPress/BuddyPress où il y a aussi ce problème de pages en double ou en triple, selon qu'on cherche à afficher tel ou tel truc, et j'ai dû coder toute une extension pour remédier au problème.
    Prestashop est un outil très répandu, il doit y avoir une réponse plus précise à votre question quelque part sur le Web, mais sur un site plus spécialisé développement PHP. Je passe la main à Google, demandez-lui en tapant des requêtes plus précises avec les éléments de code que vous avez déjà pu retirer ici.
     
  7. serged
    serged Nouveau WRInaute
    Inscrit:
    4 Octobre 2012
    Messages:
    4
    J'aime reçus:
    0
    Bonjour,

    Je vous remercie pour l'ensemble des informations que vous m'avez communiquées, je vais continuer mes recherches.
    Bonne journée et une nouvelle fois merci pour votre courtoisie.[​IMG]
     
Chargement...
Similar Threads - Avis fichier robots Forum Date
Votre avis sur site fichier email Demandes d'avis et de conseils sur vos sites 5 Avril 2016
Enorme boulette avec un fichier robot.txt..Votre avis SVP ! Crawl et indexation Google, sitemaps 12 Juillet 2011
Url rewriting, fichier XML, avis pour le référencement sur Google Problèmes de référencement spécifiques à vos sites 28 Juillet 2010
Fichier opml et recherche des flux sur le web - votre avis Demandes d'avis et de conseils sur vos sites 21 Mars 2009
Demande d'avis au sujet de mon fichier .htaccess URL Rewriting et .htaccess 5 Mars 2009
un seul fichier ou plusieurs : vos avis Développement d'un site Web ou d'une appli mobile 10 Février 2006
Outil de recherche de fichiers 'torrent', votre avis ? Problèmes de référencement spécifiques à vos sites 23 Août 2005
Avis sur nomenclature de fichier Débuter en référencement 16 Décembre 2004
WordPress Merci de me donner votre avis sur objetsscientifiques.com Demandes d'avis et de conseils sur vos sites Aujourd'hui à 11:50
Demande avis hôtel Premier Consul Rouen Demandes d'avis et de conseils sur vos sites 5 Novembre 2022
Avis client et SEO Débuter en référencement 6 Septembre 2022
Avis sur mon site - hébergeur de galeries d’images Demandes d'avis et de conseils sur vos sites 26 Août 2022
Avis sur lymation Demandes d'avis et de conseils sur vos sites 19 Août 2022
Mon site internet est-il bien construit ? Vos avis ? Débuter en référencement 16 Août 2022
Avis sur le site Muscle Key Demandes d'avis et de conseils sur vos sites 13 Août 2022
Avis cleerly.fr Demandes d'avis et de conseils sur vos sites 9 Août 2022
Avis mytripmed.com/fr Demandes d'avis et de conseils sur vos sites 1 Août 2022
Besoin de vos avis : Forum posting Netlinking, backlinks, liens et redirections 30 Juillet 2022
Avis site/blog écologie Demandes d'avis et de conseils sur vos sites 16 Juillet 2022
Avis Perlib.fr Demandes d'avis et de conseils sur vos sites 27 Juin 2022