Avis sur mon fichier robots.txt pour Google

Nouveau WRInaute
Bonjour à tous,
Je suis nouveau sur le forum avec des connaissances très limitées.... :roll:
Pouvez vous m'indiquer si mon fichier robots.txt ci-dessous est correct ?

Pour info, mon site à été réalisée il y a pas mal de temps avec la version 1.2
en allant dans les outils pour webmaster, il était indiqué beaucoup de balises doubles
on m'a donc conseillé de rajouter sur mon fichier les 3 lignes ci-dessous....
Disallow: /*orderby=
Disallow: /*orderway=
Disallow: /*token=


Depuis j'ai baissé dans le référencement et je souhaitais savoir si à votre avis si cette situation était liée à la modification apportée ou pas ...
Avec tous mes remerciements, vos conseils seront les bienvenus à un néophyte de l'informatique ! :D

# robots.txt automaticaly generated by PrestaShop e-commerce open-source solution
# http://www.prestashop.com - http://www.prestashop.com/forums
# This file is to prevent the crawling and indexing of certain parts
# of your site by web crawlers and spiders run by sites like Yahoo!
# and Google. By telling these "robots" where not to go on your site,
# you save bandwidth and server resources.

# For more information about the robots.txt standard, see:
# http://www.robotstxt.../wc/robots.html

User-agent: *
# Directories
Disallow: /classes/
Disallow: /config/
Disallow: /download/
Disallow: /mails/
Disallow: /modules/
Disallow: /translations/
Disallow: /tools/
# Files
Disallow: /addresses.php
Disallow: /address.php
Disallow: /authentication.php
Disallow: /cart.php
Disallow: /discount.php
Disallow: /footer.php
Disallow: /get-file.php
Disallow: /header.php
Disallow: /history.php
Disallow: /identity.php
#Disallow: /images.inc.php
Disallow: /init.php
Disallow: /my-account.php
Disallow: /order.php
Disallow: /order-slip.php
Disallow: /order-detail.php
Disallow: /order-follow.php
Disallow: /order-return.php
Disallow: /order-confirmation.php
Disallow: /pagination.php
Disallow: /password.php
Disallow: /pdf-invoice.php
Disallow: /pdf-order-return.php
Disallow: /pdf-order-slip.php
Disallow: /product-sort.php
Disallow: /search.php
Disallow: /statistics.php
Disallow: /*orderby=
Disallow: /*orderway=
Disallow: /*token=
 
WRInaute discret
Il y a un onglet dans Google Webmaster Tool pour tester son robots.txt. L'avis de Google sera toujours plus judicieux que le mien.
Il est préférable cependant de gérer l'indexation via la balise "META ROBOTS NOINDEX", parce que les robots ne vont pas toujours vérifier à la racine du site s'ils ont droit d'indexer telle ou telle page.
D'ailleurs je soupçonne Google d'avoir oublié un critère de vérification vers le robots.txt pour son programme d'index. Le fichier robots.txt est généralement chargé une fois par jour (cf. dans l'onglet correspondant de GWT), sans que Google en tienne compte le restant de la journée pour ses mises à jour dans l'index.
Mais ces problèmes de duplication de contenus sont vraiment… problématiques pour son référencement. Je me suis résolu pour ma part à interdire complètement certains répertoires aux robots pour leurs visites, car les instructions fournies dans mon robots.txt n'étaient JAMAIS suivies !!!!
 
Nouveau WRInaute
Bonjour,

C'est très sympathique de votre part d'avoir pris le temps de me répondre, je dois avouer que la balise dont vous parlé 'META ROBOTS NOINDEX" me laisse perplexe, je n'y connais pas grand chose...
Comment dois je procéder avec cette balise, doit elle figurer dans mon fichier robots.txt ?
Je vais regardé dans les outils de webmaster Tools pour tester mon fichier.

Avec tous mes remerciements pour votre réponse rapide.
 
Nouveau WRInaute
Bonsoir,

J'utilise Prestshop 1.2, pour le code mes connaissances sont limités...
En revanche je me pose la question suivante : concernant les trois lignes rajoutées dans mon fichier robots.txt
Disallow: /*orderby=
Disallow: /*orderway=
Disallow: /*token=

J'ai remarqué une descente très rapide dans le classement "Google" de la 4eme à la 10 eme page, pensez vous qu'il puisse y avoir une cause liée à cette modification, pour être complet j'ai renvoyé mon sitemap..

Merci pour vos conseils et votre l'aide
 
WRInaute discret
Je ne connais Prestashop que de nom, désolé. Mais il y a des internautes plus calés que moi sur ce CMS dans le forum. Sinon oui, les pages dupliquées ont très certainement été pénalisées. Cela m'est arrivé l'année dernière avec un WordPress/BuddyPress où il y a aussi ce problème de pages en double ou en triple, selon qu'on cherche à afficher tel ou tel truc, et j'ai dû coder toute une extension pour remédier au problème.
Prestashop est un outil très répandu, il doit y avoir une réponse plus précise à votre question quelque part sur le Web, mais sur un site plus spécialisé développement PHP. Je passe la main à Google, demandez-lui en tapant des requêtes plus précises avec les éléments de code que vous avez déjà pu retirer ici.
 
Nouveau WRInaute
Bonjour,

Je vous remercie pour l'ensemble des informations que vous m'avez communiquées, je vais continuer mes recherches.
Bonne journée et une nouvelle fois merci pour votre courtoisie.
sunglasses2.gif
 
Discussions similaires
Haut