URL référencés : d'où viennent t'elles ?

[stone66]

Bonjour,

Encore une question qui me travaille :

imaginons un site avec 20 articles par page sur plusieurs page du style :

page 1 = http://www.example.com/categorie-1-0
page 2 = http://www.example.com/categorie-1-20
page 3 = http://www.example.com/categorie-1-40
....

je ne comprend pas que des url du type :
http://www.example.com/categorie-1-1
http://www.example.com/categorie-1-2
http://www.example.com/categorie-1-3 ...

soient référencés par google ???

bien sûr ces URL existent et ne renvoi pas d'erreur, elle change simplement l'ordre du nombre d'articles par page, mais elles ne sont diffusées nulle part, alors comment google les trouvent ?

Dois-je faire en sorte que ces URL soient redirigés en 301 par exemple :
http://www.example.com/categorie-1-1 à 19 vers http://www.example.com/categorie-1-0
http://www.example.com/categorie-1-21 à 39 vers http://www.example.com/categorie-1-20
....

Si vous avez tout compris c'est cool

amicalement,
Stone66

 

[Addictive]

Bonjour stone66,

Je crois avoir saisi ! ^^
Je ne pense pas que Google crawl les pages à la volée en choisissant une url au hasard, s'il a crawlé la page c'est qu'elle est accessible...

As-tu vérifié la structure de ton site? Peut-être que ces pages sont accessibles quelque part sur ton site (un bug est si vite arrivé).
As-tu regardé dans ton GWT, dans les liens entrants? Il m'est déjà arrivé de voir apparaître des urls bidon et/ou cachées parce qu'elles avaient été crawlées et affichées par d'autres sites à mon insu.

Peut-être quelques pistes... à voir

Addictive.

 

[nickargall]

Idem que plus haut; si Google a indexé ces pages, c'est qu'il a trouvé leur adresse quelquepart sur le site, sur un autre site, ou via une navigation sur ces URLS avec les outils google (toolbar, chrome, analytics, etc ...) d'installés.
Il faut donc que tu trouves la source de ces URL , que tu la corriges, et que tu fasses en effet des redirections 301 ensuite.

 

[Addictive]

Merci pour ton complément d'informations @nickargall

Le mieux serait de faire un Xenu. Une fois l'analyse terminée, Xenu liste toutes les pages valides de ton site (selon paramétrage, peut-être attention!). De là tu pourras déjà rapidement voir si tu as une erreur interne qui rendrai ces dites pages accessibles pour les moteurs de recherche.

 

[stone66]

Je viens de vérifier mon code afin de trouver d’éventuelles erreurs mais tout est correct et ces URL n'apparaissent nul part, en fait j'ai par exemple 2000 articles et je m'aperçois que toutes les URL sont référencés :
de :
http://www.example.com/categorie-1-0 à http://www.example.com/categorie-1-2000

c'est un truc de fou !!! alors que c'est impossible qu'elles le soient toutes (quelques unes je dit pas mais toutes !!!), j'ai regardé la provenance des visites entrantes dans G-Analytics et personnes n'arrivent par ces URLs, je n'y comprend plus rien

Si quelqu'un à une explications ?
pouvez-vous m'aider pour le code .htaccess afin de rediriger en 301 :

http://www.example.com/categorie-1-1 à http://www.example.com/categorie-1-19
vers http://www.example.com/categorie-1-0

RewriteRule ^categorie-([0-9-]+)-([0-9-]+).html$ /categorie-1-0.html [R=301,L] (je ne sais pas dire de 1-1 à 1-19 ???)

amicalement,
Stone66

 

[Addictive]

Si tu les vois depuis Analytics tu dois avoir la source, non ? Est-ce un lien externe ?
Fais un Xenu comme je te l'ai proposé... Si toutes tes pages sont accessibles avec ce type urls c'est plutôt une erreur sur tout ton site.

 

[stone66]

Si tu les vois depuis Analytics tu dois avoir la source, non ? Est-ce un lien externe ?
Fais un Xenu comme je te l'ai proposé... Si toutes tes pages sont accessibles avec ce type urls c'est plutôt une erreur sur tout ton site.

je ne les vois pas depuis Analytics ni dans Xenu