Mots clef overture indéxés...

Nouveau WRInaute
Je trouve ca fou... Vous faites une requête sur "jouer au foot sur internet"

Et en premier, vous tombez sur une page de suggestion de mot clef...
https://www.google.fr/search?q=joue.... jeu gratuit sur internet jeu sur internet
 
WRInaute impliqué
Le fichier robots.txt d'overture.com interdit l'indexation des repertoires de recherche. Donc sur ce coup, ce doit être une mauvaise manipulation, un oubli... Ca m'etonnerait qu'Overture se mette à spamer volontairement les moteurs. Ce serait mauvais pour l'image! ;)
 
Nouveau WRInaute
C'est

C'est peut être simplement quelqu'un qui a mis un lien sur un forum... Et tout est parti de là...
 
WRInaute occasionnel
mmm interessant si overture se met a faire ca ou bien si on lui a fait a son insu.
Mais overture pourrait effectivement stopper ca tout de suite avec un robots.txt
 
WRInaute accro
Ca veut dire que GG ne respecte pas le fichier robots.txt celui d'overture est clair :

User-agent: *
# random old directories
Disallow: /d/about
Disallow: /d/advertisers
# all search pages
Disallow: /d/search
Disallow: /d/base
Disallow: /d/locale
Disallow: /d/searchinventory
# all secure pages
Disallow: /s/
# various htdocs stuff
Disallow: /images/
Disallow: /downloads/
# everything else
Disallow: /d/global


une bizarrrie de plus
 
WRInaute occasionnel
peut être parce que la page n'est pas sur fr.overture mais sur inventory.fr.overture et il n'y a pas de robots.txt sur ce sous domaine
 
WRInaute occasionnel
jerome347 a dit:
peut être parce que la page n'est pas sur fr.overture mais sur inventory.fr.overture et il n'y a pas de robots.txt sur ce sous domaine

exactement

j'arrive pas a voir s'il y a un robots.txt sur inventory.fr.overture car il y a automatiquement une redirection vers la recherche.
 
WRInaute passionné
-https://www.webrankinfo.com/outils/header.php?url=http://inventory.fr.overture.com/robots.txt
Refus: manifestement le robots.txt n'existe pas. En tapant directement on a la meme redirection (meme résultat) que pour le sous-domaine (qui, elle, est une 302).
inurl:inventory.fr.overture.com intitle:Suggestion -> 2 210 pages comme ca :-(
 
Discussions similaires
Haut