Page notée erreur html par google. Comment y remedier ?

Nouveau WRInaute Inscrit le: 05 Nov 2006 Messages: 9

Bonjour

je débute en référencement. Embarassed

J'ai un site avec plusieurs pages php. L'une d'elle contient un lien vers une page php située dans un répertoire /admin/
Ce répertoire est protégé par un .htaccess car la page qu'il contient sert à gérer certains contenus des autres pages du site.

Google a voulu indexer cette page, n'a pas pu (normal), et m'indique désormais dans mon compte webmaster que cette page est en "erreur http" (401, non autorisée). Le dernier calcul de cette page est notifiée au 02 novembre.

Depuis, pour éviter que Google tente de réindexer cette page, j'ai créé avant le 05 novembre un fichier sitemap.xml qui ne contient pas cette URL et un fichier robot.txt (EDIT : "robots.txt" pardon) qui contient :

user-agent: *
disallow: /admin/

De plus j'ai indiqué y'a quelques jours à Google de retirer cette URL de son index.

Pourtant, elle reste indiquée comme erreur HTTP et dans mes logs apache, entre les accès de google à mes pages, je retrouve constamment cela :
66.102.6.136 - - [17/Nov/2006:12:24:43 +0100] "GET /admin/admin.php HTTP/1.0" 401 511 "-" "Java/1.5.0_04"

Pourquoi Google tente t'il encore et encore d'accéder à cette page malgré mon robot.txt ?
Comment y remedier ?

Merci Smile

WRInaute discret Inscrit le: 30 Déc 2004 Messages: 68

robots.text serait sans doute mieux Wink

Nouveau WRInaute Inscrit le: 05 Nov 2006 Messages: 9

Oui c'est vrai Very Happy

mais en fait c'est déjà le cas. Donc c'est pas ça Confused

D'ailleurs mon robots.txt est bien lu par google. Il l'indique dans mes outils pour webmaster et je vois dans mes logs apache qu'il est régulièrement lu.

Page notée erreur html par google. Comment y remedier ?

Autres sujets de discussion :