PhpBB rewrité en .html, Google indexe les .php. Normal ?

Nouveau WRInaute
Bin j'ai déjà fait, voici mon robots.txt :

Code:
Disallow: /forum/portal.php
Disallow: /forum/index.php
Disallow: /forum/viewtopic.php
Disallow: /forum/viewforum.php
Disallow: /forum/memberlist.php
Disallow: /forum/login.php
Disallow: /forum/statistics.php
Disallow: /forum/faq.php
Disallow: /forum/modcp.php
Disallow: /forum/posting.php
Disallow: /forum/privmsg.php
Disallow: /forum/search.php
Disallow: /forum/viewonline.php
Disallow: /forum/profile.php
Disallow: /forum/groupcp.php

Me manque-t-il quelque chose ? :?:
 
WRInaute passionné
Tu as mis le user-agent dnas ton robots.txt ?

Il est connu que google visite les pages interdites, ça lui arrive, mais il ne les référence pas.

PS : enlève tes liens dans le premier message du sujet, non seulement ils sont contraires à la charte wri, mais en plus, google va voir les liens ce qui ne va pas aider à les déréférencer... faut réfléchir.
 
Nouveau WRInaute
Dj_Apx a dit:
PS : enlève tes liens dans le premier message du sujet, non seulement ils sont contraires à la charte wri, mais en plus, google va voir les liens ce qui ne va pas aider à les déréférencer... faut réfléchir.

Oups, désolé... Voilà, c'est fait... :wink:


Dj_Apx a dit:
Tu as mis le user-agent dnas ton robots.txt ?

Arf... Il faudrait déjà que je sache quoi mettre... Une petite explication serait la bienvenue... :D

Edit : j'avais mal compris... Effectivement, j'avais oublié de rajouter ceci :
Code:
User-Agent: *
Il ne devrait plus visiter mes .php maintenant... La question est donc : va-t-il se rabattre sur les .html ? Vu qu'il n'a visité (apparemment) que du .php sur mon site... :?
 
Discussions similaires
Haut