Formation par Olivier Duffez

Formation au référencement par Olivier Duffez, créateur de WebRankInfo !
Une formule efficace alliant théorie et pratique, avec une haute disponibilité des intervenants
Cette formule a déjà convaincu plusieurs centaines d'entreprises, pourquoi pas vous ?
Réservez vite votre place en ligne (convention possible pour imputer sur le budget formation)

Formation référencement Marseille

protéger le fichier robots.txt

Poster un nouveau sujet Imprimer cette discussion    Forum -> URL Rewriting et .htaccess   Les dernières discussions de ce forum sont disponibles au format RSS
Voir le sujet précédent :: Voir le sujet suivant  
Auteur Message
 
Ethancarter
WRInaute discret
WRInaute discret

Inscrit le: 25 Jan 2004
Messages: 77

URL permanente de ce messagePosté le : Jeu Mai 20, 2004 23:09    Sujet du message: protéger le fichier robots.txt

Bonjour,

Afin de protéger mon robots.txt des regards indiscrets, j'ai ajouté la ligne suivante
dans mon .htacess :

RewriteCond %{HTTP_USER_AGENT} Mozilla [NC]
RewriteRule ^robots.txt - [F]

ça fonctionne avec IE : on ne peut plus consulter le fichier.
Est-ce que cela risque de gêner les robots, style googlebot et autres ?

merci
 
Ethancarter Visiter le site web du posteur
wap
WRInaute passionné
WRInaute passionné

Inscrit le: 01 Mai 2004
Messages: 735
Localisation: Paris, France

URL permanente de ce messagePosté le : Jeu Mai 20, 2004 23:13    Sujet du message: Re: protéger le fichier robots.txt

Ethancarter a écrit:
Afin de protéger mon robots.txt des regards indiscrets, j'ai ajouté la ligne suivante

Simple curiosité, mais pourquoi tu veux le protéger des "regards indiscrets" ? Même la Maison Blanche ne le fait pas Wink
 
wap Visiter le site web du posteur
Ethancarter
WRInaute discret
WRInaute discret

Inscrit le: 25 Jan 2004
Messages: 77

URL permanente de ce messagePosté le : Jeu Mai 20, 2004 23:44    Sujet du message: protéger le fichier robots.txt

bah, je sais pas... je pense que c'est plus sûr...
Certains répertoires contiennent des mots de passe non cryptés.

au aujet de la maison blanche -> ils interdisent le référencement de toutes les pages qui ont un rapport avec l'irak Wink
 
Ethancarter Visiter le site web du posteur
wap
WRInaute passionné
WRInaute passionné

Inscrit le: 01 Mai 2004
Messages: 735
Localisation: Paris, France

URL permanente de ce messagePosté le : Ven Mai 21, 2004 0:11    Sujet du message: protéger le fichier robots.txt

Ethancarter a écrit:
Certains répertoires contiennent des mots de passe non cryptés.

Ouch ! Voila ce qu'on appelle une _belle_ faille. Tu devrais davantage te soucier de sécuriser ces répertoires (à l'aide de .htaccess par exemple) que ton robots.txt

Tu es conscient que ce n'est pas parce que ton robots.txt sera "caché" que quelqu'un ne pourra pas accéder aux répertoires dont tu parles ? Enfin, ça peut te protéger face à un script kiddie (et encore !) mais face à quelqu'un qui a un minimum de bases... tu cours droit à la catastrophe.
 
wap Visiter le site web du posteur
ADBD
WRInaute occasionnel
WRInaute occasionnel

Inscrit le: 24 Mai 2003
Messages: 196
Localisation: France

URL permanente de ce messagePosté le : Ven Mai 21, 2004 0:24    Sujet du message: protéger le fichier robots.txt

Et surtout, si ton fichier robots.txt n'est pas accessible par le web, aucun robot ne pourra le lire. Tu peux tout aussi bien le supprimer !
 
ADBD Visiter le site web du posteur
BadProcESs
WRInaute accro
WRInaute accro

Inscrit le: 28 Juil 2003
Messages: 2271
Localisation: Partout ("clusterisé") ;)

URL permanente de ce messagePosté le : Ven Mai 21, 2004 0:57    Sujet du message: protéger le fichier robots.txt

En outre j'ajouterai que faisant une rule sur l'user agent est aisement contournable sans trop se fatiguer...
 
BadProcESs Visiter le site web du posteur
Ethancarter
WRInaute discret
WRInaute discret

Inscrit le: 25 Jan 2004
Messages: 77

URL permanente de ce messagePosté le : Dim Mai 23, 2004 22:30    Sujet du message: protéger le fichier robots.txt

ADBD a écrit:
Et surtout, si ton fichier robots.txt n'est pas accessible par le web, aucun robot ne pourra le lire. Tu peux tout aussi bien le supprimer !


Tu n'as pas lu ma question ! Il n'est pas accessible uniquement avec IE, pour un robot, pas de problèmes...du moins c'est ce que je pense et c'est justement l'objet de ma question..au fait l'a tu lue avant de répondre ? Sad
 
Ethancarter Visiter le site web du posteur
Ethancarter
WRInaute discret
WRInaute discret

Inscrit le: 25 Jan 2004
Messages: 77

URL permanente de ce messagePosté le : Dim Mai 23, 2004 22:32    Sujet du message: protéger le fichier robots.txt

wap a écrit:
Ethancarter a écrit:
Certains répertoires contiennent des mots de passe non cryptés.

Ouch ! Voila ce qu'on appelle une _belle_ faille. Tu devrais davantage te soucier de sécuriser ces répertoires (à l'aide de .htaccess par exemple) que ton robots.txt

Tu es conscient que ce n'est pas parce que ton robots.txt sera "caché" que quelqu'un ne pourra pas accéder aux répertoires dont tu parles ? Enfin, ça peut te protéger face à un script kiddie (et encore !) mais face à quelqu'un qui a un minimum de bases... tu cours droit à la catastrophe.


Oui, tu as raison. La plupart des dossiers sont protégés mais pas tous. Certains doivent rester accessibles de l'exterieur car ils contiennent des fichiers requis par des SSI.
 
Ethancarter Visiter le site web du posteur
tawath
WRInaute impliqué
WRInaute impliqué

Inscrit le: 30 Avr 2005
Messages: 290

URL permanente de ce messagePosté le : Jeu Juin 30, 2005 19:07    Sujet du message: protéger le fichier robots.txt

Le site de la Mb que du bonheur Laughing
 
tawath Visiter le site web du posteur
 
Montrer les messages depuis:   
Revenir en haut    Forum -> URL Rewriting et .htaccess Toutes les heures sont au format GMT + 2 Heures
Page 1 sur 1 - 
Connexion
Nom d'utilisateur:    Mot de passe:      Se connecter automatiquement à chaque visite    

Définitions :

CLIQUEZ ICI pour vous inscrire à WebRankInfo (forum, annuaire, outils...)

Connexion

© 2001-2005 phpBB Group, support français
Personnalisation : WebRankInfo ™


 ODP  Firefox  Alsacreations  annuaire webmaster Yagoort