Restreindre l'affichage robots.txt

Discussion dans 'URL Rewriting et .htaccess' créé par yahya, 27 Février 2006.

  1. yahya
    yahya Nouveau WRInaute
    Inscrit:
    3 Février 2006
    Messages:
    2
    J'aime reçus:
    0
    bonjour ,
    merci à tous les webmasters et administarteurs du site webrankinfo trés trés riche !
    mon premier post.
    je suis chez free j'ai mis un fichier robots.txt dans la racine jusqu'a la pas de probléme .mais quand je tape l'url http://monsite.free.fr/robots.txt le navigateur m'affiche le contenu de ce fichier . j'utilise la méthode des pseudos frames , on vois le nom des dossiers sur le robots.txt ce dossier est protégé par un hatcces et renvoi header à la racine .
    les attaqueurs de type Cross-Site Scripting marque des points quand ils ont de tels résultats.
    1- comment faire pour renvoyer un visiteur qui souhaite voir le fichier robots.txt
    2-est ce que la technique robots.txt fonctionne pareil chez msn_yahoo_altavista

    merci bon début de semaine .
     
  2. Serious
    Serious WRInaute passionné
    Inscrit:
    21 Novembre 2005
    Messages:
    1 834
    J'aime reçus:
    0
    1) tu peux toujours filtrer en fonction du UserAgent mais ca reste approximatif. Ou alors en fonction de l'IP. Mais je ne vois pas trop l'interet.

    2) oui
     
  3. yahya
    yahya Nouveau WRInaute
    Inscrit:
    3 Février 2006
    Messages:
    2
    J'aime reçus:
    0
    bonsoir
    Mais je ne vois pas trop l'interet.
    ca veux dire que c'est normal car j'ai constaté qu'on peut afficher le robots.txt des garnds sites .

    question
    est ce qu'il ya un moyen ou équivalant de l'url rewriting chez les hébergeur genre **free en mettant par exemple une page html ou php équivalante à la page qui se charge avec la méthode include vu que les crawlers on du mal
    à indexer les pages types page index.php?page= est ce que c'est penalisé par google vu qui il ya une page miroir ?
    merci
     
Chargement...
Similar Threads - Restreindre affichage robots Forum Date
Restreindre l’accès à un site : SSO, filtrage par REFERER, autres solutions ? URL Rewriting et .htaccess 14 Février 2014
Restreindre l'accès d'un dossier à un domaine unique URL Rewriting et .htaccess 8 Juin 2012
Restreindre l'accès à un fichier .pdf URL Rewriting et .htaccess 26 Décembre 2011
Restreindre l'accès à certaines pages pour certains pays? Développement d'un site Web ou d'une appli mobile 26 Janvier 2011
[résolu] restreindre accès fichier depuis nom de domaine URL Rewriting et .htaccess 30 Juin 2009
Restreindre les fraudes au cookies. Développement d'un site Web ou d'une appli mobile 3 Avril 2008
Configuration d'un .htaccess pour restreindre l'accès URL Rewriting et .htaccess 10 Novembre 2006
restreindre l'acces URL Rewriting et .htaccess 22 Mars 2006
Restreindre sa bande passante Développement d'un site Web ou d'une appli mobile 9 Janvier 2006
restreindre un dossier avec htacess et htpasswd Administration d'un site Web 8 Mai 2004
Google n'est il pas censé restreindre le nombre de résultats Référencement Google 10 Février 2004
Comment restreindre l'access à une page web ? URL Rewriting et .htaccess 27 Août 2003
.htaccess pour restreindre un access et apache sous windows URL Rewriting et .htaccess 14 Mai 2003
WordPress Problème affichage style avec Elementor (titre, bordures, separateur) Administration d'un site Web il y a 19 minutes
Le simple affichage de ma page déclenche les événements onClick... Merci Google Analytics 17 Mai 2022
Affichage des données démographiques Google Analytics 10 Mai 2022
Problème d'affichage des campagnes Google Ads dans un tableau de bord Data Studio AdWords 26 Avril 2022
Problème de vitesse d'affichage des pages sur Analytics Google Analytics 26 Avril 2022
Problème affichage Meta Title, Desc ... Débuter en référencement 20 Janvier 2022
Google chrome : affichage incomplet Google : l'entreprise, les sites web, les services 18 Janvier 2022