Bien créer mon fichier robots.txt

Discussion dans 'Débuter en référencement' créé par Absot, 15 Juin 2012.

  1. Absot
    Absot Nouveau WRInaute
    Inscrit:
    15 Juin 2012
    Messages:
    2
    J'aime reçus:
    0
    Bonjour, j'ai mis en ligne il y a environ 2 mois mon site personnel avec un fichier robots.txt à la racine de mon serveur web.

    Seulement, lorsque je tape mon nom et prénom dans le moteur de recherche de Google, je ne vois pas apparaître mon site alors qu'au début, avant que je déploiement mon contenu, j'avais seulement déposé un fichier .html et je le trouvais bien.

    J'en viens à me demander si mon fichier robots.txt est correctement formé.

    Voici ce fichier :
    Code:
    User-agent: *
    Disallow: /actualites/
    Disallow: /auth/
    Disallow: /categorie/
    Disallow: /commentaire/
    Disallow: /entreprise/
    Disallow: /erreur/
    Disallow: /genre/
    Disallow: /liens/
    Disallow: /moderation/
    Disallow: /projet/
    Disallow: /serveur/
    Disallow: /statistiques/
    Disallow: /tutoriel/
    Disallow: /type-publication/
    Disallow: /utilisateur/
    
    En gros, je veux seulement autoriser le contrôleur index (mon site est développé avec Zend Framework).

    Que faut-il que je change?

    Voici l'adresse de mon site web : http://www.aurelien-laval.fr
    Et celle du fichier robots.txt : http://www.aurelien-laval.fr/robots.txt

    Merci de vos réponses.
     
  2. UsagiYojimbo
    UsagiYojimbo WRInaute accro
    Inscrit:
    23 Novembre 2005
    Messages:
    11 963
    J'aime reçus:
    119
    Depuis Webmaster Tools, tu peux tester chacune de tes url et vérifier si le bot y a ou non accès, en fonction des directives du robots.txt
     
  3. Absot
    Absot Nouveau WRInaute
    Inscrit:
    15 Juin 2012
    Messages:
    2
    J'aime reçus:
    0
    Je viens d'utiliser Webmaster Tools et je n'ai aucune erreur, j'ai essayé avec quelques URLs et il semblerait qu'il les trouve sans problème.
     
Chargement...
Similar Threads - créer fichier robots Forum Date
[reglé]créer son fichier robots.txt Débuter en référencement 24 Août 2005
Creer un fichier robots.txt? Crawl et indexation Google, sitemaps 23 Janvier 2004
Comment créer un fichier SPF (authentification emails) ? Noms de domaine et référencement 14 Mars 2022
Créer un fichier audio pour les articles Demandes d'avis et de conseils sur vos sites 2 Mai 2021
Creér un site d'hébergement de fichier, est ce légal? Droit du web (juridique, fiscalité...) 17 Avril 2015
Créer fichier header.php Débuter en référencement 8 Avril 2014
backup sql, importer un fichier dump pour recréer une table sql Administration d'un site Web 31 Mars 2014
Créer table temporaire ou fichier temporaire Développement d'un site Web ou d'une appli mobile 2 Février 2011
Votre opinion sur un fichier htacces que je viens de creer Administration d'un site Web 14 Décembre 2006
créer une page web dynamique à partir d'un fichier excel Développement d'un site Web ou d'une appli mobile 3 Mai 2006
Créer un moteur interrogeant des fichiers xml, txt, csv ? Développement d'un site Web ou d'une appli mobile 19 Février 2006
créer une page html à partir d'un fichier xml Développement d'un site Web ou d'une appli mobile 18 Décembre 2005
pourriez-vous m'aider à créer des fichiers .torrent Débuter en référencement 28 Août 2005
Coment créer un fichier .htpasswd ? URL Rewriting et .htaccess 13 Août 2005
Comment creer un fichier .htaccess ? URL Rewriting et .htaccess 13 Juin 2005
comment creer un fichier .htacces et .htpasseword URL Rewriting et .htaccess 31 Décembre 2004
Explications : comment créer un fichier RSS Administration d'un site Web 24 Mars 2004
Help ! Comment créer un fichier Robot.txt. Problèmes de référencement spécifiques à vos sites 23 Mars 2004
Mention "Site créer par ..." dans le footer Netlinking, backlinks, liens et redirections 28 Janvier 2022
Créer et animer un forum Demandes d'avis et de conseils sur vos sites 21 Novembre 2021