Robots.txt pour 2 sites sur un même serveur

Discussion dans 'Crawl et indexation Google, sitemaps' créé par darksider8, 17 Octobre 2013.

  1. darksider8
    darksider8 WRInaute discret
    Inscrit:
    6 Novembre 2011
    Messages:
    60
    J'aime reçus:
    0
    bonjour,

    j'ai depuis peu mis en ligne un second site sur l'hébergement utilisé pour mon premier site. Sans modifier le fichier robots.txt du premier site, je me rend compte que Google indexe mon second site de la façon suivante :

    www.site1.com/site2 (le deuxième site est dans un dossier)

    au lieu de www.site2.com

    j'ai ajouté ceci dans le robots.txt du 1er site (à la racine du serveur) : Disallow: /site2

    Pour le site2, il y a un fichier robots.txt aussi. Je pense cependant qu'en ajoutant Disallow: /site2, Google ne risque pas d'indexé le site en question. Dois-je ajouté une autre ligne dans le fichier robots.txt ?

    EN vous remerciant d'avance pour vos conseils.
     
  2. WebRankInfo
    WebRankInfo Admin
    Membre du personnel
    Inscrit:
    19 Avril 2002
    Messages:
    20 653
    J'aime reçus:
    747
    il faut d'abord que tu corriges pour que ton site2 ait son propre nom de domaine
    sans ça, tu ne peux rien travailler sérieusement

    un robots.txt se met à la racine de chaque sous-domaine, pas dans un répertoire
     
  3. darksider8
    darksider8 WRInaute discret
    Inscrit:
    6 Novembre 2011
    Messages:
    60
    J'aime reçus:
    0
    Ah je vois, je dois transférer le tout dans un dossier similaire à "www" (par exemple) ?
     
  4. Zubair123
    Zubair123 Nouveau WRInaute
    Inscrit:
    29 Octobre 2013
    Messages:
    1
    J'aime reçus:
    0
    txt du 1er site (à la racine du serveur) : Disallow: /site2
     
Chargement...
Similar Threads - Robots même serveur Forum Date
canonical et robots=index sur une même page Débuter en référencement 7 Décembre 2021
Deux sitemaps indiqués dans un même robots.txt Débuter en référencement 4 Août 2008
Robots.txt > meme fichier dans plusieurs sous dossiers Débuter en référencement 23 Avril 2007
Plusieurs fichiers robots.txt sur un même hébergement? Référencement Google 10 Janvier 2006
Pourquoi ne pas utiliser le robots.txt pour interdire l'indexation ? Débuter en référencement 14 Avril 2022
le noindex dans le robots.txt Débuter en référencement 19 Novembre 2021
suppression des pages bloquées par robots.txt Débuter en référencement 18 Octobre 2021
Faut-il déclarer le sitemap dans le robots.txt ou search console ? Crawl et indexation Google, sitemaps 14 Juillet 2021
Les mots-clés de mon site ne sont pas détectés par les robots de référencement Problèmes de référencement spécifiques à vos sites 7 Juillet 2021
Wordpress et le robots.txt Débuter en référencement 21 Juin 2021
Search Console noindex détecté dans la balise Meta robots Débuter en référencement 21 Mai 2021
Urls filtrées indexées et crawl robots.txt Crawl et indexation Google, sitemaps 19 Mai 2021
Robots : n'autoriser que les 4 ou 5 moteurs de recherche principaux Crawl et indexation Google, sitemaps 15 Janvier 2021
erreurs robots.txt Crawl et indexation Google, sitemaps 23 Décembre 2020
Google me dit que ma page est bien indexée mais bloquée par robots.txt Crawl et indexation Google, sitemaps 25 Novembre 2020
Faut-il déclarer le sitemap dans le robots.txt ou search console ? Crawl et indexation Google, sitemaps 17 Octobre 2020
Urls orphelines crawlées par Google + Robots.txt ? Crawl et indexation Google, sitemaps 3 Avril 2020
Robots.txt du site Kayak Débuter en référencement 11 Mars 2020
Search Console Indexée malgré le blocage dans robots.txt Crawl et indexation Google, sitemaps 26 Février 2020
Search Console Prestashop | Robot.txt bloque des URL mais Outil de test du fichier robots.txt l'Authorise... Crawl et indexation Google, sitemaps 21 Novembre 2019