Pourquoi ne pas utiliser le robots.txt pour interdire l'indexation ?

Discussion dans 'Débuter en référencement' créé par ungars, 14 Avril 2022.

  1. ungars
    ungars WRInaute discret
    Inscrit:
    6 Août 2009
    Messages:
    160
    J'aime reçus:
    3
    Bonjour,
    Je suis en train de lire cet article sur le fichier robots.txt, et je ne comprends pas bien ça :

    C' est pourtant le but de ce fichier, d' indexer ou non des pages, je ne comprends pas...

    Merci pour vos précisions, bonne soirée.
     
    #1 ungars, 14 Avril 2022
  2. Marie-Aude
    Marie-Aude WRInaute accro
    Inscrit:
    5 Juin 2006
    Messages:
    16 952
    J'aime reçus:
    275
    Non, le but de ce fichier est de bloquer ou pas l'exploration par les robots. Pour l'indexation, c'est la meta robots.
     
    #2 Marie-Aude, 14 Avril 2022
  3. WebRankInfo
    WebRankInfo Admin
    Membre du personnel
    Inscrit:
    19 Avril 2002
    Messages:
    20 896
    J'aime reçus:
    845
    #3 WebRankInfo, 15 Avril 2022
  4. ungars
    ungars WRInaute discret
    Inscrit:
    6 Août 2009
    Messages:
    160
    J'aime reçus:
    3
    Bonjour, merci pour vos réponses, je regarde tout ça à mon retour.
     
    #4 ungars, 15 Avril 2022
  5. ungars
    ungars WRInaute discret
    Inscrit:
    6 Août 2009
    Messages:
    160
    J'aime reçus:
    3
    Re,
    Je viens de lire l' article. Effectivement c' est plus clair, il ne faut pas confondre exploration et indexation.

    Merci et bonne soirée.
     
    #5 ungars, 15 Avril 2022
  6. SeoCamel
    SeoCamel Nouveau WRInaute
    Inscrit:
    19 Avril 2022
    Messages:
    5
    J'aime reçus:
    0
    Dîtes moi si je me trompe, mais tu peux bloquer le crawl depuis robots.txt si la page n'a pas encore était indexée. Google ne viendra pas la crawl donc ne l'indexera pas. Si elle a été indexée, ça devient problématique.
     
    #6 SeoCamel, 19 Avril 2022
  7. ungars
    ungars WRInaute discret
    Inscrit:
    6 Août 2009
    Messages:
    160
    J'aime reçus:
    3
    Tu devrais ouvrir ton propre topic
     
    #7 ungars, 19 Avril 2022
  8. SeoCamel
    SeoCamel Nouveau WRInaute
    Inscrit:
    19 Avril 2022
    Messages:
    5
    J'aime reçus:
    0
    Non mais je répondais à ta réflexion ahah
     
    #8 SeoCamel, 20 Avril 2022
  9. ungars
    ungars WRInaute discret
    Inscrit:
    6 Août 2009
    Messages:
    160
    J'aime reçus:
    3
    Salut, oui je te prie de m' excuser, j' ai lu un peu trop vite.
     
    #9 ungars, 20 Avril 2022
(Vous devez vous identifier ou vous inscrire pour poster ici.)
Chargement...
Similar Threads - utiliser robots interdire Forum Date
Utiliser la condition NOT Equal dans sql? Développement d'un site Web ou d'une appli mobile 28 Septembre 2022
puis-je utiliser google analytics pour suivre le trafic entrant à partir d'une url spécifique ? Google Analytics 7 Septembre 2022
WordPress Utiliser Gutenberg comme éditeur de contenu pour un champ ACF Développement d'un site Web ou d'une appli mobile 6 Juin 2022
Comment utiliser IndexNow de Bing ? Débuter en référencement 20 Mai 2022
Comment utiliser le référencement pour obtenir un bon trafic sur le nouveau site ? Débuter en référencement 28 Mars 2022
Utiliser la balise URL canonique entre plusieurs sites Référencement Google 28 Mars 2022
Utiliser YouTube Shorts dans sa stratégie marketing Autres réseaux sociaux 25 Mars 2022
Utiliser plusieurs fois une même image sur un site YouTube, Google Images et Google Maps 3 Janvier 2022
Perplexité : pourquoi utiliser une classe CSS en dehors de <body> Développement d'un site Web ou d'une appli mobile 26 Décembre 2021
Utiliser Google Ad Manager pour habillage site Monétisation d'un site web 22 Décembre 2021
Rediriger de non-www à www pour utiliser Cloudflare Référencement Google 1 Novembre 2021
Apprendre à utiliser Google Ad Manager simplement Monétisation d'un site web 4 Juillet 2021
Faut-il utiliser cette plateforme netlinking? DealerDeTemps Netlinking, backlinks, liens et redirections 2 Juillet 2021
Comment utiliser rich snippets avec Yoast SEO Premium Référencement Google 24 Avril 2021
Est-ce que ce je peux utiliser ce nom de domaine ?? Noms de domaine et référencement 18 Février 2021
Utiliser une grille CSS peut-il nuire au référencement ? Débuter en référencement 17 Janvier 2021
URL générée par Google : peut on utiliser cette url de résultat ? Netlinking, backlinks, liens et redirections 7 Janvier 2021
Utiliser l'influence d'un site pour faire croître un autre Débuter en référencement 15 Mai 2020
Peut on utiliser la même adresse url de lien cliquable régulièrement sans se faire pénaliser? Rédaction web et référencement 4 Mai 2020
Peut-on utiliser la dénomination Euro 2020 sur des cadeaux pour clients ? Droit du web (juridique, fiscalité...) 24 Février 2020