Est il utile de mettre sur robots.txt une page 404?

Discussion dans 'Netlinking, backlinks, liens et redirections' créé par davalex, 17 Septembre 2007.

Tags:
  1. davalex
    davalex WRInaute discret
    Inscrit:
    8 Mars 2006
    Messages:
    191
    J'aime reçus:
    0
    Bonjour à tous,

    J'ai changé il y'a plusieurs semaines complètement la structure de mon site et avait placé dans mon robots.txt tout un répertoire qui comprenait de nombreuses pages qu'il fallait déréférencer car complétement obsolètes. J'ai mis en même temps sur ces pages une erreur 404 vers la home. Ne pensez vous pas que ça puisse faire doublon? L'erreur 404 n'aurait pas suffit à les retirer??

    Merci d'avance
     
    #1 davalex, 17 Septembre 2007
  2. noomba
    noomba Nouveau WRInaute
    Inscrit:
    8 Juillet 2007
    Messages:
    38
    J'aime reçus:
    0
    En cas de changement je te conseille:
    - erreur 404 dans le fichier htaccess renvoyant vers la homepage
    - un nouveau plan sitemap
    - un fichier robots.txt bloquant les dossiers contenant les fichiers obsolètes.
    - un cron sur le serveur qui régénère ton plan sitemap tous les jours
    - un fichier xsl qui transforme ton sitemap avec des liens type HTML

    N'oublies pas dans le fichier robots.txt de faire le lien vers ton sitemap.xml

    Cf. http://www.livres-medicaux.com
     
    #2 noomba, 17 Septembre 2007
  3. Jeviensderio
    Jeviensderio WRInaute passionné
    Inscrit:
    29 Septembre 2006
    Messages:
    1 053
    J'aime reçus:
    0
    J'aurais mis plutôt un attribut noindex dans la section head des pages à retirer:

    <meta name="robots" content="none">
     
    #3 Jeviensderio, 17 Septembre 2007
  4. metropoway
    metropoway WRInaute discret
    Inscrit:
    3 Mars 2004
    Messages:
    219
    J'aime reçus:
    1
    Oulà, c'est la grosse artillerie...
    À mon avis, tu peux déjà te contenter de gérer les 404 ET d'actualiser ton robots.txt. Pour le reste...
     
    #4 metropoway, 17 Septembre 2007
  5. acamar
    acamar WRInaute passionné
    Inscrit:
    27 Novembre 2005
    Messages:
    1 334
    J'aime reçus:
    0
    En quoi ça peut être utile ?
     
    #5 acamar, 17 Septembre 2007
  6. davalex
    davalex WRInaute discret
    Inscrit:
    8 Mars 2006
    Messages:
    191
    J'aime reçus:
    0
    Merci à tous pour vos réponses.
    Autre petite question puisqu'on est dans le sujet.
    Au mois de mai dernier, j'avais supprimé un répertoire via les outils webmaster google comprenant pas mal de page qui avaient de plus des liens sur la toile (sur pas mal de forums) . Le contenu a donc été supprimé depuis pas mal de temps, ces anciennes pages supprimées sont désormais redirigées vers la home par une redir 301, est ce OKI ?

    Merci bcp
     
    #6 davalex, 17 Septembre 2007
  7. metropoway
    metropoway WRInaute discret
    Inscrit:
    3 Mars 2004
    Messages:
    219
    J'aime reçus:
    1
    Oui
     
    #7 metropoway, 17 Septembre 2007
  8. davalex
    davalex WRInaute discret
    Inscrit:
    8 Mars 2006
    Messages:
    191
    J'aime reçus:
    0
    Merci beaucoup :)
     
    #8 davalex, 18 Septembre 2007
(Vous devez vous identifier ou vous inscrire pour poster ici.)
Chargement...
Similar Threads - utile mettre robots Forum Date
Mettre le contenu en premier dans une page est-ce utile ? Référencement Google 3 Mars 2011
Référencer un blog, est-ce bien utile de mettre en oeuvre tout ces outils ? Débuter en référencement 5 Janvier 2009
Est-ce utile de mettre une balise alt pour les background? Débuter en référencement 21 Juin 2004
Idées d'expressions régulières utiles en SEO Référencement Google 17 Mai 2021
Est-ce inutile de laisser un mot clé dans le title qui ne ressort pas sur Google ? Référencement Google 4 Mars 2021
Balise title="" dans un lien inutile pour référencer ? Débuter en référencement 11 Octobre 2020
Les AMP Stories sont-elles utiles ? Référencement Google 26 Septembre 2020
L'antivirus est-il utile pour protéger les données professionnelles? Le café de WebRankInfo 17 Septembre 2020
Fil d'ariane complet uniquement si on navigue : technique utile ? Référencement Google 15 Juillet 2020
Si hreflang implémentés par HTML (<head>), inutile dans sitemaps ? Référencement international (langues, pays) 18 Mai 2020
Extensions Chrome très utiles au SEO Référencement Google 30 Avril 2020
Redirection utile pour les catégories d'articles ? Référencement Google 31 Mars 2020
Les annuaires encore utiles au référencement en 2020 ? Débuter en référencement 31 Mars 2020
Création de sous domaine utile ? Noms de domaine et référencement 23 Janvier 2020
Page Catégorie customisée encore utile en 2019 ? Référencement Google 14 Juillet 2019
Extension Chrome utile pour afficher le code source HTML, JS, CSS Développement d'un site Web ou d'une appli mobile 5 Juillet 2019
Réseaux sociaux devenus inutiles Autres réseaux sociaux 20 Avril 2019
Redirection de beaucoup de noms de domaines vers son site utile? Débuter en référencement 26 Novembre 2018
Récapitulatif Outils utiles pour : Google Analytics, Google Tag Manager et d'autres Google Analytics 16 Septembre 2018
Compresser ses images avec WebP utile ? Développement d'un site Web ou d'une appli mobile 1 Février 2018