Extraction Screaming Frog / Xenu ou Webrankinfo impossible

Discussion dans 'Crawl et indexation Google, sitemaps' créé par jnceweb, 17 Décembre 2017.

  1. jnceweb
    jnceweb WRInaute discret
    Inscrit:
    30 Décembre 2013
    Messages:
    60
    J'aime reçus:
    1
    Bonjour,
    Je me permets de laisser un message sur le forum car je souhaiterais extraire toutes les META (TITLE / DESCRIPTION) de mon site et je n'y parviens pas avec Screaming Frog ou encore Xenu.

    Mon site est https://www.agencetapisrouge.com/ et je serai très content d'avoir votre aide :) Est-ce une erreur dans le header ? Déjà je trouve étrange quand vous allez sur une catégorie de mon site et que vous copiez / collez l'URL, c'est celle-ci n'est pas la même (% -)

    Merci d'avance,
    Jonathan
     
    #1 jnceweb, 17 Décembre 2017
  2. Madrileño
    Madrileño Membre Honoré
    Inscrit:
    7 Juillet 2004
    Messages:
    32 105
    J'aime reçus:
    284
    Bonjour,

    Vous pouvez vérifier les paramètres de vos outils et site Internet (cf. ci-dessous avec la première page).
    Xenu fonctionne bien, mais Screaming Frog de base indique 0 en size de la page d'accueil.
    Il semble que pour certains UA le site ne souhaite pas présenter les contenus des pages.
    Et un peu d'URL rewriting serait bien avec certaines de vos URL (qui n'en ont pas).
    Vérifier aussi le fonctionnement des URL pour corriger certaines erreurs actuelles.

    Temps de réponse : 15 minutes.
    Cordialement.
     
    #2 Madrileño, 17 Décembre 2017
  3. WebRankInfo
    WebRankInfo Admin
    Membre du personnel
    Inscrit:
    19 Avril 2002
    Messages:
    20 049
    J'aime reçus:
    532
    J'ai testé (avec mon outil RM Tech) les 10 000 premières pages (URL) et c'est assez catastrophique : 90% des URL ont un problème qui fait qu'elles ne sont pas indexables. En gros, c'est ce que j'appelle "un paquet de masse noire"...
    Avant même de s'attaquer aux titres, je pense qu'il faudrait nettoyer le site du côté technique. Je n'ai pas trouvé quel CMS est utilisé (s'il y en a un).
     
    #3 WebRankInfo, 17 Décembre 2017
  4. anemone-clown
    anemone-clown WRInaute passionné
    Inscrit:
    11 Novembre 2007
    Messages:
    1 602
    J'aime reçus:
    21
    J'ajouterai que les virgules dans les liens vont empêcher pas mal de copies de liens avec des systèmes anciens d' "autolink". Même si la virgule est théoriquement autorisée dans des url, pas mal de serveurs (nginx peut être paramétré pour cela par exemple) la filtre dans les urls pour éviter certaines attaques...

    C'est probablement le problème de ton (% ... ;-)
     
    #4 anemone-clown, 17 Décembre 2017
  5. spout
    spout WRInaute accro
    Inscrit:
    14 Mai 2003
    Messages:
    9 115
    J'aime reçus:
    315
    Penser à corriger la faille XSS sur la recherche.
     
    #5 spout, 22 Décembre 2017
  6. jnceweb
    jnceweb WRInaute discret
    Inscrit:
    30 Décembre 2013
    Messages:
    60
    J'aime reçus:
    1
    Qu'entends-tu par faille XSS ?

    Merci
     
    #6 jnceweb, 23 Décembre 2017
  7. spout
    spout WRInaute accro
    Inscrit:
    14 Mai 2003
    Messages:
    9 115
    J'aime reçus:
    315
    #7 spout, 23 Décembre 2017
  8. jnceweb
    jnceweb WRInaute discret
    Inscrit:
    30 Décembre 2013
    Messages:
    60
    J'aime reçus:
    1
    D'ailleurs pour toutes ces pages produits sans réel contenu que me conseillez-vous de faire ? NOINDEX en attendant d'avoir du contenu de qualité afin de garder que mes pages importantes sur lesquelles je veux ranker ? Si oui comment reconnaître ces pages à "cacher" ?

    Merci
     
    #8 jnceweb, 29 Décembre 2017
  9. Madrileño
    Madrileño Membre Honoré
    Inscrit:
    7 Juillet 2004
    Messages:
    32 105
    J'aime reçus:
    284
    Bonjour,
    Améliorer les pages pour avoir un bon contenu et indexer celles-ci une fois à jour (en attendant noindex si celles-ci sont pénalisantes).
    Vous pouvez aussi corriger les bugs du site Internet.

    Temps de réponse : 5 minutes.
    Cordialement.
     
    #9 Madrileño, 29 Décembre 2017
(Vous devez vous identifier ou vous inscrire pour poster ici.)
Chargement...
Similar Threads - Extraction Screaming Frog Forum Date
Outil extraction contenus - Refonte Rédaction web et référencement 21 Octobre 2019
Problème extraction tables croisés script php Développement d'un site Web ou d'une appli mobile 9 Janvier 2013
Extraction résultats Bing Développement d'un site Web ou d'une appli mobile 31 Mai 2012
Outil d'extraction d'URL Administration d'un site Web 22 Novembre 2010
Extraction d'email d'un fichier txt Développement d'un site Web ou d'une appli mobile 9 Octobre 2010
Script d'extraction Googles Images Administration d'un site Web 1 Octobre 2010
Sortir toutes les pages non indexées via screaming frog Crawl et indexation Google, sitemaps 14 Octobre 2020
Crawl Screaming Frog : comment interpréter ces données ? Crawl et indexation Google, sitemaps 8 Octobre 2020
Astuce Problème avec Screaming Frog Problèmes de référencement spécifiques à vos sites 5 Janvier 2020
Crawl Screaming Frog impossible. A cause d'un excès de liens sortants? Crawl et indexation Google, sitemaps 18 Juin 2016