Le budget de crawl de Google : définition et conseils d'optimisation

Discussion dans 'Techniques avancées de référencement' créé par WebRankInfo, 17 Janvier 2017.

Tags:
  1. WebRankInfo
    WebRankInfo Admin
    Membre du personnel
    Inscrit:
    19 Avril 2002
    Messages:
    20 596
    J'aime reçus:
    656
    Suite à l'excellent article paru dans le blog de Google, j'ai rédigé un dossier que j'estime assez complet sur la notion de budget de crawl. Jusqu'à présent on entendait surtout Google dire que ça n'existe pas, mais ce n'est pas ce qui est (bien) expliqué dans leur article. Au contraire, en tout cas pour les gros sites, c'est un sujet très important d'optimisation du référencement naturel.

    En gros, selon moi, la meilleure façon d'optimiser le crawl (à part d'accélérer son site) est de réduire la "masse noire" (lisez mon article en entier pour les explications). En plus ça "nettoie" souvent le site de pages de mauvaise qualité, ce qui est bénéfique pour l'ensemble du référencement (cf. algos Panda, Phantom et autres liés à la qualité).

    Avez-vous des compléments à suggérer / retours d'expérience / questions ?

    [​IMG]
     
    #1 WebRankInfo, 17 Janvier 2017
  2. Digit
    Digit WRInaute occasionnel
    Inscrit:
    18 Avril 2003
    Messages:
    463
    J'aime reçus:
    3
    En complément de ces statistiques, vous pouvez en déduire le poids moyen par élément crawlé. L'article précise une illustration de pages crawlées par jour (moyenne 2500) et volume (150 Mo pour faire simple) ce qui donne 60ko en moyenne. Plus c'est lourd, plus ça prend du temps à télécharger et donc cela a un impact sur la troisième mesure (temps de chargement d'une page). Or justement, Google favorise les sites rapides aux sites lents. Il est donc important de conserver un poids faible des pages afin de réduire la durée de chargement de la page et donc d'avoir un meilleur indice de performance, qui sera bénéfique au référencement.
     
    #2 Digit, 17 Janvier 2017
  3. WebRankInfo
    WebRankInfo Admin
    Membre du personnel
    Inscrit:
    19 Avril 2002
    Messages:
    20 596
    J'aime reçus:
    656
    en effet, juste 2 remarques :
    - la courbe de Google mélange tous les types de documents, qui ne s'optimisent pas de la même façon
    - la taille en Ko d'une page HTML n'est pas le seul critère qui a un impact sur le temps de téléchargement (et de chargement complet de la page)
     
    #3 WebRankInfo, 17 Janvier 2017
  4. guydumais
    guydumais Nouveau WRInaute
    Inscrit:
    17 Mai 2016
    Messages:
    1
    J'aime reçus:
    0
    Effectivement le temps de chargement de chaque page web d'un site est un facteur de classement MAJEUR dans les moteurs de recherche en 2017.

    Dernièrement, j'ai optimisé un site WordPress qui est hébergé et géré par une autre agence web. Le site du client avait quelques bonnes positions sur la première page des résultats de recherche Google pour des mots clés populaires pendant quelques mois puis il est passé de la première page à la huitième page et dixième page pour les mêmes mots clés. Après vérification, j'ai constaté qu'il y avait un délai de 15 secondes avant l'envoi de chaque page web du site vers les visiteurs et que cela durait depuis plusieurs semaines. Inacceptable avec ce que l'on connait aujourd'hui des exigences minimales définies par Google.

    Après analyse du site une fois que j'ai réussi à avoir accès à l'administration du site, j'ai découvert qu'il y avait plusieurs extensions WordPress (plugins) inutiles qui occasionnait des délais. J'ai effectué un ménage des plugins et optimisé le code (Cache, GZip, compression de Javascript et CSS, etc.) pour réduire le temps de chargement de 15 secondes à 3 secondes en moyenne pour chaque page. Après quelques jours, le site à commencer à réapparaître sur la première page des résultats de recherche Google. Évidement, j'en ai profité pour optimiser les métas (Title, Description) et le contenu de chaque page web pour améliorer le positionnement qui est maintenant meilleur que les résultats initiaux.

    Adresse du site Web WordPress optimisé :
    https://entretienoptimum.com/
     
    #4 guydumais, 15 Août 2017
  5. supp057
    supp057 Nouveau WRInaute
    Inscrit:
    6 Juillet 2017
    Messages:
    1
    J'aime reçus:
    0
    Bonjour,

    Merci pour l'information ! Si c'est bénéfique pour le positionnement de notre site et dans d'autre cas facilite la récupération des backlinks, je crois que c'est une bonne option. En tout cas, Google ne cesse de nous impressionner !

    A très bientôt !
     
    #5 supp057, 31 Août 2017
  6. jackluter
    jackluter Nouveau WRInaute
    Inscrit:
    14 Février 2017
    Messages:
    4
    J'aime reçus:
    0
    Thank you for the information.
     
    #6 jackluter, 4 Octobre 2017
  7. nabil2010
    nabil2010 Nouveau WRInaute
    Inscrit:
    6 Septembre 2010
    Messages:
    1
    J'aime reçus:
    0
    si j'ai bien compris le budget crawl de google dépend du poids des pages
     
    #7 nabil2010, 31 Décembre 2017
(Vous devez vous identifier ou vous inscrire pour poster ici.)
Chargement...
Similar Threads - budget crawl Google Forum Date
Budget Crawl Google pour un gros site Crawl et indexation Google, sitemaps 18 Novembre 2021
Critères de tri en GET et budget crawl Référencement Google 25 Février 2021
Le budget crawl Référencement Google 5 Mars 2020
Budget de crawl et images "Indexée, mais non envoyée via un sitemap" Problèmes de référencement spécifiques à vos sites 13 Mai 2019
Migration, redirections, budget de crawl Débuter en référencement 1 Octobre 2018
Campagne Google Ads : mettre en veille ou réduire le budget ? AdWords 19 Avril 2020
Quel budget seo pour une plateforme ? Débuter en référencement 25 Mars 2020
Astuce Adwords - budget qui change chaque jour Référencement Google 10 Octobre 2019
Quel budget pour le référencement naturel ? comment facturer Référencement Google 9 Septembre 2019
Petit budget pour Adwords, ça vaut la peine ? AdWords 21 Janvier 2018