Photos bloquées par le fichier robots.txt selon GWT

Discussion dans 'Crawl et indexation Google, sitemaps' créé par billy9, 18 Décembre 2013.

  1. billy9
    billy9 Nouveau WRInaute
    Inscrit:
    27 Novembre 2013
    Messages:
    21
    J'aime reçus:
    0
    Bonjour,
    en lançant la fonction "voir comme google" sur GWT, parmi les erreur sont indiquées toutes les photos,
    j'aimerai comprendre comment ça ce fait.

    voici ce que j'ai dans le fichier robots.txt :

    User-agent : *
    Crawl-delay: 1

    User-Agent: Googlebot
    Disallow : /*?
    Disallow : /*=

    User-agent: Exabot
    Crawl-delay: 1

    User-Agent: MJ12bot
    Crawl-Delay: 10

    User-Agent: AhrefsBot
    Crawl-Delay: 10

    User-agent: msnbot
    Crawl-delay: 1

    Merci de votre aide.
     
  2. billy9
    billy9 Nouveau WRInaute
    Inscrit:
    27 Novembre 2013
    Messages:
    21
    J'aime reçus:
    0
    Re: Photos bloqué par le fichier robots.txt selon GMT

    Ayant eu pas mal de surcharge sur le serveur, ont a souhaité limiter les bots trop groumant, mis à part google bot, qui selon mes infos n'est pas concerné par la balise Crawl-delay.

    Le but de :
    User-agent : *
    Crawl-delay: 1
    Dire à tous les bots qui en sont capable, de laisser 1 seconde entre chaque requête

    User-Agent: Googlebot
    Disallow : /*?
    Disallow : /*=
    Dire à google bot de ne pas indexer les pages avec url contenant ? ou =
     
  3. billy9
    billy9 Nouveau WRInaute
    Inscrit:
    27 Novembre 2013
    Messages:
    21
    J'aime reçus:
    0
    J'ai vidé le ficher robots.txt est le message de blocage des photos par le robot n'est plus indiqué dans WMT,
    en attendant vos conseils pour mieux compléter ce fichier,
    merci.
     
  4. billy9
    billy9 Nouveau WRInaute
    Inscrit:
    27 Novembre 2013
    Messages:
    21
    J'aime reçus:
    0
    Pas d'avis SVP ?
     
Chargement...
Similar Threads - Photos bloquées fichier Forum Date
SERP : Google préfère des captures des vidéos aux photos Référencement Google 23 Juillet 2021
Aide sur photos articles Wix e-commerce 13 Mars 2021
Référencement d'une galerie contenant de nombreuses photos YouTube, Google Images et Google Maps 16 Janvier 2021
***Coloriser vos photos N&B en quelques secondes Le café de WebRankInfo 16 Juin 2020
Référencement images : avantage pour photos de mannequins célèbres ? Débuter en référencement 26 Mars 2020
Les photos des pages produits e-commerce 10 Janvier 2019
Attribut Alt photos Débuter en référencement 10 Septembre 2018
Vol de photos ya t-il une solution efficace? Droit du web (juridique, fiscalité...) 9 Avril 2018
Quelqu'un essaie de poser des backlinks sur mes photos Débuter en référencement 22 Novembre 2017
Générer du trafic avec les photos : sitemap ou seulement "alt" ? Débuter en référencement 31 Juillet 2017
Vol de photos avec backlink, bon ou pas? Référencement Google 14 Mai 2017
Transfert de photos d'un compte vers une page Facebook Facebook 22 Janvier 2017
Les photos n'apparaissent pas dans mes tweets, uniquement un lien Twitter 16 Septembre 2016
Affichage aléatoire de photos, impact référencement Débuter en référencement 7 Septembre 2016
Duplicate content pour des photos ? Rédaction web et référencement 13 Avril 2016
Droit d'auteur photos sur réseaux sociaux Facebook 18 Décembre 2015
Meilleure solution pour un site de "galeries photos" Développement d'un site Web ou d'une appli mobile 29 Octobre 2015
Suite de photos avec les mêmes alt : trop forte densité de mots clés ? Référencement Google 30 Août 2015
Poids des photos dans mon site Rédaction web et référencement 30 Mai 2015
Nom et balises alt des photos d'un même produit Prestashop e-commerce 8 Mai 2015