1. ⭐⭐⭐ Grosse PROMO en cours sur ma plateforme SEO My Ranking Metrics
    Rejeter la notice

Photos bloquées par le fichier robots.txt selon GWT

Discussion dans 'Crawl et indexation Google, sitemaps' créé par billy9, 18 Décembre 2013.

  1. billy9
    billy9 Nouveau WRInaute
    Inscrit:
    27 Novembre 2013
    Messages:
    21
    J'aime reçus:
    0
    Bonjour,
    en lançant la fonction "voir comme google" sur GWT, parmi les erreur sont indiquées toutes les photos,
    j'aimerai comprendre comment ça ce fait.

    voici ce que j'ai dans le fichier robots.txt :

    User-agent : *
    Crawl-delay: 1

    User-Agent: Googlebot
    Disallow : /*?
    Disallow : /*=

    User-agent: Exabot
    Crawl-delay: 1

    User-Agent: MJ12bot
    Crawl-Delay: 10

    User-Agent: AhrefsBot
    Crawl-Delay: 10

    User-agent: msnbot
    Crawl-delay: 1

    Merci de votre aide.
     
  2. billy9
    billy9 Nouveau WRInaute
    Inscrit:
    27 Novembre 2013
    Messages:
    21
    J'aime reçus:
    0
    Re: Photos bloqué par le fichier robots.txt selon GMT

    Ayant eu pas mal de surcharge sur le serveur, ont a souhaité limiter les bots trop groumant, mis à part google bot, qui selon mes infos n'est pas concerné par la balise Crawl-delay.

    Le but de :
    User-agent : *
    Crawl-delay: 1
    Dire à tous les bots qui en sont capable, de laisser 1 seconde entre chaque requête

    User-Agent: Googlebot
    Disallow : /*?
    Disallow : /*=
    Dire à google bot de ne pas indexer les pages avec url contenant ? ou =
     
  3. billy9
    billy9 Nouveau WRInaute
    Inscrit:
    27 Novembre 2013
    Messages:
    21
    J'aime reçus:
    0
    J'ai vidé le ficher robots.txt est le message de blocage des photos par le robot n'est plus indiqué dans WMT,
    en attendant vos conseils pour mieux compléter ce fichier,
    merci.
     
  4. billy9
    billy9 Nouveau WRInaute
    Inscrit:
    27 Novembre 2013
    Messages:
    21
    J'aime reçus:
    0
    Pas d'avis SVP ?
     
Chargement...
Similar Threads - Photos bloquées fichier Forum Date
Les photos des pages produits e-commerce 10 Janvier 2019
Attribut Alt photos Débuter en référencement 10 Septembre 2018
Vol de photos ya t-il une solution efficace? Droit du web (juridique, fiscalité...) 9 Avril 2018
Quelqu'un essaie de poser des backlinks sur mes photos Débuter en référencement 22 Novembre 2017
Générer du trafic avec les photos : sitemap ou seulement "alt" ? Débuter en référencement 31 Juillet 2017
Vol de photos avec backlink, bon ou pas? Référencement Google 14 Mai 2017
Transfert de photos d'un compte vers une page Facebook Facebook 22 Janvier 2017
Les photos n'apparaissent pas dans mes tweets, uniquement un lien Twitter 16 Septembre 2016
Affichage aléatoire de photos, impact référencement Débuter en référencement 7 Septembre 2016
Duplicate content pour des photos ? Rédaction web et référencement 13 Avril 2016
  1. Ce site utilise des cookies. En continuant à utiliser ce site, vous acceptez l'utilisation des cookies.
    Rejeter la notice