Photos bloquées par le fichier robots.txt selon GWT

Discussion dans 'Crawl et indexation Google, sitemaps' créé par billy9, 18 Décembre 2013.

  1. billy9
    billy9 Nouveau WRInaute
    Inscrit:
    27 Novembre 2013
    Messages:
    21
    J'aime reçus:
    0
    Bonjour,
    en lançant la fonction "voir comme google" sur GWT, parmi les erreur sont indiquées toutes les photos,
    j'aimerai comprendre comment ça ce fait.

    voici ce que j'ai dans le fichier robots.txt :

    User-agent : *
    Crawl-delay: 1

    User-Agent: Googlebot
    Disallow : /*?
    Disallow : /*=

    User-agent: Exabot
    Crawl-delay: 1

    User-Agent: MJ12bot
    Crawl-Delay: 10

    User-Agent: AhrefsBot
    Crawl-Delay: 10

    User-agent: msnbot
    Crawl-delay: 1

    Merci de votre aide.
     
  2. billy9
    billy9 Nouveau WRInaute
    Inscrit:
    27 Novembre 2013
    Messages:
    21
    J'aime reçus:
    0
    Re: Photos bloqué par le fichier robots.txt selon GMT

    Ayant eu pas mal de surcharge sur le serveur, ont a souhaité limiter les bots trop groumant, mis à part google bot, qui selon mes infos n'est pas concerné par la balise Crawl-delay.

    Le but de :
    User-agent : *
    Crawl-delay: 1
    Dire à tous les bots qui en sont capable, de laisser 1 seconde entre chaque requête

    User-Agent: Googlebot
    Disallow : /*?
    Disallow : /*=
    Dire à google bot de ne pas indexer les pages avec url contenant ? ou =
     
  3. billy9
    billy9 Nouveau WRInaute
    Inscrit:
    27 Novembre 2013
    Messages:
    21
    J'aime reçus:
    0
    J'ai vidé le ficher robots.txt est le message de blocage des photos par le robot n'est plus indiqué dans WMT,
    en attendant vos conseils pour mieux compléter ce fichier,
    merci.
     
  4. billy9
    billy9 Nouveau WRInaute
    Inscrit:
    27 Novembre 2013
    Messages:
    21
    J'aime reçus:
    0
    Pas d'avis SVP ?
     
Chargement...
Similar Threads - Photos bloquées fichier Forum Date
***Coloriser vos photos N&B en quelques secondes Le café de WebRankInfo 16 Juin 2020
Référencement images : avantage pour photos de mannequins célèbres ? Débuter en référencement 26 Mars 2020
Les photos des pages produits e-commerce 10 Janvier 2019
Attribut Alt photos Débuter en référencement 10 Septembre 2018
Vol de photos ya t-il une solution efficace? Droit du web (juridique, fiscalité...) 9 Avril 2018
Quelqu'un essaie de poser des backlinks sur mes photos Débuter en référencement 22 Novembre 2017
Générer du trafic avec les photos : sitemap ou seulement "alt" ? Débuter en référencement 31 Juillet 2017
Vol de photos avec backlink, bon ou pas? Référencement Google 14 Mai 2017
Transfert de photos d'un compte vers une page Facebook Facebook 22 Janvier 2017
Les photos n'apparaissent pas dans mes tweets, uniquement un lien Twitter 16 Septembre 2016
  1. Ce site utilise des cookies. En continuant à utiliser ce site, vous acceptez l'utilisation des cookies.
    Rejeter la notice