Yahoo Yahoo-VerticalCrawler

Discussion dans 'Autres moteurs de recherche connus' créé par Digit, 6 Mars 2004.

  1. Digit
    Digit WRInaute occasionnel
    Inscrit:
    18 Avril 2003
    Messages:
    441
    J'aime reçus:
    1
    Depuis quelques jours un nouveau bot passe me voir :
    Code:
    shop-gw.sac.overture.com - - [06/Mar/2004:11:52:31 +0100] "GET /xxxx HTTP/1.0" 200 10727 "-" "Yahoo-VerticalCrawler-FormerWebCrawler/3.9 crawler at trd dot overture dot com; http://www.alltheweb.com/help/webmaster/crawler"
    shop-gw.sac.overture.com - - [06/Mar/2004:11:52:43 +0100] "GET /yyyy HTTP/1.0" 200 10981 "-" "Yahoo-VerticalCrawler-FormerWebCrawler/3.9 crawler at trd dot overture dot com; http://www.alltheweb.com/help/webmaster/crawler"
    shop-gw.sac.overture.com - - [06/Mar/2004:11:52:56 +0100] "GET /zzzz HTTP/1.0" 200 10865 "-" "Yahoo-VerticalCrawler-FormerWebCrawler/3.9 crawler at trd dot overture dot com; http://www.alltheweb.com/help/webmaster/crawler"
    
    Je commence à m'y perdre, quelqu'un peut-il m'indiquer la fonction de celui-ci, et plus globalement le rôle de tous les différents crawlers de Yahoo ?
     
  2. PuraVida
    PuraVida WRInaute impliqué
    Inscrit:
    13 Janvier 2004
    Messages:
    741
    J'aime reçus:
    0
    J'ai eu les memes et je suis un peu dans le brouillard aussi 8O
     
  3. Digit
    Digit WRInaute occasionnel
    Inscrit:
    18 Avril 2003
    Messages:
    441
    J'aime reçus:
    1
    Actuellement j'ai identifié :
    - Yahoo-VerticalCrawler
    - Yahoo-MMCrawler
    - Yahoo! Slurp;
    - YahooSeeker
    - FAST-WebCrawler
    - atw-crawler
    - slurp@inktomi.com

    Probablement que certains sont désuets
     
  4. WebRankInfo
    WebRankInfo Admin
    Membre du personnel
    Inscrit:
    19 Avril 2002
    Messages:
    19 137
    J'aime reçus:
    350
    j'ai l'impression que FAST-WebCrawler et atw-crawler sont les mêmes. Voilà un user agent récemment vu dans mes logs :
    Code:
    FAST-WebCrawler/3.7/FirstPage (atw-crawler at fast dot no;http://fast.no/support/crawler.asp)
     
Chargement...
Similar Threads - Yahoo VerticalCrawler Forum Date
PHP : checkdnsrr (MX) et domaine yahoo.fr Développement d'un site Web ou d'une appli mobile 5 Septembre 2019
blacklisting emails avec yahoo Administration d'un site Web 16 Juillet 2019
Premier sur Bing/Yahoo/Qwant mais bas de page sur Google Débuter en référencement 6 Juillet 2017
Sandbox Yahoo Débuter en référencement 19 Janvier 2017
1ER SUR YAHOO Débuter en référencement 3 Novembre 2016
Rapport de logs... yahoo mail problème Développement d'un site Web ou d'une appli mobile 3 Septembre 2016
Article bien référencé sur bing, yahoo etc. mais absent de google Débuter en référencement 27 Avril 2016
Différence de référencement entre Google, Bing, Yahoo Problèmes de référencement spécifiques à vos sites 10 Avril 2016
Présent sur bing, duckduckgo, yahoo mais rien sur google Débuter en référencement 28 Janvier 2016
Yahoo Fermeture de yahoo directory (anglais) Le café de WebRankInfo 10 Décembre 2014
  1. Ce site utilise des cookies. En continuant à utiliser ce site, vous acceptez l'utilisation des cookies.
    Rejeter la notice