IP google bot Vs Bot media partner ?

Discussion dans 'Crawl et indexation Google, sitemaps' créé par Zecat, 18 Janvier 2010.

  1. Zecat
    Zecat WRInaute accro
    Inscrit:
    1 Mars 2005
    Messages:
    9 176
    J'aime reçus:
    0
    J'ai pas trouvé de topic récent sur le sujet.

    Dans les 64.249.

    Savez vous ce qui est les bots d'indexation et ce qui est mediaprtner ?

    IDans les topic d'il y a quelques années, ca disait en gros :

    64 249 64 : le bot
    64 249 66 et 67 : media partner

    Sauf que je vois aussi des 65 :roll:

    Qui a une vision claire sur le sujet ?
     
  2. mipc
    mipc WRInaute accro
    Inscrit:
    11 Février 2009
    Messages:
    3 158
    J'aime reçus:
    0

    Google-Mediapartners c'est le robot pour les pub ADSENSE, il passe régulièrement sur les pages qui comportes des pubs google ADSENSE

    l'autre et bien c'est le robot d'indexation google tous simple pour indexer les pages et les mettre à jour dans ça base de donnée, notamment les occurrences des mots clé.

    va voir ici:
    https://www.webrankinfo.com/forum/script-pour-suivre-google-bot-autres-craw ... l#p1093158
     
  3. Zecat
    Zecat WRInaute accro
    Inscrit:
    1 Mars 2005
    Messages:
    9 176
    J'aime reçus:
    0
    merci de m expliquer ce qu'est le bot media partner et le bot de crawl :roll: :mrgreen:

    Mais c'est pas ma question ... ma question est : quelles IP correspondent à chacun d'eux ... because j'examine $_SERVER['REMOTE_ADDR'] et ensuite je fais le tri ...
     
  4. mipc
    mipc WRInaute accro
    Inscrit:
    11 Février 2009
    Messages:
    3 158
    J'aime reçus:
    0
    désoler j'ai mal compris

    donc apparemment, pour Mediapartners-Google les IP address vont de 66.249.64.0 à 66.249.95.255 (googlebot.com)

    https://www.google.com/support/webmasters/bin/answer.py?answer=80553
    http://www.webmasterworld.com/search_engine_spiders/3458024.htm
    https://www.google.com/support/forum/p/AdSense/thread?tid=68807b03eab3903d&hl=en
    http://www.useragentstring.com/Mediapartners-Google2.1_id_23.php
    http://www.gidforums.com/t-528.html
    http://www.webproworld.com/web-programming-discussion-forum/86326-one- ... oogle.html
    http://qaix.com/search-engine-optimization/469-286-google-media-partne ... read.shtml
    http://www.internetofficer.com/web-robot/adsense/
    http://www.botsvsbrowsers.com/details/115401/index.html



    http://visualroute.visualware.com/

    http://www.ip-adress.com/ip_tracer/66.249.64.0

    y a des logiciel pour tracer les ip et peut être dire par ou elle passe et leur nom

    http://www.visualiptrace.com/
    http://www.commentcamarche.net/telecharger/telecharger-34059089-visual-ip-trace


    voila je pense qu'avec ça tu a une base précise pour faire la liste des IP de google Mediapartners.


    EDIT: j'ai d'autre IP de DATACENTER de google

    http://www.positeo.com/listing-google-datacenters/

     
  5. Zecat
    Zecat WRInaute accro
    Inscrit:
    1 Mars 2005
    Messages:
    9 176
    J'aime reçus:
    0
    arf j'ai trouvé, c'était tout simple en fait ...

    $_SERVER(HTTP_USER_AGENT)

    ca donne le navigateur du visiteur mais pour les moteurs ca donne le nom du bot : Mediapartners-Google

    Houinnn pourquoi on me cache tout :?: :mrgreen:

    Ca fait de suite beaucoup moins rempli coté passage de bots une fois qu'on vire mediapartners-Google :!:
     
  6. HawkEye
    HawkEye WRInaute accro
    Inscrit:
    23 Février 2004
    Messages:
    13 932
    J'aime reçus:
    4
    Il fallait le dire tout de suite, que tu voulais le User-Agent :roll:

    Note que de nos jours, Mediapartners crawle tout autant que GoogleBot: ils alimentent tous les deux le même pool de données, que chaque service peut consulter à sa guise (ce qui évite de crawler une même page 2x).
     
Chargement...
Similar Threads - google bot Bot Forum Date
Urls orphelines crawlées par Google + Robots.txt ? Crawl et indexation Google, sitemaps 3 Avril 2020
Comment augmenter la fréquence de passage de GoogleBot Crawl et indexation Google, sitemaps 10 Décembre 2019
Site inaccessible pour GoogleBot Crawl et indexation Google, sitemaps 21 Octobre 2019
En décembre 2019 changement de l'user agent de Googlebot Crawl et indexation Google, sitemaps 5 Octobre 2019
Google bot + paramètre url Développement d'un site Web ou d'une appli mobile 22 Août 2019
googlebot crawle des pages inexistantes Crawl et indexation Google, sitemaps 16 Août 2019
Les pages 404 avec googlebot Crawl et indexation Google, sitemaps 14 Juin 2019
Evergreen Googlebot, basé sur Chromium (Chrome open source) Référencement Google 9 Mai 2019
Empêcher Googlebot de crawler/indexer tout un dossier Débuter en référencement 19 Avril 2019
GoogleBot scan url inexistante Crawl et indexation Google, sitemaps 17 Avril 2019
  1. Ce site utilise des cookies. En continuant à utiliser ce site, vous acceptez l'utilisation des cookies.
    Rejeter la notice