| |
|
Voir le sujet précédent :: Voir le sujet suivant
|
| Auteur |
Message |
| |
|
ecocentric
WRInaute accro
Inscrit le: 10 Fév 2004
Messages: 3256
Localisation: Mons
|
 Posté le : Mer Oct 11, 2006 23:46 Sujet du message: Robot Google News |
|
|
Quel est le nom du robot de Google News ?
Quid de son respect des fichiers robots.txt ? |
|
| |
|
 |
Monty973
WRInaute accro
Inscrit le: 21 Mar 2006
Messages: 1525
|
| Posté le : Jeu Oct 12, 2006 2:45 Sujet du message: Robot Google News |
|
|
Pour le nom, je ne sais pas.
Pour ce qui est du respect des règles d'exclusions :
| Citation: |
| Google News obeys standard web protocols for robots.txt files and robots meta tags. |
Google News respecte les protocoles standards des fichiers robots.txt et des balises meta.
source :
http://www.google.com/support/news_pub/bin/answer.py?answer=40541&topic=8871
Il n'y a peut être pas de bot ayant un nom particulier pour Google News si cette liste est à jour :
http://www.iplists.com/
Pour ce qui est de l'IP, Matt Cutts dit que celle pour l'indexation des news
appartient au champs utilisé pour le crawl principal :
| Citation: |
| That range [the Googlebot range] is used for things like the main web crawl and fetches for Google News and our image search |
Ce champs (celui de GoogleBot) est utilisé pour le crawl principal ainsi que pour Google News et notre recherche d'images.
source :
http://www.mattcutts.com/blog/other-google-fetching/ |
|
| |
|
|
| |
|
|
|
|
Autres sujets de discussion :
Définitions :
|
|
