googlebot (robot de crawl google)

Bonjour, je ne comprends pas pourquoi GGbots m'envoie cette alerte sur un site qui ne possède pas de fichier robots.txt ... Au cours des 24 dernières heures, Googlebot a rencontré 1 erreurs en tentant d'accéder au fichier robots.txt. Pour veiller à ne pas explorer les pages répertoriées dans ce...

Bonjour à tous, J'aurais besoin que vous m’éclaircissiez sur un aspect de l'URL rewriting face à Googlebot. Par exemple, j'ai une page qui s'appelle "fiche_produit.php". Pour un produit, la page est "fiche_produit.php?id_produit=100" Je fais de l'URL rewriting et l'URL devient...

Bonjour à tous :D J'ai déjà lu plusieurs fois les informations fournies par Google concernant les balises meta mais malgré tout je me demande encore comment faire pour que Googlebot n 'index pas les noms de dossier en dessous de mon site. Pour êtres plus précis et dans le meilleurs des cas...

Bonjour, J'ai pour habitude de proposer mes nouvelles urls via les outils Google avec "Analyser comme Googlebot" mais depuis hier, j'ai des échecs à la soumission alors que les url existent .. d'après vous, cela peut venir d'où ?

Bonjour Occasionnellement, j'ai constaté (dans sitemeter) que le robot de google restait environ 25 mn sur mon blog. Récemment, c'est même arrivé à 2 jours d'intervalle. A priori, est-ce "bon signe" ou plutôt "mauvais signe" ? Merci pour vos indications. Ou cette question a-t-elle déjà...

Bonjour, Je viens de finir un site qui tourne sous Wordpress http://www.cyril-deves.fr. Pendant la mise en place j'avais demandé à WP de ne pas être indexé par les moteurs de recherches (option vie privée). Je viens de retirer cette option, mais quand je tente d'analyser ce site dans les outils...

Bonjour, Je rencontre actuellement un problème important sur un site dont je m'occupe, et qui commence à avoir un impact du point de vue du référencement. Le principe: le site est bien accessible aux internautes, et il n'y a pas de problème d'affichage, seulement Googlebot renvoie constamment...

BOnjour, Avec 50.000 passages par jour, je m'étais habitué à sa présence frénétique. Depuis ce matin il est vraiment très très discret voir pas là du tout. Une idée de ce qui ce trame ?

Bonjour, Je viens d'avoir accès au webmasters tools de google, ces derniers m'indiquent 1 problème d'exploration, 2 URL à accès restreint par un fichier robots.txt : – http://www.conception63.com/siteBackHtml?adress=docName:,userNick:,pageNum:0,docId:20527951,pageId: –...

Salut, En regardant mes fichiers logs apache, je me rends compte que Googlebot utilise la plupart du temps la compression, mais pas toujours. Est-ce que vous savez si c'est normal ? cat www.mondomaine.fr.20111222.log |grep "GET / " |grep Googlebot 66.249.66.11 - - [22/Dec/2011:10:46:40 +0100]...

Bonjour, Je voudrais savoir s'il existe un moyen, sur une page web de mon site, de distinguer si le clic effectué sur tel lien est fait par un vrai internaute physique ou par le moteur de recherche de Google ? Je voudrais différencier le traitement : 1) Si c'est un internaute qui clique sur le...

Bonjour, On sait depuis très peu de temps que Google peut crawler et indexer le contenu ajax. Nous, référenceurs, allons devoir trouver des parades pour empêcher le bot d'emmagasiner n'importe quelle info. Questions (et il serait intéressant de faire un topic constructif pour récapituler les...

Bonjour, Googlebot explore t il toute la page, quelque soit sa taille (son poids), ou bien explore t il que les 100 premiers ko, comme lors de la simulation dans Google Webmaster Tools ? Jérémie

Bonjour à tous, Depuis plusieurs jours le robot de google a un comportement franchement bizarre : des pics énormes d'activités que je n'ai jamais vu en 5 ans. Constatez-vous aussi ces mêmes changements ? Y-aura t-il un lien avec le fameux panda ?

Bonjour, Je souhaite interdire l'accès de plusieurs pages (un panier par exemple, formulaire d'authentification, etc...) à Google. J'ai renseigné correctement, je pense, le robots.txt. Sur "Webmaster Central" je vois toujours des lignes d'erreur "URL à accès restreint par un fichier robots.txt"...

Bonjour, De temps en temps je vois dans webmastertools de google ces deux erreurs : Network unreachable et DNS issue J'ai un système de monitoring qui surveille le site (30min) et celui ci ne me signale aucun problème. Par ailleurs google arrive à indexer la quasi totalité des pages. Mon site...

Bonjour, J'espère être sur le bon forum. Depuis le mois de Janvier, j'ai commencé à avoir un trafic de 1Go au bout de 20 jours, puis ce mois ci au bout de 3 jours. Mais tout mon trafic est utilisé par Googlebot avec des erreurs 404. voici mes logs, j'en ai 10000 par jour. Nota, ce ne sont pas...

Bonjour a tous, Je voulais savoir si d'autres personnes sont dans le même cas que moi : Depuis le 12 avril 2011, GoogleBot crawle des pages qui n'ont jamais existé (Ok ca peut arriver si un site fait un lien vers une page inexistante). Mais la ou c'est étrange, c'est que les pages en question...

Bonjour à tous, Depuis presque 1 semaine, googlebot continue de passer quotidiennement sur mon site, mais les articles de mon blog ne sont plus indexés dans google, alors qu'avant mes articles étaient indexés tous les jours (une rapide recherche dans google me ressortait mes pages). J'ai un...

Hello, Depuis aujourd'hui je viens de remarquer dans les logs des visites bizarres de Googlebot. Il essaie d'accéder à la home page de mon site en rajoutant des paramètres, sans que ça vienne d'un lien pour autant que je sache. Pour le moment j'ai vu ça : /?l=it /?l=cz /?l=fr /?l=pl...