Forum phpBB indexé avec des identifiants bidons

[Venomspy]

Bonjour,

Suite à une erreur technique SSL, désindexation complète de mon site, puis demande de réindexation sur GSC.
Tout le forum a été bloqué (+17.000 pages).

J'ai trouvé le problème, mais je ne sais pas y remédier.
Google a indexé comme s'il était connecté avec un compte membre (sans nom, vide) du forum et ne "voit" aucun forum, donc liens à suivre.

Version en cache Google :
https://webcache.googleusercontent....plaisir.com/piscine/&cd=9&hl=fr&ct=clnk&gl=fr

Avez-vous une idée de comment relancer l'indexation propre ?
Je vous remercie.
Laurent.

 

[Madrileño]

Bonjour,

Google a indexé comme s'il était connecté avec un compte membre (sans nom, vide) du forum et ne "voit" aucun forum, donc liens à suivre.
Avez-vous une idée de comment relancer l'indexation propre ?

Problème de configuration du forum.
Vérifier les permissions des robots.

Cordialement.

 

[Venomspy]

Bonjour,

Merci beaucoup pour votre réponse.
Le chemin est donc phpbb3 > Permissions groupes/forums > Robots > sélectionner accès robots pour les forums à crawler.
A suivre. Je viendrai donner les résultats.

 

[Madrileño]

Bonjour,

Vous bloquez encore les bots, il faut bien vérifier la configuration de votre forum.
Vous pouvez faire un simple test avec le "User Agent" de Googlebot ou Bingbot.
Vous n'aurez plus les sous-menus disponibles pendant le test.

Cordialement.

 

[Venomspy]

Bonjour,

C'est quoi "User Agent" de Googlebot ou Bingbot ?
Un outil en ligne ? Avez-vous l'adresse ? Merci.

 

[Madrileño]

Bonjour,

C'est quoi "User Agent" de Googlebot ou Bingbot ?

Réponse :

Le User Agent est le nom indiqué par Google quand il envoie son crawler (robot) consulter les pages de votre site. Il a plusieurs sortes de crawlers, notamment un pour explorer les pages en version smartphone (si votre site n'est pas encore compatible mobile, lisez d'urgence ces conseils SEO).

On distingue 2 types de noms d'agent :

le complet, que l'on retrouve dans l'entête HTTP et les logs de crawl
le simplifié, que l'on utilise dans les directives du fichier robots.txt

Source : Article du site du forum.

Un outil en ligne ? Avez-vous l'adresse ? Merci.

Pour tester, vous pouvez utiliser les outils de votre navigateur (Developer Tools) ou avec des extensions de navigateur.

Cordialement.

 

[Venomspy]

Bonjour,

J'ai trouvé après des mois de recherche. Je viens apporter la solution qui pourrait aider certains.

Déjà, au lieu d'attendre la venue de Google et constater que le robot ne voit aucun contenu, j'ai simulé Googlebot avec la commande CURL de Windows.
User agent de Google Bot est : Googlebot/2.1 (+http://www.google.com/bot.html)

Exécutez CMD sous Windows.
Tapez :
curl --user-agent "Googlebot/2.1 (+http://www.google.com/bot.html)" -o test.php URLdevotredomaine

Le paramètre -o enregistre dans un fichier, ici test.php, que j'ouvre ensuite.
Le contenu reçu représente ce que Google va aspirer.

Maintenant, dans le forum phpbb 3 / Administration / Général / Robots / Ajouter un robot, ou modifier :
Nom du robot: GoogleBot 2.1
Agent correspondant: Googlebot/2.1 (+http://www.google.com/bot.html)

Ajoutez tous les robots à jour. Liste facile à trouver :

YandexBot	​
Googlebot2.1	​
GoogleBot	​
Google-InspectionTool	​
GoogleOther	​
Baidu Spider	​
Bingbot	​
CCBot	​
DuckDuck Bot	​
Exabot	​
Facebook	​
Googlebot-Image	​
Slurp	​
Swiftbot

Demandez une indexation sur Google Search Console et Bing Webmaster Tools.