Crawl Site Web impossible avec n'importe quel outil

[cedille]

Bonjour,

Après quelques recherches et vérifications, je me tourne vers vous afin de trouver une réponse à ma question.

Voici le problème :

Un site sur lequel j'ai repris la main en SEO a interdit, via le fichier robots.txt, l'indexation par les moteurs de recherche.
Depuis quelques jours, ce même fichier n'interdit plus l'indexation.

Je souhaitais effectuer une petite analyse du site via Screaming Frog SEO et j'obtiens ce message : "Connection refused".
J'ai tenté avec Semrush et j'obtiens ce message : "No data available".
Il en est de même avec d'autres outils.

Je souhaiterai comprendre pourquoi j'obtiens ces messages.

Merci d'avance pour votre aide.

 

[loubet]

bloquage au niveau du fichier .htaccess, ou plus haut, chez l'hébergeur et son firewall.

 

[cedille]

Merci Loubet pour cette réponse.

Quel peut être le facteur bloquant au niveau du fichier .htaccess ?

 

[UsagiYojimbo]

Le plus simple serait de nous communiquer l'url, sans plus d'information on ne peut que conjecturer.

 

[cedille]

Malheureusement, et je comprends tout à fait, je ne peux communiquer l'URL s'agissant d'un client.

 

[UsagiYojimbo]

En MP ?