1. ⭐⭐⭐ Grosse PROMO en cours sur ma plateforme SEO My Ranking Metrics
    Rejeter la notice

Crawler un site mobile m.monsite.fr avec Xenu Link Sleuth?

Discussion dans 'Crawl et indexation Google, sitemaps' créé par seidelbast, 10 Janvier 2017.

  1. seidelbast
    seidelbast WRInaute discret
    Inscrit:
    17 Juillet 2009
    Messages:
    50
    J'aime reçus:
    0
    Bonjour et bonné année à tous,

    Je souhaite utiliser Xenu Link Sleuth pour crawler un site mobile du type m.monsite.fr, donc différent du site desktop. Le site mobile est proposé de manière dynamique à l'utilisateur en fonction de la taille d'écran.

    Si j'entre m.monsite.fr dans Xenu, il affiche une redirection vers le site desktop et c'est tout. Je suppose que le serveur interprète la requête de Xenu comme une connexion venant d'un ordi desktop et par conséquent ne sert pas les pages mobiles.

    Y-a-t-il une possibilité pour faire crawler quand même le site mobile ?

    D'avance merci
     
  2. Madrileño
    Madrileño Membre Honoré
    Inscrit:
    7 Juillet 2004
    Messages:
    32 260
    J'aime reçus:
    271
    Bonjour,

    Vous pouvez simplement faire une exception pour laisser l'outil crawler.

    Pour les exemples il y a example.com (avec un a), ce qui vous permet d'afficher les exemples avec la balise aussi bien de code, qu'un lien normal, puisque example.com est dédié aux exemples sur les différents sites Internet. Si vous souhaitez plus d'informations à ce sujet, il suffit de visiter aussi le site qui indique son but et des informations concernant le domaine Internet pour ceux qui souhaitent savoir comment Internet fonctionne.

    Cordialement.
     
  3. seidelbast
    seidelbast WRInaute discret
    Inscrit:
    17 Juillet 2009
    Messages:
    50
    J'aime reçus:
    0
    C'est compliqué de paramétrer des exceptions côté serveur. Un paramètre dans Xenu peut-être ?
     
  4. Madrileño
    Madrileño Membre Honoré
    Inscrit:
    7 Juillet 2004
    Messages:
    32 260
    J'aime reçus:
    271
    Bonjour,

    Vous pouvez indiquer l'URL du site à crawl pour vérification.

    Cordialement.
     
  5. UsagiYojimbo
    UsagiYojimbo WRInaute accro
    Inscrit:
    23 Novembre 2005
    Messages:
    11 867
    J'aime reçus:
    70
    Je pense que tu auras plus de facilités à faire ça avec ScreamingFrog, qu'avec Xenu. Avec ScreamingFrog, tu peux changer l'UserAgent, etc.
     
Chargement...
Similar Threads - Crawler mobile monsite Forum Date
Comment crawler la version mobile de mon site? Administration d'un site Web 13 Juillet 2017
Empêcher Googlebot de crawler/indexer tout un dossier Débuter en référencement 19 Avril 2019
Comment trouver la vraie adresse IP d'un crawler ? Développement d'un site Web ou d'une appli mobile 13 Février 2019
Crawler des URLs depuis un CSV Crawl et indexation Google, sitemaps 30 Août 2018
Projet : Crawler de site pour mise en cache chez Fasterize Développement d'un site Web ou d'une appli mobile 7 Septembre 2017
Hide from backlink crawlers? Administration d'un site Web 27 Décembre 2016
Ne pas indexer ni faire crawler Crawl et indexation Google, sitemaps 10 Juin 2016
Crawler de site pour générer les pages en cache Administration d'un site Web 17 Septembre 2015
Crawler les pages en mode connecté Crawl et indexation Google, sitemaps 27 Août 2015
Google veut crawler des élèments qui n'existe pas sur mon serveur Crawl et indexation Google, sitemaps 26 Juin 2015
  1. Ce site utilise des cookies. En continuant à utiliser ce site, vous acceptez l'utilisation des cookies.
    Rejeter la notice