Skip to main content

Comment effectuer un crawl multi-domaine avec Screaming frog

Quand vous voulez crawler un site sur Screaming Frog, vous ne pouvez le faire que sur 1 domaine et même 1 sous-domaine

Cependant, il peut être utile de crawler 2 sites. www.client.com et shop.client.com ou shopClient.plateforme.com

Dans ces cas de figure, renseignez les différents domaines comme des CDN

  1. Renseignez l'url à crawler dans le champ principal (ex https://www.vinsmoselle.lu/)
  2. Dans le menu principal "configuration > CDN" , renseignez l'autre domaine (ex: https://shop.vinsmoselle.lu/)
  3. Crawlez