Custom Crawl SEO

Besoin de lancer un crawler sur un site en excluant des liens inclus dans une zone ? (nav, header, footer, div avec Id, etc) ? Renseignez le nom de domaine et les balises à exclure, vous aurez un lien sur lequel lancer votre crawler et obtenir ce que vous souhaitez en bidouillant un peu les données.

Pourquoi faire ça ?

Créer mon URL de départ pour le crawl custom SEO



(séparer les balises à exclure par des virgules)


(laissez vide pour utiliser le User Agent du navigateur ou du crawler)

Cet outil d'aide à l'analyse de structure SEO a été codé à 99% par Walid Gabteni, consultant SEO, que la force soit avec lui.