Sitemap generator : Python webcrawler (fr)

Dans le cadre de mon boulot j'ai eu à mettre en place une sitemap pour un site complètement dynamique (les pages sont créée via une administration et via un ensemble de pattern pour la partie dynamique du site) en gros il était très compliqué de générer efficacement une liste de l'ensemble des urls de façon automatique. Le plus simple a été de faire un petit crawler web qui navigue sur le site de façon périodique pour mettre à jour le fichier sitemap.xml.

Et vu que j'adore le python et bien... Vous avez deviné la suite ;)