OpenScraper icon indicating copy to clipboard operation
OpenScraper copied to clipboard

Lancer régulièrement les mêmes spiders est un processus douloureux

Open DavidBruant opened this issue 6 years ago • 2 comments

Pour répondre aux besoins du Carrefour des Innovations Sociales, il va être nécessaire de relancer règulièrement (tous les jours ? semaines ? mois ?) les mêmes spiders afin de mettre à jour les données

Actuellement, si une spider devait échouer à cause d'un redesign, il n'y a aucune manière facile de s'en rendre compte ni de le debugger pour le corriger rapidement

DavidBruant avatar Feb 03 '19 22:02 DavidBruant

A lier aussi avec : https://github.com/entrepreneur-interet-general/OpenScraper/issues/36

JulienParis avatar Feb 03 '19 23:02 JulienParis

instruction également ici : https://github.com/entrepreneur-interet-general/CIS-front/issues/282

JulienParis avatar Feb 10 '19 18:02 JulienParis