core-scrapy icon indicating copy to clipboard operation
core-scrapy copied to clipboard

Published 20 hours ago • verified publisher icon yidao620c

定时爬取

Open liujunyi opened this issue 9 years ago • 3 comments

你好，看到你说明中提到可以进行定期爬取内容，在代码中没有找到。我也遇到了这个问题 ，使用这种方法 d = runner.crawl(spider) d.addBoth(lambda _: reactor.stop())，执行完成后下个时间 点后开始后会报错，twisted.internet.error.ReactorNotRestartable求解

liujunyi avatar Oct 15 '16 12:10 liujunyi

遇到和liujunyi一样的问题，求楼主指教

huansoo avatar Dec 29 '16 03:12 huansoo

subprocess.call('scrapy crawl XXX')

liujunyi avatar Dec 29 '16 09:12 liujunyi

最后怎么实现定时爬去的？ @liujunyi

weimingwill avatar Aug 18 '17 04:08 weimingwill