weibo-search
weibo-search copied to clipboard
以一个关键词组爬完后不能继续爬了。
又来麻烦作者了,我先用两个关键词爬了好几天,今天终于爬完了,想着换另一个关键词组继续爬,但是换了cookie后,程序报如下错误:
不知道这是什么原因呢?
删除crawls文件夹看看。
还是不行呢。 另外上次我设的时间间隔为2018年到2023年,但是值爬取了2018 2023 2022的数据,中间的都没有。
直接运行scrapy crawl search。
可以了,谢谢作者啦。但是上次我设的时间间隔为2018年到2023年,但是只爬取了2018 2023 2022的数据,中间的都没有。
这个可能是接口的限制。