Chen Lei
Chen Lei
可能是微博的限制,添加上cookie,降低速度看看。
有可能cookie是无效的,您可以使用[weiboSpider](https://github.com/dataabc/weiboSpider)检验cookie是否有效。
我个人没有开发这个功能的打算,也不建议薅羊毛,可能会有风险,感谢理解。
这我也不确定,看起来要修改很多代码,您可以先按自用的思路来,到时候如果方便提交PR也行。这个我没办法保证一定合并,还得看具体实现,因为代码量可能不小,所以可能有很多分歧,因此如果您是以合并为目标修改代码,不建议修改;如果您是以自用为目标修改代码,按自己需求修改就可以。
上面的是完整报错信息吗?
这个貌似有的用户会出错,有的没错。您可以使用较老的版本看看是否能运行。
可能和end_date有关,它的值如果不是now,会漏爬微博。
把end_date的值改成now就可以。
修改spider.py文件的get_weibo_info方法,大约在179行,range里的第一个数字就是开始页数。
如果是微博限制,程序也没办法。