Chen Lei
Chen Lei
是的,只能50。
我现在能打开图片,不知道是不是微博限制,你再试试看。
建议使用不同账号的cookie在不同机器上运行,因为如果一个运行过快被限制,另外的也受影响。
这个没办法区分。如果您想区分,可以每次只获取一个用户的关注,这样txt就是这个用户的,以此类推。
可以先把时间段的时间按天设置,即开始日期和结束日期相同,爬完一次再换个日期,达到爬取时间段的目的。
感谢反馈。如果运行时有微博信息,应该有结果文件夹的,再看看项目文件夹下有没有。
@mokeeqian 可能之前没有正确退出导致进度文件错误,下次运行也出错,删除crawls文件夹看看。
@mokeeqian 换成scrapy crawl search命令
程序接口不稳定,可以把一年的时间段分为按天的时间段多次爬取。
程序搜索结果不稳定,你可以把时间间隔改成一天。