Chen Lei
Chen Lei
感谢反馈。因为当end_date为日期时,使用了另一个接口,导致视频无法获取,且会漏爬,换成now即可。
@Chendh1999 这个之前是能获取的,可能是微博改格式了,不确定。需要修改部分代码,我目前不方便调试,您可以使用免cookie版,它也可以获取长微博。
@Alanyue0830 进度表示的是爬取与微博数的比,为空说明当前进度只有一条微博,且微博不含视频。或者您的end_date非now,此时无法获取视频。
这个我也不清楚,最近不方便调试代码,如果您方便,您可以使用免cookie版。
@JamesLi2013 感谢提供解决方案,如果方便您能否以pull request的方式提交这个修复呢,这样您还能成为本项目的contributor。当然这不是强制的,无论是否提交,都感谢您提供的方案,感谢对本项目的支持。
感谢反馈。您把数据库编码改成utf8mb4看看。
这个可能是接口限制,您可以使用weibo-spider。
这个目前没有办法。
有可能是since_date满足停止要求了,比如你设置获取今年的微博,今年之前的就不会获取,停止运行。百分百是全部微博的获取比例,不是停止条件。
评论好像有限制,最多获取几十条。