Chen Lei
Chen Lei
config.json就在weibo-crawler文件夹下,如果没有可以[下载](https://github.com/dataabc/weibo-crawler/blob/master/config.json)。
目前的接口最多只能720p,要1080p只能修改代码。
不能,目前只能是这种命名,因为这样更容易对应与微博的关系。
感谢反馈。 我测试了部分微博,可以获取url,你可能使用的不是最新版,也可能头条文章有太多格式,很多样式漏了,因为部分微博不好判断是否是头条文章,所以没有获取。
@banlangen1111 @Uriellll22 有可能近期发布的微博是需要登录才可见的,需要添加有效cookie才可以。
日期指的是since_date,爬取从现在到指定since_date的微博,包括since_date这天。如果想获取某天的微博,日期是这天或早于这天就可以。我现在也不确定为什么会漏爬,你可以使用weiboSpider,看看是否能完成您的要求。
目前没有添加的打算。这个猜测应该是监控目标微博,发微博就通知第三方。本程序爬取后就结束了,思路不同。你可以参考修改本程序,获取用户第一条微博,判断是否是新的。 感谢建议,如果还有问题,欢迎继续讨论。
更新到最新版本看看。
应该是可以的。
感谢反馈,是否使用的sqlite模式,只有在sqlite模式下才能获取评论。