weibo-crawler icon indicating copy to clipboard operation
weibo-crawler copied to clipboard

能够只爬取某段时间至某段时间的数据吗

Open NXY11 opened this issue 8 months ago • 5 comments

NXY11 avatar Apr 29 '25 05:04 NXY11

本程序不能,https://github.com/dataabc/weiboSpider可以,但是会漏爬微博。

dataabc avatar Apr 29 '25 06:04 dataabc

本程序不能,https://github.com/dataabc/weiboSpider可以,但是会漏爬微博。

好的谢谢!自己改代码爬取,有概率改成功吗

NXY11 avatar Apr 29 '25 06:04 NXY11

或许会,不确定。

dataabc avatar Apr 29 '25 09:04 dataabc

或许会,不确定。

还想问下爬取的上限是几条微博数据呢?假设一个用户有20w条数据,可以实现爬取到他的全部微博内容吗?

NXY11 avatar Apr 29 '25 09:04 NXY11

这个我不确定,应该如果不因速度太快被限制,应该可以。

dataabc avatar Apr 30 '25 08:04 dataabc