weibo-search icon indicating copy to clipboard operation
weibo-search copied to clipboard

求问:爬取数据不全,爬取了几百条后就会自动停止,是什么原因?

Open lindierl opened this issue 2 years ago • 1 comments

程序也能正常启动,但在CMD中运行爬取了几百条文本后就会自动停止,是什么原因?

lindierl avatar Jun 12 '23 06:06 lindierl

微博可能会随机设定某页为空,程序因 误以为爬完了就结束了。建议尽量缩小时间范围,分几次爬可能会获得更多微博。

dataabc avatar Jun 12 '23 16:06 dataabc