weibo-crawler icon indicating copy to clipboard operation
weibo-crawler copied to clipboard

Published 20 hours ago • verified publisher icon dataabc

微博爬取过程中报错导致部分微博未能成功获取

Open Noeinmaxwell opened this issue 2 years ago • 3 comments

在爬取部分用户微博时会出现list index out of range和'NoneType' object has no attribute 'xpath'错误导致程序跳过数条微博，其中包括公开微博和仅粉丝可见的微博。 运行时使用Cookie，在使用weiboSpider项目时可以正常运行。 运行日志如下： all.log error.log

Noeinmaxwell avatar Dec 07 '22 02:12 Noeinmaxwell