下载的时候经常弹出登录验证
最近下载的时候经常弹出登录验证,基本爬取几页就要验证一下,下载资源的时候验证的次数少一点,请问是大概什么原因?
可能是微博的限制,添加上cookie,降低速度看看。
可能是微博的限制,添加上cookie,降低速度看看。
我看了那个博主的主页,需要关注才可以看全部博文,但是关注后添加了cookie还是一样需要验证,我换过两次cookie,目前是每拉取一页就需要登录验证一次,“需要关注”这个限制会和我的问题有关么,还是cookie无法证明我的登录状态所以才每页都需要我登录验证一次?
有可能cookie是无效的,您可以使用weiboSpider检验cookie是否有效。
有可能cookie是无效的,您可以使用weiboSpider检验cookie是否有效。
谢谢回复,今天上午运行不知道怎么回事又好了,反正完全摸不到头脑,出现这次情况之前一直没用过cookie,索性下午的时候把cookie加上了,在想着是不是无cookie情况下拉去次数多了被限流了,过几天再看看情况吧。
我弹出的验证,验证完成后浏览器还弹窗说验证失败,楼主有遇到过么,这种咋解决呢
我弹出的验证,验证完成后浏览器还弹窗说验证失败,楼主有遇到过么,这种咋解决呢
没遇到过,不过我现在出现了新的问题 ... 未能获取到用户信息,可能需要验证码验证。 收到的 JSON 数据:{'ok': -100, 'errno': '-100', 'msg': '', 'url': 'https://m.weibo.cn/api/geetest?testType=1&backUrl=/', 'extra': ''} 检测到验证码挑战。正在打开验证码页面以供手动验证。 请在打开的浏览器窗口中完成验证码验证。 ... 弹出的网页没有内容,空白一片,我看之前有人提问但是不知道解决没,不行你再找找之前的问答看看。