BaiduWenkuSpider
BaiduWenkuSpider copied to clipboard
百度似乎更新了页面架构, 会报错TypeError: unsupported operand type(s) for +: 'NoneType' and 'str'
昨天还正常, 今天使用会报错TypeError: unsupported operand type(s) for +: 'NoneType' and 'str'
去看了下response, 里边有句话:
您的浏览器Javascript被禁用,需开启后体验完整功能,
看网上有人说可能是被反爬了, 需要cookie
但是我把整个header都贴上了也不行...
昨天还正常, 今天使用会报错TypeError: unsupported operand type(s) for +: 'NoneType' and 'str'
去看了下response, 里边有句话:
您的浏览器Javascript被禁用,需开启后体验完整功能, 看网上有人说可能是被反爬了, 需要cookie
但是我把整个header都贴上了也不行...
似乎是最新的文档是用了新的架构,当时开发的时候是针对之前的文档设计的,对这个不适用了,应该不是被反爬了
嗯
我也遇到了一样的情况,那是不是说这个爬虫不能用了啊?还是需要修改什么地方才能用吗?