learn_python3_spider icon indicating copy to clipboard operation
learn_python3_spider copied to clipboard

关于爬取豆瓣网第一步获取请求失败的原因(我认为的)及解决方法

Open taojunyan opened this issue 1 year ago • 2 comments

response = requests.get(url, headers=headers)将response对照改成上面的样子即可,原因:我认为应该是发送的user—Agent没有被正确收到导致url拒绝了我们的请求,加上这个可以确保收到.

taojunyan avatar Apr 07 '24 05:04 taojunyan

这是来自QQ邮箱的假期自动回复邮件。   您好,我最近正在休假中,无法亲自回复您的邮件。我将在假期结束后,尽快给您回复。

Tany99 avatar Apr 07 '24 05:04 Tany99

这是来自QQ邮箱的假期自动回复邮件。   您好,我最近正在休假中,无法亲自回复您的邮件。我将在假期结束后,尽快给您回复。

bearbeers avatar Apr 07 '24 05:04 bearbeers