phpspider icon indicating copy to clipboard operation
phpspider copied to clipboard

Published 20 hours ago • verified publisher icon owner888

爬取蚂蜂窝数据出问题

Open callmeYe opened this issue 7 years ago • 2 comments

爬取导致ip被封出现403错误

callmeYe avatar Apr 16 '17 04:04 callmeYe

都用蚂蜂窝做实验，都快成分布式攻击了，所以蚂蜂窝网站最多能爬到200多条数据就封ip了。过几个小时就解封了。

haoyoul avatar Nov 26 '17 11:11 haoyoul

配置代理的时候只需要在代码里面配置阿布云代理，类似这样的http://H784U84R444YABQD:[email protected]:9010 就ok了？还需要在其他地方配置嘛？代码的其他部分或者浏览器需要配置嘛？

happyMeow avatar Sep 12 '18 01:09 happyMeow