ZhihuQuestionsSpider
ZhihuQuestionsSpider copied to clipboard
实现一个代理池
果不其然,开10个线程时就被知乎封了,需要一个代理池,从中获取可用代理,定时清除被无效代理,还需要一个爬虫可以爬取网上的免费代理