proxy_pool
proxy_pool copied to clipboard
Python ProxyPool for web spider
只有http和https 好少
能不能持久化保存,docker应该映射哪个目录,还是都存储在redis呢?
请问其余配置均已正确,schedule也可以正常运行,但是在调用API时出现:以一种访问权限不允许的方式做了一个访问套接字的尝试,是什么原因呢
这个网站的免费代理感觉还行 https://openproxylist.com/proxy/
项目地址:https://github.com/CharlesPikachu/freeproxy/tree/master 文档:https://freeproxy.readthedocs.io/en/latest/ 快速使用: ``` from freeproxy import freeproxy from freeproxy.modules import ProxiedSessionBuilder proxy_sources = ProxiedSessionBuilder.REGISTERED_MODULES.keys() proxied_session_client = freeproxy.ProxiedSessionClient(proxy_sources=proxy_sources) proxied_session_name, proxied_session = proxied_session_client.getrandomproxiedsession() print(proxied_session_name, proxied_session, proxied_session.candidate_proxies) proxy = proxied_session_client.getrandomproxy() print(proxy) ```