proxyservice icon indicating copy to clipboard operation
proxyservice copied to clipboard

抓取网上公开代理,维护可供爬虫使用的IP池,区分墙内墙外、http/https/socks代理。

爬取网上公开代理

已支持爬取的代理网站

  • 西刺: http://www.xicidaili.com/
  • 全网代理: http://www.goubanjia.com/
  • 云代理: http://www.ip3366.net/
  • Free Proxy List: https://www.us-proxy.org/
  • 无忧代理: http://www.data5u.com/
  • 讯代理: http://www.xdaili.cn/freeproxy
  • 年少HTTP PROXY: http://www.nianshao.me/
  • proxydb: http://proxydb.net/
  • 开心代理: http://www.kxdaili.com/dailiip.html
  • coderbusy: https://proxy.coderbusy.com/

代理查询接口

  • http://localhost:8888/proxy/getProxy?isDemostic=true&anonymousType=elite&protocolType=https
    默认返回前一百条可用代理;
    参数说明:
    (1) isDemostic: 可选参数,是否为国内代理,值为true和false;
    (2) anonymousType: 可选参数,代理的匿名类型,分为四种:transparent(透明)、anonymous(匿名)、distorting(混淆)、elite(高匿);
    (3) protocolType: 可选参数,代理的协议类型,分为http、https、socks4、socks5和socks(未做socks4和socks5的细分,统称为socks)

    示例数据: 返回数据

  • http://localhost:8888/proxy/proxyStatistic
    查询代理数量,按代理站点统计
    示例数据: 返回数据