jwnie/proxyservice

抓取网上公开代理，维护可供爬虫使用的IP池，区分墙内墙外、http/https/socks代理。

爬取网上公开代理

已支持爬取的代理网站

• 西刺: http://www.xicidaili.com/
• 全网代理: http://www.goubanjia.com/
• 云代理: http://www.ip3366.net/
• Free Proxy List: https://www.us-proxy.org/
• 无忧代理: http://www.data5u.com/
• 讯代理: http://www.xdaili.cn/freeproxy
• 年少HTTP PROXY： http://www.nianshao.me/
• proxydb: http://proxydb.net/
• 开心代理: http://www.kxdaili.com/dailiip.html
• coderbusy: https://proxy.coderbusy.com/

代理查询接口

• http://localhost:8888/proxy/getProxy?isDemostic=true&anonymousType=elite&protocolType=https
  默认返回前一百条可用代理;
  参数说明：
  (1) isDemostic: 可选参数，是否为国内代理，值为true和false；
  (2) anonymousType: 可选参数，代理的匿名类型，分为四种：transparent(透明)、anonymous(匿名)、distorting(混淆)、elite(高匿)；
  (3) protocolType: 可选参数，代理的协议类型，分为http、https、socks4、socks5和socks(未做socks4和socks5的细分，统称为socks)
  

  示例数据:

• http://localhost:8888/proxy/proxyStatistic
  查询代理数量，按代理站点统计
  示例数据:

proxyservice's Issues

项目跑起来了，但是代理ip都无效

诚心发问 博主有兴趣合作做一个推广吗