ipdb_creator
ipdb_creator copied to clipboard
如何区分代理ip
我是做网络爬虫这一块的,看到你这个ipdb突然想到了一个问题,我以前也遇到过,就是我用代理很多ip抓取某些网站的时候,居然被发现了,而且我代理也是每天在网上找新的进行更换,所以我想问一下,你知不知道怎样通过ip识别是否是代理?
应该是对方对接收到的包做了路由分析,得到你源IP的地址了。你可以在代理机器上都放一个转发http请求的程序,这样就等于是代理机器发起的请求,就不存在被识别的情况了吧。
在 2015年1月25日,下午6:27,rale [email protected] 写道:
我是做网络爬虫这一块的,看到你这个ipdb突然想到了一个问题,我以前也遇到过,就是我用代理很多ip抓取某些网站的时候,居然被发现了,而且我代理也是每天在网上找新的进行更换,所以我想问一下,你知不知道怎样通过ip识别是否是代理?
— Reply to this email directly or view it on GitHub https://github.com/licheng-xd/ipdb_creator/issues/1.
应该是对方对接收到的包做了路由分析,得到你源IP的地址了。你可以在代理机器上都放一个转发http请求的程序,这样就等于是代理机器发起的请求,就不存在被识别的情况了吧。
在 2015年1月25日,下午6:27,rale <[email protected] mailto:[email protected]> 写道:
我是做网络爬虫这一块的,看到你这个ipdb突然想到了一个问题,我以前也遇到过,就是我用代理很多ip抓取某些网站的时候,居然被发现了,而且我代理也是每天在网上找新的进行更换,所以我想问一下,你知不知道怎样通过ip识别是否是代理?
— Reply to this email directly or view it on GitHub https://github.com/licheng-xd/ipdb_creator/issues/1.
我平时用的网上免费的代理,比如(http://cn-proxy.com/)里面提供的代理,这些代理机制是不是不会隐藏我本来客户端ip?还有就是怎样通过路由分析获取源ip呢?
如果你使用的是HTTP代理,那么对方可以根据包头中的X_FORWARDED_FOR属性来判断,来源的真实IP地址。
在 2015年1月26日,下午2:29,rale [email protected] 写道:
我平时用的网上免费的代理,比如(http://cn-proxy.com/)里面提供的代理,这些代理机制是不是不会隐藏我本来客户端ip?还有就是怎样通过路由分析获取源ip呢? http://cn-proxy.com/%EF%BC%89%E9%87%8C%E9%9D%A2%E6%8F%90%E4%BE%9B%E7%9A%84%E4%BB%A3%E7%90%86%EF%BC%8C%E8%BF%99%E4%BA%9B%E4%BB%A3%E7%90%86%E6%9C%BA%E5%88%B6%E6%98%AF%E4%B8%8D%E6%98%AF%E4%B8%8D%E4%BC%9A%E9%9A%90%E8%97%8F%E6%88%91%E6%9C%AC%E6%9D%A5%E5%AE%A2%E6%88%B7%E7%AB%AFip?%E8%BF%98%E6%9C%89%E5%B0%B1%E6%98%AF%E6%80%8E%E6%A0%B7%E9%80%9A%E8%BF%87%E8%B7%AF%E7%94%B1%E5%88%86%E6%9E%90%E8%8E%B7%E5%8F%96%E6%BA%90ip%E5%91%A2%EF%BC%9F — Reply to this email directly or view it on GitHub https://github.com/licheng-xd/ipdb_creator/issues/1#issuecomment-71419249.
哦哦,原来这样啊,感谢