经常看到一些技术讨论,防止过度频繁抓取网页就是用代理IP,那么这里的代理IP是怎么搭建的呢,都有哪些方法可以搭建满足这样一个条件的代理IP
1
ryd994 Feb 12, 2015
任何网页代理都行
这个重点就是要服务器多 个人做的话成本较高,买现成的服务会比较好 |
3
ryd994 Feb 12, 2015
@levon 怎么可能一个IP就行呢……
代理就是转发了请求,使得这个请求看上去是由代理发出的而已,所以你会需要很多服务器/多IP 考虑到很多时候封机器人一封一个网段,实际上只能靠多服务器。因为同一个服务商申请来的IP基本上差别不大。 |
4
levon OP 我想弄清楚来龙去脉,就是代理如何才能转发这个请求
|