按来源分爬虫应该使用哪种代理IP？-万变ip

您的位置：首页 >文章内容

按来源分爬虫应该使用哪种代理IP？

来源：互联网作者：admin 时间：2020-05-18 10:56:55

在之前的文章中我们介绍过了，代理IP按来源可以分为两类：住宅代理IP和机房代理IP。并且它们都有各自的特点，住宅代理IP往往不连号，并且地区分布呈散点状，具有更高成功率但稳定性略差；机房代理IP则一般连号，并且地区分布较为集中，具有更高的稳定性但成功率相对较低。从价格方面来说，机房代理IP则更为便宜。那么，按理说为了节约成本，爬虫工作应该选择价格更低的机房代理IP，而不是住宅代理IP，那么真的是这样吗？

其实不然，爬虫工作最好选择住宅代理IP。这是为什么呢？因为使用机房代理IP有一个巨大的弊端。如果你使用机房代理IP进行爬虫工作，那么目标服务器是可以识别出你的IP是否为代理IP的，但由于代理IP的高匿特性，服务器还是无法知道你的真实IP地址。

这时服务器会有两种反馈情况：第一种就是直接拒绝你的访问请求；第二种则是接收请求，但是会将加工过的数据反馈给你，即只反馈服务器想让你看到的信息。显然，不论是哪种情况，对爬虫工作来说都是不愿意见到的，尤其是第二种，更是细思极恐。

而使用住宅代理IP则不会产生这样的情况，由于目标服务器检测不了住宅代理IP，爬虫使用起来就十分顺利。因此，爬虫工作最好选择住宅代理IP。