为什么爬虫数据采集不能使用公开的免费的代理IP？

当涉及到数据采集，一个点非常至关重要，那就是代理IP。有些朋友可能认为免费代理IP是个省钱省事的好办法，但其实不然！

可能有的小伙伴会认为，我们青果网络自己有这块资源，所以在厂商角度来说利弊是不合适的，但“免费的才是最贵的”这句典中典适用在所有行业，希望大家吸烟刻肺。

我们来具体说说，为什么免费的不OK呢?

免费代理IP像个渣男，是个感情善变的人，在恋爱中忽冷忽热，随时可能"消失"。它们的服务器质量各不相同，也有可能突然不可用，导致你的数据采集计划泡汤。 

免费代理IP通常是五一的熊猫园，国庆的泰山，长假里的长城……用的人多到爆的状态，导致网速慢得像中午12.下班了我们的外卖还在离我们有2公里的骑手手里。 

有些免费代理IP存在安全隐患，可能监视和记录你的数据，这就像是个变态在暗中观察，而且随时有可能曝光你的秘密。

免费的代理IP大部分在匿名等级上是透明代理，运气好一点是普通匿名，所以稍微有那么一点反扒手段的网站，都是分分钟能发现你在用免费代理IP，然后限制或封锁这类请求。所以导致我们在数据采集的时候更频繁遭受封锁，使我们的项目无法稳定进行。 

而且说个小概率事件，用免费代理IP时，问题发生时你会无法维权。 

（ps：小概率如果发生到具体某个人身上，那就是100%了）

所以如果我们在数据采集过程中想省事又省心又迅速有成效，就不要考虑免费代理IP。而是可以考虑如厂商提供的HTTP代理或自建代理IP池，这样才能让你的数据采集计划高效、安全、质量有保障