AberSheeran
Aber Sheeran
I know nothing except the fact of my ignorance.

代理 IP 供应商

起笔自
所属文集: 杂记
共计 961 个字符
落笔于

由于程序需要,购买了一些提供代理 IP 的服务。本文会持续更新,直到买到合适的代理 IP 服务为止。另外,本文不是做推广骗黑心钱的,不信你看我下面贴的地址,只贴了官网,不是推广链接。

最后更新时间请看上面。

阿布云

最开始买的就是这家,原因是 PM 的朋友推荐的。这家代理用起来很简单,但代理 IP 质量似乎不佳。我们要抓取的目标网站,总是触发验证码,有点没用代理 IP 的感觉。我一朋友月月说这家很坑。

阿布云价格上有点贵,5QPS一个月要四百多。于是最终我们还是放弃了这家代理。

讯代理

放弃阿布云之后,信了知乎的邪买了这家的代理,事实证明花了二十买的最便宜的套餐是白费二十块。我购买的是动态转发,按量计费的代理方式,一共买了十万次。

每一次代理请求,要么是 OSError 连接不上服务器,否则就是 Session 过期。这说明它的鉴权服务器很稳定,但是代理服务器很垃圾,通过了鉴权连不上代理服务器,或者代理服务器连不上我需要访问的国内的网站。

而且这家代理不仅不稳定,它的错误响应也很奇葩。一般来说,代理服务器限制请求速率,都是通过返回一个 429 状态码来告诉调用方,你超速了。它不是,它返回一个 200 给你,但是格式是它自己的格式。一般代理服务器认为你鉴权通不过,都会响应 401,它不是,它还是返回一个 200 给你,格式依旧是自己的。

也就是说,如果你想要使用这家代理商的代理服务,哪怕它的代理没出问题,也需要自己做足够多的封装,来处理它的鉴权、响应问题。

强烈不推荐使用讯代理,建议直接拉黑这家的网址。

亿牛云

最后经过一顿审核操作,我们还是用上了月月推荐的这家代理,买的是最便宜的 7 元/天的服务。从我写的一个脚本的统计结果来看,抓取成功率可以达到 97% 上下。不过这也可能是因为我们抓的网站比较偏门、反爬没有特别强。因为客服说普通版是用户共享的 IP 池,而加强版是做过资源限制的。

客服免费给了半个小时的加强版给我们做测试,通过我的脚本测试,近万次抓取结果统计下成功率和普通版几乎无差别。所以最终还是买了亿牛云。

但如果你打算使用亿牛云,建议还是先找客服要一下免费的半小时体验版,写个代码试试抓取成功率有多少。因为不同的目标网站,成功率真不一定一样,不要盲目的相信别人(包括我)的测试成功率。

如果你觉得本文值得,不妨赏杯茶
更好看的滚动条
OneDrive 右键菜单不显示