对爬虫工程师而言,代理IP是日常工作中不可或缺的帮手,既能提高效率,也能提高业务成功率。
工欲善其事必先利其器,找到一款优质的,适合自己的业务的代理IP就显得尤为重要了。
K哥因工作需要也常会测试国内外的代理IP的质量,便于自己筛选和使用。
这次测试了下SmartProxy,给大家简单分享下。
01
厂商介绍
Smartproxy产品为上海圣钧信息科技有限公司旗下的一款大数据产品,提供全球各地的优质大数据与信息采集的基础资源。目前,Smartproxy遍布全球220+国家与地区,每日高达5000万真实住宅IP资源,高速、高可用率。致力于为全球用户提供优质的大数据代理服务。
02
产品服务
我这次主要针对SmartProxy的动态产品进行了测试。
动态套餐
动态套餐按照流量有效期可分为30天与365天.
30天维度下有5个套餐包,套餐包内的单价依据包的容量不同而不同。
03
产品优势
1.优质IP资源
整合真实家庭住宅IP,汇聚IP资源池,不断更新IP,来自全球各个国家地区进行访问。自有数据节点,网络集成快捷 。
2.资源遍布全球
Smartproxy遍布全球220+国家与地区,每日高达5000万真实住宅IP资源,高速、高可用率。
3.稳定安全
所有流量都通过纯净的IP住宅地址进行路由,这使您可以在避免被系统监测的同时进行大量数据抓取,不会存在被屏蔽的风险 。
4.技术服务
经验丰富的客服、技术研发团队,全天候多方位的业务场景支持,支持实时解决你的问题。
以上就是SmartProxy的基本情况,下边我将从 请求成功率、业务成功率、带宽 三个方面来进行实际评测。
04
测试详情
对代理的质量测试,一般从三方面进行:
-
请求成功率,只计算连通率,不统计是否被反爬;
-
业务成功率,统计连通,且校验是否被反爬;
-
带宽,1Mb 约等于 128kb/s,与请求速度相关。
测试目标:Smartproxy 美国资源池。
① 请求成功率测试
这里挑选了如下几个不同国家的网站进行测试:
- 法国:www.lemonde.fr;
- 南非:www.samigration.com;
- 日本:www.metro.tokyo.lg.jp;
- 美国:
测试结果如下:
可以看到,请求成功率较高。
② 业务成功率测试
反爬测试挑选了对 ip 风控(仅校验 ip 的接口)较严的两个海外网站,Amazon 以及 Google,测试了 1000 次,结果如下:
Amazon 业务成功率较为良好,timeout 设置的 10s,存在部分连接超时的情况。
**
**
③ ip池测试
IP 池的大小、以及主要区域分布是个很关键的数据,这里 300 并发请求 ipinfo,测试 1 小时,检测不重复 IP 量(下表仅列出主要分布国家的大致 IP 数):
**
**
可以看到,巴西和美国的 IP 量是很大的,整个池子应该是百万级的。
**
**
④ 带宽测试
下载 Pycharm,以作带宽测试,结果如下:
相较于部分代理商,带宽放的较开。
05
测评结论
说实话,尽管在此次测评前我也并未了解或使用过SmartProxy的产品,但最终的测试结果还是挺令我意外的。
整体测试情况较为良好,请求成功率、业务成功率、带宽方面均有不错表现,在此质量的基础上,价格却并不昂贵,在一众代理产品中,算是比较有竞争力的。
本次评测到这儿就结束了,总的来说,SmartProxy在产品端是过关的,也颇具性价比,但最后是否能够得到广大爬虫工程师的青睐,客户支持与服务体验也是重中之重,以后若有机会,我应该会针对这些方面更加深度的去使用体验,各位若是有兴趣的话,也可以去SmartProxy官网开通测试进行了解。