芝麻代理、豌豆代理、品易代理……市面上那么多HTTP代理,要怎么挑?
虽说迈入2023年,岁数增长了,但我们公司给的预算没有增长,周一开会也一直在强调要做成本调控,就连我们爬虫组的HTTP代理预算费用也要一再缩减。好家伙,那这原来的芝麻代理可不就不能用了,虽说芝麻代理价格高的有点离谱,不过人嘛,都是不想变动的,2年前谈好了价格以后,就再也没换过厂商,不过这回老板发话了,我就分到任务看看市面上还有哪家厂商可以替换的。
由于我自己在做爬虫,那必须得质量也过得去,如果质量不行,自己使用起来糟心不说,分分钟耽误事,搞不好项目进度无法推进,连项目奖金也别想了,那可不行!
用隧道代理吧,做这一行的,肯定知道隧道代理会比普通的动态短效代理贵点,有时间的兄弟们可以自己入手短效代理然后搭建隧道做转发,用起来和厂商提供的隧道代理没有太大区别,不过就得花时间维护和搭建了。
我们自己只需要看看各大厂商的动态短效代理的价格即可。ps:当然不想拿去搭建隧道代理,直接使用,做数据采集也是我们一贯的手法,不多说了,我们直接看看度娘上的HTTP代理厂商的价格:
这些厂商在度娘上的广告一搜一大堆,具体动态短效代理HTTP代理厂商代表有这几家:
- 青果网络
- 芝麻代理
- 豌豆代理
- 品易代理
- 讯代理
- 小象代理
- 巨量代理
其中,芝麻系的还有很多家,比如太阳、极光就连品易也是芝麻系的,前2者我个人使用起来质量不咋地,就不放上来了,加上品易代理一起看吧。
动态短效代理有按时和按量之分,主要还是看自己业务场景需求吧,先在统计一下表格,各自看吧:
HTTP代理类型 | 分类 | 代表厂商 | 白名单数 | 基础套餐 (元/月) | 平均IP单价 (元/IP) | |
动态短效HTTP代理 | 按时计费 | 以IP通道为增量 | 青果网络 | 256 | 29 | 0.0006 |
小象代理 | 5 | 109 | 0.0050 | |||
以每日IP量为增量 | 巨量代理 | 5 | 155 | 0.0049 | ||
豌豆代理 | 5 | 300 | 0.0025 | |||
讯代理 | 1 | 210 | 0.0583 | |||
品易代理 | 20 | 120 | 0.0070 | |||
芝麻代理 | 5 | 360 | 0.0182 | |||
按量计费 | / | 青果网络 | 256 | 30 | 0.0030 | |
豌豆代理 | 5 | 200 | 0.0200 | |||
小象代理 | 5 | 100 | 0.0100 | |||
巨量代理 | 5 | 75 | 0.0140 | |||
品易代理 | 20 | 100 | 0.0100 | |||
芝麻代理 | 5 | 420 | 0.0420 |
总的来说,比较推荐的是青果网络的HTTP代理,当然,我们不可能单从价格就采购一家HTTP代理的,所以最终还是要测试一下。
从并发来看,还不错。
请求频率也够看:
当然,我们测试的时候是有提前和对方说是公司采购的,所以青果网络给我们提供的是企业池,企业池比普通池大,这点毋庸置疑。
限于口罩问题,最后没有去实地考察,不过也还是选择了这家。总的来说,还是价格和质量打动了我,啊呸打动了我们老板。
以上仅适用于我们公司的业务需求,至于是否适用于各位,就需要各自去测试了,反正测试除了花点时间,也没啥额外的成本。