博客
指南、教程与 洞见
从 Shifter 团队了解住宅代理、网页抓取、数据采集策略及行业最佳实践。
知识
知识 3 分钟阅读
如何在 Docker 容器中配置住宅代理
Docker 里的代理配置:环境变量 vs daemon 代理、为什么 HTTP_PROXY 并不总是生效、用 NO_PROXY 放行内部流量、密钥处理,以及按容器的身份。
知识
知识 3 分钟阅读
住宅代理负载均衡:轮换、并发与重试架构
有了 gateway,池会自己做均衡。真正要紧的架构是你的:轮换单元、按主机的并发,以及一层不会放大封锁的重试。
住宅代理
住宅代理 2 分钟阅读
使用住宅代理时如何降低延迟
住宅代理有一个延迟下限,但开发者抱怨的大部分慢,其实是可以避免的。八种削减代理延迟的技术,按影响力排序。
知识
知识 2 分钟阅读
如何估算你每月的住宅代理带宽需求
在按 GB 的套餐上,带宽就是你所购买的东西。一个简单的公式、真实的每页大小,以及用来估算你每月住宅代理带宽的算例。
知识
知识 3 分钟阅读
如何测试住宅代理的速度、成功率与位置准确度
只看速度是个糟糕的基准。如何正确地测量住宅代理的成功率、延迟百分位与地理准确度,附可复制粘贴的 Python 测试。
数据抓取
数据抓取 2 分钟阅读
如何用代理抓取亚马逊商品数据(价格、评论、排名)
一份抓取亚马逊商品数据(价格、评论和排名,按站点)的实用指南,以及为什么住宅代理才是让它行得通的关键。
知识
知识 1 分钟阅读
用住宅代理做新闻与媒体监测
新闻报道是分地区的、有地理限制的、且防机器人的,所以你只有像一个真实本地读者那样才能看到它。住宅代理如何让媒体监测按市场做到准确。
数据抓取
数据抓取 2 分钟阅读
如何在大规模抓取时削减代理带宽成本
住宅代理按吉字节计费,而一个粗放的抓取器会浪费掉它的大部分字节。九种不丢失数据、削减代理带宽成本的实用办法。
知识
知识 1 分钟阅读
用住宅代理获取招聘与就业市场数据
招聘职位、薪资和用人趋势是按位置投递、且防守森严的。住宅代理如何让招聘与就业市场数据变得准确。