博客
指南、教程与 洞见
从 Shifter 团队了解住宅代理、网页抓取、数据采集策略及行业最佳实践。
知识
知识 1 分钟阅读
欺诈团队如何利用住宅IP信号检测账户盗用
住宅IP不再意味着真实客户。欺诈团队如何结合地理位置、网络、速度和一致性信号来发现账户盗用。
知识
知识 1 分钟阅读
如何检测跨市场的地理个性化定价与动态定价
价格会因地点、时间和人而异,单次观察无法判断是哪种因素。如何设计配对的对照实验来区分这三者。
知识
知识 2 分钟阅读
抓取JavaScript密集型网站:何时需要Web抓取API
一旦某个网站需要渲染,真正的选择就是运行自己的浏览器集群还是使用API。运营各自的成本,以及如何针对每个目标做出决定。
数据抓取
数据抓取 2 分钟阅读
如何处理网页抓取中的无限滚动和动态分页
无法重放隐藏的接口?可以在渲染内处理无限滚动,使用滚动链、加载更多点击操作,并检查虚拟化列表。
知识
知识 1 分钟阅读
房地产公司如何使用网页抓取API进行市场情报分析
房产门户网站大量使用JavaScript、分页且具有本地化特点。房地产团队如何将网页抓取API用作数据采集层,以及其成本如何。
知识
知识 2 分钟阅读
用于亚马逊监控和价格情报的最佳网络抓取API
最适合亚马逊的API取决于具体任务。这三类API如何比较,购买前应测试什么,以及每种API在价格堆栈中的定位。
数据抓取
数据抓取 3 分钟阅读
大规模将 Web Scraping API 数据导入 SQL 数据库
抓取只是简单的一半。如何将 scraping API 的输出落地到 SQL 中,同时保证幂等加载、字段类型化、模式漂移告警以及数据溯源完整。
数据抓取
数据抓取 1 分钟阅读
跨全球房地产平台聚合房源信息
跨平台、跨国家聚合房源信息是一个标准化问题。涉及分类体系、面积单位、价格含义,以及如何调和其中的分歧。
住宅代理
住宅代理 1 分钟阅读
白标数据采集:在一个账户上管理多个客户
白标使你成为数据提供方的正式主体。这对隔离性、合规性和定价意味着什么,以及如何搭建一个账户来实现这一点。