土耳其连锁零售商
一家连锁零售商每天在移动端和桌面端追踪 120 个土耳其语关键词,即每天 240 次抓取。它把任务分摊到 ISP 代理套餐的三个 IP 上(每月 180 TRY),每个 IP 每天约 80 次查询,分布在工作时段内。由于静态 IP 无法通过轮换来避开验证码,所以排程要保持缓慢,需要重点关注的数字是验证码出现率。
解决方案
搜索结果是个性化和本地化的。要知道页面的真实排名,您必须从正确的国家、大规模地查看,同时又不触发搜索引擎对自动化流量的防御。
挑战
同一个查询在不同国家会返回不同的排名和功能模块,所以只用单一办公室 IP 会得到误导性的结果。
搜索引擎会对来自同一地址的重复自动化查询弹出验证码,并实施临时封锁。
在多个地区追踪数千个关键词,请求数量会迅速成倍增长。
思路
轮换住宅 IP 让您直接从目标国家请求结果,而不必靠参数去猜测。
轮换使每个地址的查询次数保持在较低水平,从而减少排名追踪工具遇到的验证码。
静态 ISP 或数据中心 IP 适合需要登录站长后台、并希望使用固定地址的工具。
推荐
按适合此类工作负载的程度排序。打开产品可查看规格、限制和实时套餐。
深入了解
排名追踪需要把三个维度相乘:关键词、地区和设备。以 3 个国家、2 种设备类型、300 个关键词为例(仅作示意),共需抓取 1,800 个结果页;每天重复一次,每月就是 54,000 次抓取。只采集第一页,每页 HTML 约 120 KB,合计约 6.5 GB,可放进 10 GB 的住宅代理套餐(650 TRY),并留有重试余量。如果每个查询采集三页,请求数和字节数都会变为三倍,约 19.4 GB,需要升级到 50 GB 套餐(2,500 TRY),因此在选择规格之前,请先确定您真正需要的深度。
并非每个关键词都值得每天追踪。请分层处理:营收词每天、辅助词每周、长尾词每月或按需。在上面的例子中,如果 300 个关键词里有 60 个保持每日追踪,其余 240 个改为每周,每月抓取次数就从 54,000 降至约 16,500,约 2 GB,选择 350 TRY 的 5 GB 套餐就足够了。分层还会降低遇到验证码的概率,因为每个 IP 现在发出的查询更少,也能把预算腾出来,用于真正重要的深度或地区。
| 层级 | 关键词数 | 频率 | 每月抓取次数(各含 6 种国家与设备组合) |
|---|---|---|---|
| 营收词 | 60 | 每日 | 10,800 |
| 辅助词 | 240 | 每周(4 次) | 5,760 |
| 合计 | 300 | 混合 | 16,560 |
搜索引擎会根据多种信号推断位置:IP 地址、URL 中的国家和语言参数、域名版本、Accept-Language 请求头以及 Cookie。仅靠参数只是一种近似,因为结果还会反映请求看上去来自何处。对于土耳其的结果,ISP 代理或移动代理的出口会给您一个土耳其地址。对于本站提供指南的其他十一个国家(美国、德国、英国、法国、加拿大、荷兰、意大利、西班牙、日本、印度和巴西),请使用住宅代理池,其国家定位属于服务商的声明。如有城市或运营商方面的需求,请咨询销售。
让所有信号保持一致。如果出口在德国,就发送德语语言设置,使用匹配的域名或界面,并让无头浏览器的时区与该国一致;德国 IP 搭配美式英语请求头和土耳其时区,就是一种不匹配,可能改变结果并引来验证挑战。在某些地区,结果出现之前可能会弹出 Cookie 同意的插页,因此每次运行都要用相同的方式处理。在信任数据之前先验证每个出口:通过代理使用 IP 地址检测工具,并用 IP 信息工具查看注册信息,注意它报告的是注册数据,而不是地理定位。
在信任数据集之前先做校准。挑选一个您能预测本地答案的查询,例如某知名连锁品牌的名称加上当地语言中的“最近的”,然后从计划使用的每个出口各运行一次。如果结果对该国来说看上去不对,就必须先修正出口、语言设置或参数,排名数据才有意义。在更换套餐、工具或无头浏览器版本之后重复校准,并把校准结果与排名历史放在一起保存,这样当所有关键词同时突然变动时,可以追溯到是您的配置而不是搜索引擎的问题。
并非所有 SEO 工作都是采集结果页。登录站长工具、分析平台和第三方 SEO 仪表盘,更适合使用一个固定地址,因为在不同国家之间跳转的登录会触发验证。ISP 代理 IP 在整个套餐期间保持不变,因此团队可以让这些会话通过一个固定的土耳其地址。请把这些身份与 SERP 采集分开:大批量采集可能引来验证码,您不希望仪表盘所用的地址成为被验证码盯上的那个。3 个 IP 的套餐每月 180 TRY,三个月为 500 TRY。
爬取自己的网站是另一种静态用途。审计爬虫通过固定地址发出请求,您就可以在防火墙或限速器中将该地址加入白名单,使爬取既不与真实访客争抢资源,也不会触发您自己的机器人防护。IPv4 数据中心代理套餐很适合,因为地址列表稳定、流量不限,列出的速度最高可达 100 Mbit。再配合住宅代理的国家定位,可以测试您的网站在各个市场的表现:重定向、语言切换、Cookie 横幅和 CDN 差异。免费的 HTTP 头信息检测工具是很好的补充,它能显示公开响应的重定向链和安全响应头。
实施手册
从首次测试到稳定、可监控运行的四个步骤。
列出关键词、目标国家、设备和语言,并为每个关键词指定层级和频率,使抓取次数在您购买套餐之前就已明确。
在采集任何一个数据点之前,用代理检测工具和 IP 地址检测工具检查出口 IP 与国家,并确认语言请求头和时区与之匹配。
带抖动地错开查询,保持每个 IP 的并发较低,并将结果与其 IP 所在国家、设备、时间戳和查询参数一起存储。
连续一周每天对相同关键词重跑两次,了解自然波动,然后把告警阈值设在波动之上;在验证码超出您容忍度的地方,调整频率或 IP 类型。
场景示例
仅为示例:数字是用于说明思路的假设,并非实测结果。
一家连锁零售商每天在移动端和桌面端追踪 120 个土耳其语关键词,即每天 240 次抓取。它把任务分摊到 ISP 代理套餐的三个 IP 上(每月 180 TRY),每个 IP 每天约 80 次查询,分布在工作时段内。由于静态 IP 无法通过轮换来避开验证码,所以排程要保持缓慢,需要重点关注的数字是验证码出现率。
一家店铺每周追踪德国、荷兰、法国和西班牙的 150 个关键词:每周 600 次抓取,按示意值每次 120 KB,约 72 MB。一个 5 GB 的住宅代理套餐(350 TRY)绰绰有余,大部分额度可用于复查和第二页抓取。每条结果都会连同其出口国家、语言和设备一起存储。
在将客户网站迁移到新域名的前后,一家机构从客户已在防火墙中加入白名单的固定地址爬取其 40,000 个 URL。30 个 IP 的 IPv4 数据中心代理套餐(每月 250 TRY)中的两个 IP 以每秒几次请求的速度完成爬取,流量不限。对比迁移前后的爬取结果,就能发现损坏的重定向和缺失的页面。
从第一天起就跟踪这些指标,让问题以数据而非意外的形式出现。
会浪费预算或导致被封锁的常见做法。
搜索引擎在其条款中限制自动化查询。请保持合理的查询量,尽可能优先使用官方数据来源,不要用代理操纵排名或搜索结果。
常见问题
要获得准确的本地结果并减少验证码,需要 — 住宅 IP 最合适。查询量较低或防护较弱的工具,用数据中心 IP 也行。
可以,通过住宅 IP 池,它标注支持国家级定位。ISP、移动和游戏 IP 位于土耳其。
个性化、设备类型和所在地区都会改变结果。请在相同地点、使用干净会话进行同类对比。
轮换住宅 IP 适合大型关键词集,因为每个地址只发出少量查询。静态 ISP IP 适合小型的土耳其关键词集和仪表盘登录,但它们无法通过轮换来避开验证码,因此请保持低频率并错开请求。许多团队会针对不同任务同时使用两者。
不会完全一致。Search Console 报告的是众多真实用户展示次数的平均值,而代理检查只是来自单一地点和设备的一次快照。请用代理检查来比较不同地区并发现突然的变化,用 Search Console 来衡量真实的展示和点击。
静态 ISP 和移动出口位于土耳其,移动代理套餐使用的 SIM 卡位于伊斯坦布尔。除此之外的城市级或运营商级定位尚未确认,因此下单前请通过 WhatsApp 向销售说明城市、运营商和用量。住宅池的州和城市定位属于服务商的声明;请先用小套餐测试。