62%
Googlebot 访问中花在筛选网址上的比例。颜色、框型、品牌、价格和排序相互组合,生成了 41,000 个可抓取的地址,其中大多数只是把同样的十二款镜架换个顺序展示。
发现 1 / 4
Wychelm Opticians · 拥有 14 家门店的眼镜连锁 · 伯明翰
14 家门店全部收录,验光预约增长 71%
10 个月 · 英国和爱尔兰 · 健康与养生 · Signal 方案
6/6 是英国验光师记录正常视力的方式:在六米处能看清普通人在六米处能看清的内容。
01挑战
复制粘贴的门店页面、无法抓取的预约子域名,加上吃掉抓取预算的镜架筛选网址,让 14 家门店中有 9 家掉出了 Google 索引。
Wychelm 是一家一家开起来的,每开一家新店,门店页面就照着上一家复制:同样的介绍、同样的服务清单,只换了地址。Google 把其中九家视为重复页面,并入了另外五家。预约系统放在一个独立子域名上,完全在浏览器里渲染,还把爬虫挡在门外,所以没有一家门店拥有 Google 能访问的预约页面。与此同时,镜架目录生成了数以万计的筛选组合,Googlebot 的大部分访问都耗在了那里。
改造前的门店 · 一个字母代表一家门店
9
14 个门店页面中有 9 个在 Google 上找不到
02检查
62%
Googlebot 访问中花在筛选网址上的比例。颜色、框型、品牌、价格和排序相互组合,生成了 41,000 个可抓取的地址,其中大多数只是把同样的十二款镜架换个顺序展示。
发现 1 / 4
88%
门店页面之间的文字相似度。Google 只保留了五家门店作为规范页面,把另外九家并了进去,于是搜索 Erdington 或 Kings Heath,打开的却是 Moseley。
发现 2 / 4
0
Google 能抓取的预约页面数量。预约应用运行在独立子域名上,完全在浏览器里渲染,还被它自己的 robots.txt 屏蔽;“预约”按钮是脚本,而不是链接。
发现 3 / 4
5 次点击
从首页到一个普通门店页面所需的点击次数,而且只能通过门店查找小工具到达。每家门店平均只有一个内部链接指向它。
发现 4 / 4
为排序、会话和多选筛选参数编写 robots.txt 规则,同时让圆框、玳瑁框这类单一维度的页面保持可抓取并有链接指向。站点地图只保留规范网址;每周检查服务器日志。
筛选网址统一 canonical 到所属分类。每个门店页面都按门店本身重写:验光师团队、设备、停车、营业时间和服务的街区,并配上指向自身的 canonical 和独立的 Optician 结构化数据。
在 /opticians/ 建立门店总览页,主导航链接到每一家门店,相邻门店互相链接,儿童视力检查、隐形眼镜验配等服务页面也链接到门店。
预约从子域名迁到主域名下服务器端渲染的 /book/ 页面,并用真正的链接相连,让每个门店页面和它的预约页面相互加强。
04红绿抓取测试
验光时,验光师会让您看红底和绿底上的字母。如果一边看起来更清楚,说明度数不对;两边一样清楚时,度数才刚好。这里的红色一半代表镜架筛选网址,绿色一半代表门店页面。调整下面三项设置,直到两边看起来一样清晰。
抓取视力
6/60
两边都很模糊:Googlebot 陷在筛选网址里,看不到门店。 筛选网址:占访问的 62%。门店页面:占访问的 8%,14 家中 5 家已收录。
抓取预算是指 Googlebot 在一定时间内愿意从一个网站抓取的页面数量。每一次花在筛选组合上的访问,都是少了一次重新读取门店页面的机会。
这是针对虚构网站的模拟演示:真实的抓取预算取决于网站的规模、速度和受欢迎程度。
05逐月进展
第 1 个月
全站抓取、十二周的服务器日志、全部十四个门店页面的相似度评分,以及进入预约的每一条路径。
第 2–3 个月
上线 robots.txt 规则和筛选网址的 canonical;站点地图从 44,000 个网址精简到 1,900 个。筛选网址在 Googlebot 访问中的占比从 62% 降到 34%。
第 4–5 个月
每个门店页面都按自己的团队、设备、停车和街区重写,上线前先做相似度检查。
第 6–7 个月
预约重建为主域名下服务器端渲染的 /book/ 页面;旧子域名逐个网址重定向过来。
第 8–10 个月
门店总览页、相邻门店链接和服务页面链接。门店页面每四天被重新抓取一次,最后一家掉出索引的门店在第 10 个月重新被收录。
06成果
这是针对虚构企业的模拟情景,并非客户的真实成果。我们从不保证排名和流量;详见我们的条款。
| 搜索词 | 落地页 | 改造前 | 第 10 个月 |
|---|---|---|---|
| opticians moseley | /opticians/moseley/ | 第 6 位 | 第 2 位 |
| eye test harborne | /opticians/harborne/ | 第 11 位 | 第 1 位 |
| opticians erdington | /opticians/erdington/ | 未进入前 50 名 | 第 3 位 |
| kids eye test kings heath | /opticians/kings-heath/ | 未进入前 50 名 | 第 2 位 |
| contact lens fitting solihull | /opticians/solihull/ | 第 9 位 | 第 2 位 |
| opticians jewellery quarter | /opticians/jewellery-quarter/ | 未进入前 50 名 | 第 1 位 |
| independent opticians birmingham | /opticians/ | 第 18 位 | 第 4 位 |
按原样输入的各搜索词在 Google 英国的模拟排名,分别为改造前和第 10 个月。