73 / 73
所有网址都被屏蔽
测试服务器上的 robots.txt 随改版一起上线。Search Console 把每个页面都列为“已被 robots.txt 屏蔽”。
第 10 号标本 · 技术 SEO
DENDRO FOREST SCHOOL · 森林幼儿园与学校,3 个园区 · 图尔库
每月招生类搜索访问从 0 增至 422 次
图尔库,芬兰 · 10 个月 · Signal 方案 · 教育与非营利
每一条叶脉都是学校网站的一个页面。主脉是英文网站;芬兰语页面向左分出,瑞典语页面向右分出;细小的支脉是深层页面:每个森林园区、学期日期、服务券指南。
73 个页面,重新显现
挑战
一次改版带上了屏蔽整站的 robots.txt,还把芬兰语和瑞典语页面挤出了索引。招生类搜索带来的访问随之归零。
Dendro 在图尔库开设三个森林班,分别位于 Ruissalo、Hirvensalo 和 Impivaara,有 25 位老师,候补名单过去每年春天都会自然排满。家长们找到这所学校的方式,和图尔库家庭找大多数东西一样:用芬兰语或瑞典语搜索家附近的森林幼儿园。
二月,新网站上线了,看上去很漂亮。可它同时带上了测试服务器的 robots.txt,让所有爬虫都别进来;它还把每个芬兰语和瑞典语页面都指向对应的英文页面,当作“正式”版本。不到六周,这所学校就从搜索结果里消失了,而八月入学的报名恰好刚刚开始。
显现:主脉
第一天就解除了测试环境的屏蔽,换上一份简短的正式文件。如今,只要某次发布的 robots.txt 屏蔽整站,部署检查就会拦下它。
显现:侧脉
每个页面都把自己声明为 canonical,并列出芬兰语、瑞典语和英语的对应页面,x-default 指向芬兰语。
显现:细支脉
每种语言一份站点地图,列出全部 48 个深层页面;各森林园区的概览页也重新链接到它们,爬虫顺着链接就能走到。
显现:旧路径
改版前的 112 个旧地址全部重定向到新页面,来自市政名录和家长群的链接重新生效。
动手试试
把纸铺在叶子上,用铅笔涂。笔尖经过的地方,叶脉会显示搜索引擎能顺着走到哪里。然后打开修复项,再涂一次。
键盘操作:聚焦纸面后使用方向键。
铅笔已经过的叶脉:0 / 73
0 条已索引 · 0 条仅抓取 · 0 条被屏蔽 · 0 条未发现
尚未修复。73 个页面中 0 个已编入索引;每月约 0 次招生类搜索访问。
按语言统计的索引页面
虚构学校的模拟数据。
Googlebot 读到的内容
/robots.txt
User-agent: *
Disallow: /
/fi/ilmoittautuminen/ 的 head 部分
<link rel="canonical" href="https://dendroforest.example/en/enrolment/">
野外笔记
第 1 个月
三月
第一天就替换了正式环境的 robots.txt;三个语言目录都在 Search Console 完成验证;为首页和招生页申请重新抓取。
已索引 11 / 73
第 2 个月
四月
每个栏目页都加上自引用 canonical 和芬兰语、瑞典语、英语的 hreflang;x-default 设为芬兰语。
已索引 34 / 73
第 3 个月
五月
提交按语言划分的 XML 站点地图;各森林园区概览页重新链接 48 个深层页面。
已索引 58 / 73
第 4 个月
六月
梳理 112 个旧地址并做 301 重定向;市政托育名录的链接如今直达芬兰语招生页。
已索引 66 / 73
第 5 个月
七月
服务器日志显示 Googlebot 每周都会访问三个语言目录。两个瑞典语模板仍带着英文 canonical,随即修正。
已索引 70 / 73
第 6 个月
八月
三个园区都加上 Preschool 和 ChildCare 结构化数据,包含地址、开放时间和保育语言。
已索引 71 / 73
第 7 个月
九月
如今,只要 robots.txt 屏蔽根目录,或 canonical 跨语言指向,部署检查就会拦下这次发布。
已索引 72 / 73
第 8 个月
十月
秋季开放日页面发布后两天内即被编入索引,三种语言都是如此。
已索引 73 / 73
第 9 个月
十一月
一次较小的设计更新在检查机制下上线,没有丢掉任何一个已索引页面。
已索引 73 / 73
第 10 个月
十二月
73 个页面全部编入索引,每月约 422 次招生类搜索访问,秋季入学收到 68 份来自搜索的咨询。
已索引 73 / 73