最小修复试验的核心是:先确定要交付的页面能被抓取和收录,再只改一个变量,用可复查的证据判断是否有效。外链收录平台本身只是发现链接的入口,不能替代页面质量、抓取权限和索引判断。因此试验目标应写成“某批外链页面能否被抓取、被索引”,而不是“发到平台就一定收录”。
多人协作最容易返工的地方,是每个人对“修复完成”的理解不同。开始前把验收标准写成一句话,例如:指定的一批外链页面中,至少有一个页面在目标搜索引擎的站点查询中可被找到,且抓取诊断返回成功。如果只写“提交到外链收录平台”,交付就没有可判断的结果。
验收标准需要包含四项信息:目标搜索引擎、页面范围、判断方式、观察期限。目标搜索引擎要分开写,因为不同搜索引擎的抓取和索引机制不同,不能用一个平台的结果推断另一个。页面范围建议先取三到五个代表性页面,不要一次全量提交。判断方式要可复查,例如用站点查询、抓取诊断或日志中的抓取记录。观察期限要事先约定,避免每天反复改。
常见做法是同时改标题、加内链、提交站点地图、调整 robots.txt,这样即使结果变好,也不知道是哪一步起作用。最小试验要求只改一个变量,其余保持原样。
可以按以下顺序逐项试验,每轮只动一个:
robots.txt 是否误挡了抓取路径。注意,抓取限制不等于可靠的索引移除,解除限制也不保证收录。每轮之间保留足够的观察时间。如果一轮没有变化,记录现象后进入下一轮,不要回头同时改两项。
多人协作时,把资料分成三类,分别指定负责人:
robots.txt、canonical、站点地图是否包含该地址。责任划分的关键是:改代码的人不负责判断是否收录,判断的人不擅自改代码。否则试验条件会被破坏。
页面没有被索引,可能有多种解释:抓取被限制、页面返回错误、内容与已有页面高度重复、站点地图未更新、索引尚未处理。这些是可能原因,不是已经定位的原因。只有拿到抓取记录、状态码或站点查询结果,才能说某一项已被确认。
检查时逐项对照:
如果试验目标是验证“外链收录平台能否加快发现”,那么判断依据应是抓取记录是否更早出现,而不是排名是否上升。排名变化受太多因素影响,不适合作为最小试验的验收指标。
先选三到五个外链页面,写清目标搜索引擎和验收标准,指定一名记录人。然后只做第一轮检查:状态码和 robots.txt。拿到结果后再决定是否进入提交或补链环节,不要一次把所有改动做完。