当页面数量、栏目层级和更新频率都明显上升后,手工做全站检查、逐条改标题、逐个提交地址会从“细致”变成“失控”。判断标准不是工作量大小,而是这项工作是否要求对每个页面做独立判断。需要独立判断的继续手工,规则明确且重复出现的交给批处理或模板,这是规模扩大后更稳的分工。
应用优化里容易被忽略的一点是,抓取、索引、排名是不同环节,同一项手工操作未必同时改善三者。规模扩大后,先按下面的依据分类:
一个可操作的动作是:先抽 30 到 50 个页面,手工处理一遍并记录每次判断的理由。如果理由高度重复,说明可以规则化;如果每个页面理由都不同,说明还不到交给批量处理的时候。这个动作的结果直接决定下一步是把规则写成脚本或模板,还是继续保留人工环节。
当站点已经形成稳定的栏目结构,且同类页面的字段和模板一致时,以下工作继续手工做的收益很低:
这里的关键动作是把人工从“执行”移到“审核”。假设一个站点有 5000 个页面,其中 4800 个属于同一内容类型,那么模板规则可以覆盖绝大多数,剩下 200 个例外页才需要逐页判断。这个假设说明的是比较方法:先估算规则覆盖率,再决定投入多少人工。覆盖率越高,手工逐条做的必要性越低。
如果站点虽然规模大,但页面之间差异明显,比如同一栏目下既有产品页、又有方案页和案例页,那么标题、描述、内链的写法很难用一条规则概括。此时强行批量处理,常见结果是模板化文字大量重复,反而增加后续清理成本。
这类情况下更适合保留手工或半手工:
例外是:即使在这个条件下,状态码检查、站点地图生成、失效链接扫描仍然适合自动化,因为它们不涉及内容判断,只涉及事实核对。
决定某项工作是否继续手工做,可以按两个维度排序:
举例来说,批量修改标题属于可逆性中等、重复度可能较高的操作,可以先在 50 个页面上试跑,观察索引和点击变化,再决定是否扩大范围。批量删除页面属于可逆性低的操作,即使重复度高,也应先输出待删清单,人工确认后再执行。这个顺序的作用是避免把“规模大”直接等同于“全部自动化”。
自动化解决的是重复执行,不解决判断质量。以下环节建议长期保留人工:
抽样复核是容易被省掉的一步。如果批量处理后没有任何抽样检查,规则错误可能长期存在而不被发现。反过来,如果抽样发现错误集中在某一类页面,就应该先修正规则,再继续扩大处理范围,而不是继续手工修补个别页面。