规模扩大后,最先不该继续手工做的,是那些“每次都要逐页判断、但判断规则已经稳定”的工作,例如逐条改写标题、逐页补内链、逐条提交新页面。它们在小样本阶段靠人工能保证质量,一旦页面数量、栏目层级或更新频率越过某个界限,手工就会从“精细”变成“漏做和延迟”。下面用一个假设情境把决策过程拆开。
假设某站点早期只有约两百个内容页,编辑能记住每个栏目的主题,也能手动决定每页标题、描述和站内链接。此时手工做雅虎优化是合理的,因为页面少、规则还在摸索,人的判断能纠正模板错误。
当站点扩到两万页、每天新增几十页时,同样的动作会出现三种变化:一是单页处理时间没有下降,总工时却线性上升;二是新页面在等待人工处理期间已经可以被抓取,但页面之间的链接和主题信号不完整;三是不同编辑对同一类页面的判断开始分叉,导致同类页面出现不同处理方式。这时问题不再是“手工做得够不够好”,而是“哪些手工动作已经不适合作为常规流程”。
标题、描述、H1、面包屑、分页链接这类元素,一旦栏目规则确定,就不需要每页重新发明。判断依据是:同一栏目下,页面意图是否一致、变量是否只来自标题词和分类词。如果答案是肯定的,继续逐页手工写,只会把人力消耗在重复劳动上。
实际动作可以这样安排:先抽一个栏目做规则表,列出标题模板、描述模板、内链模块和例外条件;再用这批页面验证规则是否覆盖主要意图。如果验证通过,下一步应把规则交给模板或批量处理流程,人工只处理例外页。这个动作的结果会直接影响下一步:例外页的比例如果很低,说明可以扩大自动化范围;如果例外页很多,说明规则还没稳定,此时不应强行批量处理,而应继续人工梳理规则。
小站点手工加内链,编辑能判断上下文相关性。规模扩大后,逐页加内链会遇到两个问题:一是新页面发布时,相关旧页面不会自动获得反向链接;二是人工添加容易集中在少数热门页面,长尾页面长期缺少入口。
更合适的做法是先定义链接模块,例如“同栏目最新”“相关主题”“上级栏目入口”,再检查这些模块是否出现在模板中。需要人工介入的,是跨栏目、跨意图的特殊链接,而不是每个页面都从零开始找链接。这里有一个可区分的证据:如果某个栏目下大量页面只能通过站内搜索或站点地图进入,而很少从其他内容页获得链接,那么手工加内链已经跟不上规模,下一步应优先检查模板和栏目结构,而不是继续增加人工链接任务。
页面少的时候,人工检查新页面是否被收录、是否出现在站点地图、是否有内部入口,是可行的。页面多、更新快之后,逐条检查会变成滞后动作。更合理的做法是把“可抓取”和“可发现”拆成两个检查点:站点地图是否自动包含新页面,页面是否有至少一个站内入口,服务器是否对正常访问返回可索引状态。
需要强调的是,抓取量、索引量或某个查询的请求量下降,不能单独证明某次处理正确。它也可能来自内容更新节奏变化、站点结构调整、外部链接波动或统计口径变化。因此,规模扩大后不适合手工做的,不是“所有检查”,而是“逐条重复检查已经稳定的信号”。人工应保留在异常排查上,例如某个栏目突然大量页面无法访问、模板改动后新页面缺少入口。
这个顺序的关键不是追求全自动,而是把人力从重复判断中释放出来,放到规则制定和异常处理上。规模扩大后,手工仍然适合做样本验证、例外判断和跨部门协调;不适合继续做的,是那些规则已经稳定、却仍要求逐页重复执行的工作。