当页面从几十个涨到几百上千个,手工逐页改标题、提交链接、盯索引会从“可控”变成“不可靠”。更实际的分界是:凡是需要重复判断同一规则、且结果要覆盖全站的动作,应尽早交给模板、规则或脚本;凡是涉及内容取舍、页面合并、商业优先级判断的,仍要人来做。下面按这个分界展开。
小站阶段,手工改十个页面的标题、逐个在后台提交链接,往往当天就能看到变化。规模扩大后,同样的动作还在做,却出现三种典型信号:改过的页面数量对不上、旧页面反复回退、同一批页面有的被处理有的没被处理。这不是手工“变差了”,而是手工的适用条件被规模破坏了。
两种解释都成立:一是动作本身没有错,只是执行覆盖率下降,漏掉的页面越来越多;二是动作依赖的规则本身不统一,不同人、不同时间对同一类页面做了不同处理,导致站内信号互相抵消。区分这两种解释,不能只看“做了多少”,要看“做的是否一致”。
从同一类页面里随机抽 20 到 30 个,对照三件事:标题与描述是否遵循同一模板、内链入口是否指向同一批目标页、是否都在同一套提交或索引路径里。如果抽样里出现多种写法、多个入口规则,问题属于第二种解释,继续加人手只会放大不一致;如果抽样高度一致,只是覆盖不全,问题属于第一种解释,优先补自动化覆盖。
这里要说明一个边界:抓取量、索引量或某个统计归零,不能单独证明手工处理正确或错误。它也可能是抓取预算变化、页面质量分层、外部链接变动导致的。把这些现象和抽样一致性放在一起看,才能判断下一步该改规则还是补覆盖。
这类工作的共同点是:判断标准可以用一句话说清,且每个页面都适用。典型包括:
动作示例:把全站标题模板写成生成规则,只让编辑填页面主题词和核心卖点。结果是新页面不再依赖某个人记得改标题,抽样一致性上升;下一步就可以把精力从“补漏”转到“判断哪些页面值得保留”。
规模扩大后,人最该做的不是执行,而是决定。以下动作不适合交给规则自动完成:
原因很直接:规则只能执行已经确定的判断,不能替代判断本身。把取舍工作也自动化,常见结果是页面数量继续增长,但真正有获取能力的页面没有增加。
假设某站有 800 个页面,其中 300 个是同一类产品页。团队一直手工改标题和提交链接。抽样 25 个后发现:18 个用了新模板,7 个还是旧写法,且内链入口分三套规则。按前面的分界,这属于规则不统一,而不是覆盖不足。
此时合理动作是先统一模板和入口规则,再用脚本覆盖全部 300 个页面,而不是继续手工补那 7 个。统一后重新抽样,如果一致性明显提高,下一步才适合讨论这些页面是否该合并或下线。这个顺序不能反:规则没统一就做内容取舍,取舍结果会被不一致的信号淹没。
对本地业务站来说,规模扩大通常来自栏目增加、地区页或服务页批量生成。此时可以把工作分成两层:一层是规则层,用模板和脚本保证全站一致性;一层是判断层,由人定期抽样、决定保留与合并。两层分开后,手工不再是主要执行方式,而是用来发现例外和修正规则。这样做的直接结果,是网站继续扩张时,一致性不会随页面数量增加而下降。