当SEO行业门户的栏目、作者页和内容条目从几百涨到几千,最先暴露的不是策略问题,而是手工流程的边界:逐条改标题、逐页查收录、人工比对内链,这些动作在早期有效,规模上去后反而会掩盖真实信号。判断标准不是“手工累不累”,而是同一动作的结果能否被稳定复现、能否区分抓取、索引与排名三个环节。下面按保留、改写、退出三类取舍展开。
手工操作在站点小时有一个好处:你能同时看到页面和它背后的状态,判断往往比报表快。但当页面数量超过个人能逐条浏览的范围,手工采样会变成一种有偏抽样。你打开的多半是最近更新、导航里显眼或印象中出过问题的页面,而抓取异常、索引遗漏常常发生在长期没人看的旧栏目和分页里。
更麻烦的是,手工核对容易把三个环节混在一起。一个页面没流量,可能是搜索引擎没抓到,也可能是抓到了没索引,还可能是索引了但排名不理想。手工逐页看时,这三种情况在操作上很相似,都表现为“这条不行,我改改”。如果不先分层,改标题、加内链、调结构这些动作会同时压上去,之后你无法判断是哪一步起了作用。
可以保留手工的场景是:样本量小、判断需要读内容语义、或结论要用于制定规则。比如决定一个栏目是否值得继续维护,人工读十几篇代表内容仍然比任何报表可靠。但这类手工的产出应当是规则或判断依据,而不是直接批量改页面。
适合改写的动作,共同点是判断标准可以写下来,且结果能被下一个人复现。典型有三类。
改写的前提是你能说清规则为什么成立。如果只是把手工动作搬到脚本里,规则本身没想清楚,规模越大错误越会被放大。一个假设例子:某门户把“所有作者页都加同一段简介”写成规则,短期内页面数量上去了,但作者页之间高度同质,之后想区分哪些作者页真正被需要,就缺少可比较的信号。这里的教训不是不能批量,而是批量前要先确认这批页面承担什么功能。
需要退出的,通常是那些“做了也无法影响下一步决策”的动作。常见的有:
退出不等于放任。退出的动作应当被一个更粗粒度的观察替代,比如按目录看抓取与索引的整体变化。但要提醒一点:请求量、抓取量或某个统计归零,不能单独证明你的处理正确。它也可能来自节假日、发布节奏变化、站点结构调整或统计口径改变。看到归零时,先列出至少两种其他解释,再决定是否调整。
面对一个正在变重的手工动作,可以按下面顺序决定保留、改写还是退出:
实际动作上,可以先选一个栏目做对照:保留手工处理其中一部分页面,对另一部分应用规则化流程,过一段时间比较两组在抓取与索引层面的差异。这个比较的目的不是证明哪种方法更好,而是帮你确认规则是否真的对应了你想改善的环节。如果两组没有可区分的差异,说明当前问题可能不在这个动作上,下一步应转向检查站内发现路径或内容本身,而不是继续加大手工投入。