结论有条件:当页面数量、模板类型和改动频率同时上升时,逐页手工改标题、内链和检查索引状态会最先变得不可靠,应转为模板级规则加抽样核对;但如果站点只有几十个页面、栏目结构长期稳定,手工处理反而更省事,过早自动化只会增加维护成本。下面把判断条件、失效反例和可执行动作拆开说明。
站点扩大后,真正的问题不是"手工慢",而是手工操作无法保持一致。以下几类工作在页面数增加后最容易出问题:
这些工作的共同点是:判断逻辑其实相同,只是被执行了很多次。规模越大,人工执行的一致性越差。
判断是否该放弃手工,可以看三个可核对的条件:
三个条件同时满足,才适合把上述工作从手工转为规则加抽样。只满足一个就急着上批量处理,往往是把混乱放大了。
假设一个株洲本地站点,页面总数不到一百,栏目结构两年没变,每月只新增两三篇内容。这种情况下,逐页手工处理标题和内链不仅可行,而且比搭建规则更省心:规则需要维护、需要验证是否按预期生效,而手工改完就能直接看到结果。
反过来,如果这个站点突然从一百页扩到上千页,模板也从三种变成十几种,原来的手工节奏就会失效。所以"不适合手工"不是站点变大就自动成立,而是页面规模、模板数量和改动频率三者同时上升时才成立。只看页面总数下判断,容易误判。
多个角色对"该不该继续手工"有不同理解时,争论往往停留在感觉层面。更有效的做法是把分歧拆成可以核对的项目:
这样做的结果是:讨论从"要不要自动化"变成"哪个动作先规则化",分歧有了共同的核对对象。
可以先选一个动作做小范围验证:挑一个模板下的全部页面,把标题写法整理成统一规则,批量应用后随机抽取若干页面人工核对,同时观察这些页面的抓取和索引状态是否出现异常波动。
这个动作的结果会直接影响下一步:如果抽样页面与手工处理时表现一致,说明规则可靠,可以把同类动作继续规则化;如果抽样中发现大量偏差,说明规则本身还没写清楚,此时应退回手工,先把规则补完整再扩大范围。需要提醒的是,抓取量或索引数量短期归零,也可能是抓取预算调整、站点临时不可访问或统计口径变化造成的,不能单独作为规则失效或生效的证据,要结合抽样页面的实际情况一起看。