结论先说:当页面数量、栏目层级或更新频率超过一个人能稳定复核的范围时,逐条手工提交、逐页手工改标题、逐条手工记排名这三类工作就不该继续靠人力硬撑。判断标准不是“忙不忙”,而是同一动作重复后是否已经无法保证一致性。如果站点仍只有几十个页面、每周更新一两次,手工做反而更可控,因为改动少、上下文清楚、出错能立刻发现。
规模扩大后最先失效的,通常不是“需要判断”的工作,而是“需要重复执行且结果必须一致”的工作。前者比如决定某个栏目要不要合并、某类页面该不该保留,仍然需要人看业务和内容质量;后者比如给新页面补内链、检查已发布页面的标题是否重复、把重要页面登记进百度后台的抓取入口,一旦数量上来,靠人逐条处理就会开始漏。
一个可操作的区分方法是:把这项工作连续做十次,记录每次的判断依据是否相同。如果十次里有八次依据一样,只是对象不同,它就适合交给规则或脚本;如果每次依据都不同,说明它依赖业务判断,继续手工做并不算错。
在百度后台语境里,抓取、索引、展现是不同环节。手工提交只影响“告诉搜索引擎有这些地址”,不等于一定被抓取,更不等于被索引或获得展现。站点小的时候,逐条提交还能顺便核对地址是否写错;页面规模扩大后,逐条提交的收益会迅速下降,因为人很难同时记住哪些已提交、哪些是重复地址、哪些参数页本就不该提交。
手工监测也是同理。每天手工查一批词的排名,表面上很勤快,但它只能看到某个时间点的结果,无法区分是抓取没跟上、页面没被索引,还是页面已被索引但展现位置变化。请求量或抓取量下降也不能单独证明某次操作做错了,还可能是站点整体更新节奏变化、服务器响应波动或内容本身不再被需要。
实际动作:先选一个栏目做对照,把该栏目下新页面的提交动作改为按规则批量处理,同时保留一份人工抽查名单。下一步要看的是抽查名单里地址是否完整、是否混入不该提交的参数页。如果抽查发现重复地址明显减少,才把范围扩到其他栏目;如果抽查发现规则把重要页面漏掉,就先修规则,不要继续扩大批量范围。
标题、描述、正文首段的改写,不建议完全交给批量规则。原因不是技术做不到,而是这类改动直接影响用户是否愿意点击,以及页面是否准确表达业务。规模扩大后可以批量找出“标题重复”“描述为空”“首段高度相似”的页面清单,但具体怎么改,仍应由了解业务的人决定。
可以这样分工:批量规则负责发现问题和执行不涉及语义的替换,比如统一去掉标题里重复出现的站点名后缀;人工负责决定哪些页面值得保留、哪些应该合并或下线。若把语义判断也交给批量替换,短期看省事,后续往往要花更多时间回滚。
假设一个站点原来有两百个页面,每周更新五篇,一个人手工登记新地址、手工检查标题、手工记排名,完全忙得过来。后来页面扩到两千个,每周更新五十篇,同样的动作就会开始漏:有的新页面没登记,有的旧页面标题被改重复,有的排名记录只记了想看的词。
此时合理的切法是:登记和重复检查改为按规则批量执行,排名记录改为定期抽样而不是逐词逐天记录,语义改写仍保留人工。这个假设里的数字只用于说明比较方法,不是见效承诺。真正要观察的是漏项是否减少、回滚是否变少,而不是某一天的数据是否好看。
如果站点虽然页面多,但大部分是低频访问、彼此独立、更新极少,那么继续手工处理核心页面仍然成立,因为批量规则带来的维护成本可能高于收益。反过来,如果站点页面不多,但每天频繁改标题和结构,手工也很难保证一致,这时更该先定规则再动手。
下一步动作可以很小:列出最近一个月里重复做过三次以上的操作,逐项标注“判断依据是否每次都相同”。依据相同的,优先考虑改成规则执行;依据不同的,继续保留人工,并为它写清楚判断条件。这样做的结果会直接决定下一轮是把人力放在内容判断上,还是继续消耗在重复登记和重复检查上。