先别急着重跑。中断后判断覆盖范围,核心是看扫描任务有没有留下可核对的进度记录,以及记录粒度是否细到能区分“已处理”和“只排队”。如果日志按URL逐条落盘,你就能从最后一条成功记录往后推算;如果只留下一个总进度百分比,那它通常不足以支撑判断,更稳妥的做法是缩小范围重扫,而不是凭百分比估算。
旧系统或旧合作关系退出前,往往需要确认哪些页面已经被扫描过,避免重复劳动或漏掉仍需保留的部分。这时先看任务留下了什么。
如果每条URL处理完都会写入状态(成功、失败、跳过),中断后可以直接读取最后一条成功记录的时间戳或序号。用它和任务开始时间对比,能圈出已覆盖的区间。此时不必全量重跑,只需从断点之后补扫,再对断点前后各取少量URL做抽样复核,确认记录与实际处理一致。
只有总数时,百分比无法告诉你具体覆盖了哪些URL,因为处理顺序未必稳定。这种情况下把“已覆盖范围”当成未知更安全。可行动作是缩小扫描范围:先按目录或栏目分批,每批单独记录起止,跑完一批再进入下一批。这样即使再次中断,损失也只是当前小批,而不是整站状态不明。
假设任务日志里保留了每条URL的处理状态和序号(这是假设示例,不是真实工具界面)。中断后按以下顺序操作:
这个动作的结果会直接影响下一步:如果验证发现断点之后的URL其实已被处理过,说明日志写入有延迟或乱序,那么断点不可信,应改为分批重扫;如果验证一致,就可以放心补扫剩余部分。
请求量突然归零、抓取统计停在一个整数、进度条卡住不动,这些都可能只是界面刷新或采集端暂停造成的,不能单独作为覆盖完成的证据。同样,某个目录下没有新记录,也可能是该目录本就不需要处理,而不是被跳过了。判断时至少要有两类互相独立的证据,比如逐条日志加抽样复核,而不是只看一个总数。
另外要注意,中断后如果直接重跑全站,可能覆盖掉原有记录,反而让覆盖范围更难追溯。保留原日志、另起一个任务或另存一份结果,是更稳妥的做法。
判断覆盖范围的目的,往往是为退出旧内容、旧系统或旧合作关系做准备。已覆盖不等于该保留:可以在确认覆盖范围后,对已扫描的URL按规则分类,比如仍有点击、仍有外链指向、仍是转化路径一环的保留,其余标记为可退出。这个分类动作依赖覆盖数据的完整性,所以先解决“扫到哪了”,再决定“留哪些”。
如果覆盖范围本身不完整,就不要急着做退出决策,否则可能误删仍有价值的页面。把补扫和分类分成两步,先补齐数据,再执行退出,是更可控的顺序。
分批重扫并非总是最优。如果站点规模很小、扫描耗时很短,直接全量重跑可能比推算断点更省事;如果扫描涉及外部系统或旧合作关系,重跑前还要确认对方是否仍允许访问。涉及具体品牌工具的日志格式、导出方式和当前功能,需要以该工具的实际说明为准,不要凭印象推断。
把覆盖判断落到一个可复核的断点上,再决定补扫还是重扫,比反复猜测进度更接近可用的结论。