01
固定样本
从同一站点、同一栏目选择页面状态和内容质量接近的 URL，记录实验前七日抓取情况。不要把首页与深层详情页混在同一组比较。
02
一次只改变一个主要变量
例如只增加一个栏目入口、只修复站点地图或只调整提交节奏。多项改动同时发生时，很难判断真正有效的因素。
03
保留失败样本
未抓取、抓取后未索引和出现错误状态的页面同样重要。完整记录失败样本，才能发现质量门槛和异常模式。
百度蜘蛛抓取实验设计方法
没有基线和对照组的“效果提升”无法判断来自入口调整、内容更新还是搜索引擎自身波动。