日志里重点看什么
重点查看 User-Agent、访问 URL、状态码、响应耗时、来源入口和访问时间。百度蜘蛛访问稳定后，再观察是否带动重点页面复访。
常见异常
- 大量 301/302 跳转，导致蜘蛛抓取路径变长。
- 404、500 或超时过多，降低页面信任和抓取效率。
- 移动端和 PC 端内容差异大，导致页面质量判断不稳定。
- 入口页面更新少，后续内容页发现速度慢。
如何调整
根据日志反馈调整 URL 分组、入口页面、内链结构和推送节奏。对长期没有蜘蛛访问的重点页面，可以单独建立入口并观察复访变化。
蜘蛛池抓取日志观察说明
蜘蛛池执行后，需要结合服务器日志判断百度蜘蛛是否访问、访问了哪些入口、返回什么状态码，以及是否形成持续复访。