先看搜索证据
Google 的搜索爬虫说明解释了搜索发现系统的用途，和通用智能抓取或普通系统访问不是同一类角色。
在访问分层表中单独保留搜索引擎爬虫，并把它连接到站点地图、规范入口、页面速度和可抓取内容。
被看见不等于被选择
真正有用的问题不是页面有没有出现过，而是搜索问题、页面承诺和下一步动作是否服务同一个读者任务。
先核对页面路径
- 在专题页中加入搜索发现、智能抓取、系统访问和真实读者的四列判断
- 先选一个低风险任务或工具入口验证权限、日志、失败处理和人工接管，不要直接接入关键生产流程
哪些还要核验
混淆不同来源的访问，会让页面内容、站点设置和读者路径互相拖累。原始来源保留在文末，方便把公告事实、证据和本站判断分开看。