Agent 分析
AI 爬虫抓不到你，答案里就不会有你
GPTBot、PerplexityBot 等抓取诊断与引用链路归因。
01
逐页统计 AI 爬虫的读法
GPTBot、PerplexityBot 等抓取按页面统计结果：200、403、404、渲染失败、被限流分别列出，先确认机器能不能读到你。
02
把「被抓到」和「被引用」连起来
抓取通过不等于被引用。分析把两者接成一条链路，定位断点在站点验证、页面渲染还是内容本身。
03
改动可以验证
改完 robots、补完结构化数据后，同一批页面的状态与引用率会进入下一轮快照，效果按周可比。
Agent 抓取诊断
AI 爬虫访问结果分布
/blog/cold-brew-guide已引用
/products/mini已引用
/compare/atlas-vs-oem已引用
/docs/brew-ratio未引用
/blog/latte-art未引用
200403 / 限流404 / 渲染失败
面板为演示租户的示意数据，非真实客户成绩。
按页面统计 AI 爬虫的访问结果——200、403、404、渲染失败、被限流——再把「被抓到」和「被引用」连成一条链路，定位断在哪一环。
逐页抓取状态分布
抓取 → 引用转化链路
AI 引流归因
站点验证与开放度检查
相关能力
常见问题