更新日志
Scopeva 的变化。
记录会影响结果理解的新工具、爬虫更新、诊断改进和修复。
爬虫准确性与智能体发现
- 改进 Google 兼容的 robots.txt 匹配,包括查询串、百分号编码、重复分组和路径结尾锚点。
- 新增中英文解决方案流程,并扩展有来源支持的 AI 爬虫角色与内容使用偏好说明。
- 发布 Markdown 协商、API Catalog、A2A、MCP、Agent Skills 与 WebMCP 发现入口。
诊断能力与站点基础
- 增加基于 URL 的结构化数据抓取与 JSON-LD 分析。
- 扩展 AI 爬虫检查器,提供实时结果、来源面板和建议。
- 发布文档、联系、隐私和负责任使用指南。
首次公开发布
- 发布六个面向爬虫访问、站点地图、响应头、CSP 和结构化数据的专注工具。
- 为需要公开网站资源的诊断增加安全的服务端抓取。
- 所有已发布工具无需账户即可使用。
发现意外变化?
提交错误报告或边缘情况时,请注明相关工具和 URL。
