更新日志

Scopeva 的变化。

记录会影响结果理解的新工具、爬虫更新、诊断改进和修复。

爬虫准确性与智能体发现

  • 改进 Google 兼容的 robots.txt 匹配,包括查询串、百分号编码、重复分组和路径结尾锚点。
  • 新增中英文解决方案流程,并扩展有来源支持的 AI 爬虫角色与内容使用偏好说明。
  • 发布 Markdown 协商、API Catalog、A2A、MCP、Agent Skills 与 WebMCP 发现入口。

诊断能力与站点基础

  • 增加基于 URL 的结构化数据抓取与 JSON-LD 分析。
  • 扩展 AI 爬虫检查器,提供实时结果、来源面板和建议。
  • 发布文档、联系、隐私和负责任使用指南。

首次公开发布

  • 发布六个面向爬虫访问、站点地图、响应头、CSP 和结构化数据的专注工具。
  • 为需要公开网站资源的诊断增加安全的服务端抓取。
  • 所有已发布工具无需账户即可使用。

发现意外变化?

提交错误报告或边缘情况时,请注明相关工具和 URL。

联系 Scopeva →