Crawly

Crawly 是一款专为 macOS 设计的高速原生 SEO 爬虫工具，旨在帮助网站管理员和 SEO 专家快速发现并修复网站问题。它能够审计数百种 SEO 信号，并通过内置的 Claude Code MCP 服务器，让你用自然语言查询爬取数据，真正实现 AI 驱动的 SEO 分析。

核心功能

Crawly 的核心在于其强大的爬虫引擎，能够高效扫描网站并捕获全面的 SEO 数据。它支持自定义爬取范围、深度和频率，确保覆盖所有关键页面。内置的审计模块会实时检测常见问题，如断链、元标签缺失、加载速度慢等，并生成详细报告。最独特的是，Crawly 集成了 Claude Code MCP 服务器，允许你直接通过自然语言向 AI 提问，例如“找出所有缺少 alt 标签的图片”或“列出页面标题重复的 URL”，AI 会立即返回精准结果。

主要特性

• 高速原生性能：专为 macOS 优化，充分利用系统资源，爬取速度远超同类工具。
• 数百种 SEO 信号审计：覆盖技术 SEO、内容 SEO 和用户体验指标，确保无死角检测。
• AI 自然语言查询：通过内置 Claude Code MCP 服务器，用对话方式探索爬取数据，无需复杂查询语法。
• 实时报告与导出：审计结果以可视化图表呈现，支持导出为 CSV、JSON 等格式，便于团队协作。
• 灵活配置：可设置爬取规则、排除模式、速率限制，适应不同规模的网站。

适用场景

• SEO 专业审计：定期对网站进行全面健康检查，发现并修复影响排名的技术问题。
• 内容优化：快速定位内容缺失或重复问题，提升页面质量和关键词覆盖。
• 竞品分析：爬取竞争对手网站，分析其 SEO 策略和结构优势。
• 网站迁移验证：在改版或迁移后，确保所有页面 SEO 要素正确无误。

Crawly 将传统 SEO 工具的效率与 AI 的智能相结合，让数据查询变得像聊天一样简单，是每个现代 SEO 从业者不可或缺的利器。