一、基本信息
Firecrawl是面向生成式AI与数据应用的Web数据API，提供页面抓取、网站爬取与网页搜索三大能力，目标是把互联网内容转换为适合大模型处理的干净数据。平台支持Markdown、JSON、HTML以及截图等多种输出格式，可通过Python、Node等SDK或REST接口集成，适用于智能体、RAG检索增强、数据抽取与监测等场景。
二、产品概述
Firecrawl以“URL输入—内容抽取—结构化输出”为主线，既可对单页进行高保真抓取，也可在站点范围内自动发现可访问子页并批量产出数据。V1版本引入输出格式选项、URL映射端点与更友好的任务查询接口，并提供团队与密钥管理、回调与更高的速率上限。平台强调对JS动态页面与受保护内容的适配，通过“无代理配置”的方式减少传统爬虫在代理与指纹维护上的成本，面向实时智能体与大规模应用优化速度与稳定性。
三、核心功能
1、主要功能
抓取 Scrape：对单页输出LLM就绪数据，支持Markdown、JSON、HTML与截图等格式。
爬取 Crawl：自动遍历网站可访问子页，为每个URL生成独立数据条目，并支持任务状态查询。
搜索 Search：在Web范围内检索并返回命中的完整正文，便于研究与发现。
URL映射 Map：快速获取页面的大部分相关链接，作为后续爬取入口。
交互式抓取 Actions：在抽取前模拟点击、滚动、输入与等待，以应对登录前页或懒加载场景。
回调与实时：提供Webhook与WebSocket，方便批量任务与在线应用对接。
2、技术特性
多格式与仅主体抽取：默认仅输出主内容，降低噪声；多格式并行满足下游多样化处理。
开发者生态：官方Python与Node SDK，社区Go与Rust实现，命令行与cURL均可用。
工程化体验：任务化查询与更高速率限制，适配并发抓取；密钥与团队管理统一在控制台。
兼容智能体：提供MCP服务器，实现与主流LLM客户端或Agent框架的即插即用联动。
四、定价与版本
Firecrawl采用按配额与计划计费的方式，区分免费与付费层级；不同方案在速率限制、并发、团队与高级功能上存在差异。具体价格、额度换算与失败请求计费政策以官方价格页实时信息为准，可能随时间调整。
五、适用场景与人群
适用于RAG与企业知识库搭建、竞品与价格监测、法规与舆情聚合、技术文档同步、研究型Agent批量采集、营销与SEO素材收集等。面向对象包括AI应用与智能体团队、数据工程与运维、研究与咨询机构、内容与运营团队及独立开发者。
六、常见问题
Q: Firecrawl的API能返回哪些格式
A: 支持Markdown、JSON、HTML与截图等，多格式可按需选择输出，便于直接进入向量化或标注流程。
Q: 是否支持站点级批量与链接发现
A: 支持。可用Map端点获取URL集合，用Crawl端点批量处理，并通过任务查询或Webhook/WebSocket跟踪进度。
Q: 对动态页面与反爬的适配如何
A: 提供动作级交互与“无代理配置”的抓取方案，覆盖JS渲染与受保护页面等复杂场景，减少手工维护成本。
Q: 有哪些官方集成与SDK
A: 提供官方Python与Node SDK，社区维护Go与Rust；并提供MCP服务器，方便在Cursor、Claude等客户端内调用。
Q: 开源与托管的关系是什么
A: 官方维护文档与开源仓库，提供云端托管服务；开发者可参考开源实现与文档，在托管方案上快速落地生产。
