Firecrawl
专业网页抓取和数据提取。使用 Firecrawl API 抓取网页、提取结构化数据、批量爬取网站。当用户需要抓取复杂网页、提取结构化数据、批量爬取时使用此技能。
by aaaaqwq · MIT
The skill
专业网页抓取和数据提取。使用 Firecrawl API 抓取网页、提取结构化数据、批量爬取网站。当用户需要抓取复杂网页、提取结构化数据、批量爬取时使用此技能。
Firecrawl 网页抓取
功能说明
此技能使用 Firecrawl API 提供专业网页抓取能力:
- 单页抓取(支持动态内容)
- 结构化数据提取
- 批量网站爬取
- 搜索并抓取
使用方式
1. 抓取单个网页
./scripts/firecrawl.sh scrape <url> [format]
- format: markdown (默认), html, text, json
2. 提取结构化数据
./scripts/firecrawl.sh extract <url> <schema>
3. 批量爬取网站
./scripts/firecrawl.sh crawl <url> [max_pages]
4. 搜索并抓取
./scripts/firecrawl.sh search <query> [limit]
API Key
存储在: pass show api/firecrawl
示例
抓取 Polymarket 页面
./scripts/firecrawl.sh scrape "https://polymarket.com/event/fed-decision-in-march-885"
提取产品信息
./scripts/firecrawl.sh extract "https://example.com/product" '{"name": "string", "price": "number"}'
搜索 AI 新闻
./scripts/firecrawl.sh search "latest AI news" 5
注意事项
- Firecrawl 有使用限制(取决于套餐)
- 复杂网页可能需要更长的处理时间
- 某些网站可能有反爬虫机制
Use this skill
Connect your agent to the Skill Store MCP server and ask for it by ref: aaaaqwq/firecrawl-29788841434.
Details
- Publisher
- aaaaqwq
- Category
- Data & Analytics › Scraping & extraction
- License
- MIT
- Updated
- 2026-10-14
References
More from aaaaqwq
- Agi Super Team Orchestrator 跨职能、公司级、高不确定性或用户明确要求 AGI Super Team、C-suite、团队协作、并行专家、独立复核时使用。先按职责选择最小团队,再用 Claude Code Agent 工具精…
- Agi Super Team Sync Preview, install, or update AGI Super Team in Codex.
- C Suite Team Run an outcome-oriented C-suite team in Codex with the parent acting as CEO, bounded specialist l…
- Context Engineering Optimizes agent context setup.