整站抓取和搜索
不止抓一页:能顺着链接把整个站点爬一遍,也能先搜索再抓结果,适合做行业调研和资料汇总。
它能帮你做什么
不止抓一页:能顺着链接把整个站点爬一遍,也能先搜索再抓结果,适合做行业调研和资料汇总。
收录状态
已授权收录,来源:GitHub
说明
## 它解决什么 调研一个行业要看几十个站。手工一个个开,一天就没了。 这个服务能按规则批量抓,还能处理需要执行脚本才显示内容的页面。 ## 典型用法 - 把某个厂商的整套文档抓下来做成资料库 - 搜索加抓取一步到位:给关键词,直接拿回结构化结果 - 定期重抓,对比前后变化 ## 要准备什么 需要 Firecrawl 的 API Key,有免费额度。