/monitor by Firecrawl
为AI智能体提供网页变化监控,通过webhook通知,减少LLM token消耗,适用于需要实时数据更新的AI应用开发者。
Maker 说
嘿 Product Hunt 朋友们👋 我们是 Firecrawl 的 Eric、Caleb 和 Nick。今天我们要发布 /monitor —— 这是让你的 AI 智能体与网页保持同步最简单的方法。
我们做 /monitor 是因为总听到同样的问题:很多客户已经在用 Firecrawl 监控特定页面,反复抓取同样的定价页、文档、更新日志和备案文件,就是想捕捉到变化。这个需求很合理,但手动操作要么过度轮询,在没变化的页面上烧 token,要么轮询不足,错过关键更新。
所以我们把它做成了一个产品。只要给它一个 URL,用普通英语描述你想追踪的内容,Firecrawl 就会按你设定的频率检查页面,与上一版对比,一旦有实质性变化,就通过 webhook 通知你的智能体。你的智能体只摄入实际变化的部分,因此 token 用量最多能降低90%。
你完全不需要自己接线。schema、调度、差异对比和投递全部自动处理,而且在开启监控前就能看到预估月费。变化会通过带签名的 webhook 或邮件送达,每次差异都附带永久链接,你可以直接传给另一个智能体。底层基于 Firecrawl 的 /scrape 运行,所以重度 JS 页面也能可靠追踪。
如果你的智能体还在循环抓取同一份文档、更新日志或竞品页面,这个功能就是为你准备的。
可以在这里试用:https://docs.firecrawl.dev/featu...
期待听到你的想法。
为了跟踪竞品,我已经手动做了好几个月的"定时爬取 + 手动比对"。webhook 的方式干净多了。有个问题:它能处理那些在首次渲染后通过 JS 注入内容的页面吗?