Hacker News · AI 最新· rayenmlayeh·· 2 天前AI 评分70
Jevcrawl:面向 AI 智能体的网页爬虫,爬取环节不使用 LLM
Show HN: Jevcrawl – A web crawler for AI agents with no LLM in the crawl loop
AI 导读
Jevcrawl 是一款面向 AI 智能体的开源网页爬虫,链接决策由 Jev 模型对页面打分完成,不把整页文本交给 LLM。基准测试中它找到答案页的比例为 54%,高于 Claude 选链接的 33%,也是 Crawl4AI 目标导向爬取的两倍,单任务成本约为 LLM 驱动爬取的八分之一。
来源:Hacker News · AI 最新 · github.com