爬虫

AnyCrawl

把网页变成 LLM 数据的抓取工具包

爬虫3.5k

用 TypeScript 编写、可自托管的网页抓取工具包，以三种引擎覆盖静态页到 JS 渲染页，支持搜索结果批量采集、全站遍历与 LLM 结构化抽取，输出对大模型友好的数据。