Obscura
不依赖 Chromium 的 Rust 无头浏览器
爬虫31.8k
Obscura 是 Rust 无头浏览器,面向智能体与网页采集,内置 JavaScript,并支持 Puppeteer、Playwright 的 CDP 连接。
「GitHub」栏目下「爬虫」分类的已发布内容,按本站发布日期从新到旧排列。
4 条
不依赖 Chromium 的 Rust 无头浏览器
Obscura 是 Rust 无头浏览器,面向智能体与网页采集,内置 JavaScript,并支持 Puppeteer、Playwright 的 CDP 连接。
330 万在招岗位,全部链回公司自己的招聘页
freehire 从公司招聘系统直接抓取在招岗位并逐条去重,链回原始招聘页;MIT 开源,可用网站、扩展、API,也能自己部署一套。
用统一命令与数据格式操作 10 个主流内容平台的命令行工具
catbus 是纯 Node.js 命令行工具,用统一指令与规范 JSON 操作小红书、抖音、B 站等 10 大平台,为开发者和 AI 提供多平台抓取能力。
把网页变成 LLM 数据的抓取工具包
用 TypeScript 编写、可自托管的网页抓取工具包,以三种引擎覆盖静态页到 JS 渲染页,支持搜索结果批量采集、全站遍历与 LLM 结构化抽取,输出对大模型友好的数据。