搜索结果：scraping（25 个）
按分类缩小范围
Scrapling （全功能网页数据爬取框架）
综合 47
一款现代网页爬虫框架，支持从单次网络请求到大规模爬取的各类数据抓取需求。
自托管的抖音、TikTok、B 站数据采集与去水印下载 API，支持 MCP 调用、离线转文字及 Docker 部署。
crawlee
综合 80
面向 Node.js 的网页抓取与浏览器自动化库，支持 JS/TS，便于为 AI、LLM 和 RAG 提取数据。
camofox-browser
综合 79
面向 AI Agent 的隐形无头浏览器，可绕过 Cloudflare 与反爬检测，可平替 Puppeteer/Playwright。
SurfSense
综合 78
支持物理隔离、注重隐私的开源 NotebookLM 替代品，用于研究、转换和编辑文档的 AI Agent。
stagehand
综合 77
用于从网页提取数据并自动化交互的 SDK，支持接入 Claude Code 等。
nanobrowser
综合 77
开源网页自动化 AI Agent，可直接借助已登录的真实浏览器执行日常自动化任务。
SeleniumBase
综合 76
用于网页自动化、测试以及绕过机器人检测的 Python API 工具库。
Scrapegraph-ai
综合 75
基于 AI 的 Python 爬虫工具。
moli
综合 74
专为 AI Agent 设计的无头浏览器，基于 Rust 编写，轻量、极速且具备高兼容性。
obscura
综合 73
面向 AI Agent 和网页抓取场景的无头浏览器（Headless Browser）。
maxun
综合 72
将任意网站转化为结构化 API，支持网页数据提取、自动化工作流、搜索与监控。
Skill_Seekers
综合 72
可将开发文档网站、GitHub 仓库和 PDF 转为 Claude AI Skills，并支持冲突自动检测。
camoufox
综合 70
一款防关联/防检测浏览器。
deep-research
综合 69
结合搜索引擎、网页抓取与 LLM，针对任意主题开展迭代式深度研究的 AI 助手。
colly
综合 68
设计优雅、功能强大的 Golang 网络爬虫与数据采集框架。
jsoup
综合 66
经典的 Java HTML 解析库，专为 HTML 数据抓取、解析、清洗及防范 XSS 设计。
webmagic
综合 59
一款可扩展的 Java 网络爬虫框架。
scala-scraper
综合 58
scala-scraper 是一个用于抓取和解析 HTML 网页的 Scala 库。它支持通过 Jsoup 等浏览器后端加载网络请求或本地 HTML 文件，并提供了强大的 DSL 语法（如 `>>` 提取操作符与 CSS 查询选择器），帮助开发者快速、优雅地提取并验证页面内容。
sakuramedia
综合 58
自建 JAV 媒体库，支持番号识别、元数据刮削、订阅自动下载与多端播放，支持 NAS/Docker 部署。