搜索结果:scraping(23 个)
按分类缩小范围
Scrapling (全功能网页数据爬取框架)
商机 47
一款现代网页爬虫框架,支持从单次网络请求到大规模爬取的各类数据抓取需求。
自托管的抖音、TikTok、B 站数据采集与去水印下载 API,支持 MCP 调用、离线转文字及 Docker 部署。
crawlee
商机 81
面向 Node.js 的网页抓取与浏览器自动化库,支持 JS/TS,便于为 AI、LLM 和 RAG 提取数据。
SurfSense
商机 79
支持物理隔离、注重隐私的开源 NotebookLM 替代品,用于研究、转换和编辑文档的 AI Agent。
camofox-browser
商机 79
面向 AI Agent 的隐形无头浏览器,可绕过 Cloudflare 与反爬检测,可平替 Puppeteer/Playwright。
stagehand
商机 78
用于从网页提取数据并自动化交互的 SDK,支持接入 Claude Code 等。
nanobrowser
商机 78
开源网页自动化 AI Agent,可直接借助已登录的真实浏览器执行日常自动化任务。
SeleniumBase
商机 76
用于网页自动化、测试以及绕过机器人检测的 Python API 工具库。
Scrapegraph-ai
商机 76
基于 AI 的 Python 爬虫工具。
obscura
商机 73
面向 AI Agent 和网页抓取场景的无头浏览器(Headless Browser)。
maxun
商机 73
将任意网站转化为结构化 API,支持网页数据提取、自动化工作流、搜索与监控。
Skill_Seekers
商机 73
可将开发文档网站、GitHub 仓库和 PDF 转为 Claude AI Skills,并支持冲突自动检测。
deep-research
商机 70
结合搜索引擎、网页抓取与 LLM,针对任意主题开展迭代式深度研究的 AI 助手。
colly
商机 69
设计优雅、功能强大的 Golang 网络爬虫与数据采集框架。
camoufox
商机 66
一款防关联/防检测浏览器。
sakuramedia
商机 65
自建 JAV 媒体库,支持番号识别、元数据刮削、订阅自动下载与多端播放,支持 NAS/Docker 部署。
undetected-chromedriver
商机 63
免配置的定制版 Selenium Chromedriver,可绕过各类反爬和机器人防护系统。
webmagic
商机 59
一款可扩展的 Java 网络爬虫框架。
为 AI Agent 打造的开源网页爬虫与信息提取工具,基于 Apache-2.0 协议开源。
Ghosten-Player
商机 48
支持网盘直连、元数据刮削、IPTV 和文件管理的视频播放器。