搜索结果:scraping(18 个)
按分类缩小范围
Scrapling (全功能网页数据爬取框架)
商机 47
一款现代网页爬虫框架,支持从单次网络请求到大规模爬取的各类数据抓取需求。
自托管的抖音、TikTok、B 站数据采集与去水印下载 API,支持 MCP 调用、离线转文字及 Docker 部署。
camofox-browser
商机 79
面向 AI Agent 的隐形无头浏览器,可绕过 Cloudflare 与反爬检测,可平替 Puppeteer/Playwright。
stagehand
商机 78
用于从网页提取数据并自动化交互的 SDK,支持接入 Claude Code 等。
nanobrowser
商机 78
开源网页自动化 AI Agent,可直接借助已登录的真实浏览器执行日常自动化任务。
SeleniumBase
商机 76
用于网页自动化、测试以及绕过机器人检测的 Python API 工具库。
obscura
商机 73
面向 AI Agent 和网页抓取场景的无头浏览器(Headless Browser)。
deep-research
商机 70
结合搜索引擎、网页抓取与 LLM,针对任意主题开展迭代式深度研究的 AI 助手。
colly
商机 69
设计优雅、功能强大的 Golang 网络爬虫与数据采集框架。
camoufox
商机 66
一款防关联/防检测浏览器。
sakuramedia
商机 65
自建 JAV 媒体库,支持番号识别、元数据刮削、订阅自动下载与多端播放,支持 NAS/Docker 部署。
undetected-chromedriver
商机 63
免配置的定制版 Selenium Chromedriver,可绕过各类反爬和机器人防护系统。
webmagic
商机 59
一款可扩展的 Java 网络爬虫框架。
为 AI Agent 打造的开源网页爬虫与信息提取工具,基于 Apache-2.0 协议开源。
Ghosten-Player
商机 48
支持网盘直连、元数据刮削、IPTV 和文件管理的视频播放器。
scrapy
商机 45
Python 高阶快速网络爬虫与数据抓取框架。
jsoup
商机 45
经典的 Java HTML 解析库,专为 HTML 数据抓取、解析、清洗及防范 XSS 设计。
crawly
商机 43
基于 Elixir 的高级网页爬虫与数据抓取框架。