AgentMarketMCP / SKILL 资产档案馆

目录 / 浏览器自动化 / 自适应网页抓取官

SKILL 未评级 已上架

自适应网页抓取官

自适应网页抓取与结构化采集技能:基于 Scrapling 框架完成从单页请求到大规模并发爬取的全链路作业,内置反爬绕过(Cloudflare Turnstile、JavaScript 挑战)、隐身无头浏览器、可自动重定位元素的自适应解析器、Spider 并发爬取(代理轮换、断点续爬、多会话混用)与完整 JavaScript 渲染,同时提供 CLI 命令与 Python API 两种调用方式,输出可直接进入 RAG 流水线的 Markdown,不依赖任何第三方求解器。当用户要求抓取网页、采集页面正文、爬取整站、绕过反爬拦截、解析 JavaScript 动态渲染页面、编写爬虫脚本,或既有抓取工具返回空内容、被 Cloudflare 拦截、web_fetch 失败时使用。触发词:抓取网页、爬虫、爬取网站、绕过反爬、反爬绕过、隐身浏览器、Cloudflare 绕过、选择器自适应、并发爬取、网页转 Markdown、scrape、crawl、crawler、anti-bot bypass、stealth browser、adaptive parsing、spider、dynamic rendering。不适用边界:不用于需要登录、验证码、付费墙或未获授权访问的站点,不用于违法采集与个人敏感信息抓取,也不做站点离线渲染、图片 OCR 与本地文件格式转换。

模型生成摘要(rules/v1 · 2026-10-02 23:02):自适应网页抓取与结构化采集技能:基于 Scrapling 框架完成从单页请求到大规模并发爬取的全链路作业,内置反爬绕过(Cloudflare Turnstile、JavaScript 挑战)、隐身无头浏览器、可自动重定位元素的自适应解析器、…
这是模型对公开材料的总结,不是官方声明,请以原链内容为准。

存档时间线

版本存档时间内容哈希内容
v12026-10-03 07:01b8c4693d 可取

版本索引永久保留;内容副本只保留最新 1 份,更早版本仅留索引与哈希(存档时间线的证据链不会因此断裂)。

下载存档内容副本

相关资产

SKILL

remote-chrome

启动、停止、重启或检查远程 Chrome 浏览器服务的状态,使用 Xvfb、x11vnc 和 noVNC

无头浏览器
原作者:kelvinschen 来源:腾讯 SkillHub、DeepSkill Market 许可:MIT-0 含内容副本 · 可下载 存档:v2 · 2026-11-01 hash 496df9bb
SKILL

agentbrowser

一个基于 Rust 的快速无头浏览器自动化 CLI,支持 Node

无头浏览器
原作者:kendrick-lu 来源:腾讯 SkillHub、DeepSkill Market 许可:MIT-0 含内容副本 · 可下载 存档:v2 · 2026-11-01 hash 3a6e43d8
SKILL

tekin

一个基于 Rust 的快速无头浏览器自动化 CLI,支持 Node

无头浏览器
原作者:gwqwghksvq-sketch 来源:腾讯 SkillHub、DeepSkill Market 许可:未标注 含内容副本 · 可下载 存档:v2 · 2026-11-01 hash 98e48f63
SKILL

浏览器自动化测试与采集合规实践

浏览器自动化实践指南:UI 自动化测试怎么写才不脆弱、数据采集怎么做才合规、无头浏览器怎么调才稳定

无头浏览器
原作者:u_441b0ae9 来源:腾讯 SkillHub 许可:未标注 含内容副本 · 可下载 存档:v3 · 2026-10-25 hash 27acf7b9
SKILL

gstack

gstack 是一个用于 QA 测试和站点功能验证的快速无头浏览器工具

无头浏览器截图
原作者:garrytan 来源:GitHub、DeepSkill Market 许可:MIT 含内容副本 · 可下载 存档:v1 · 2026-10-31 hash 1efd6bc1
SKILL

geo-report-pdf

使用 pandoc 和 Chrome 无头浏览器,将 GEO-AUDIT-REPORT

PDF 处理无头浏览器
原作者:zubair-trabzada 来源:skills.sh、DeepSkill Market 许可:MIT-0 含内容副本 · 可下载 存档:v1 · 2026-10-29 hash 4b288d19
纠错与举报(发现条目失效、署名有误或涉及侵权?)
提交举报 / 纠错

侵权举报经核验成立后,我们会即时下线该条目并删除已存的内容副本。