Install一键安装
可安装 · 21 个技能该仓库遵循 Agent Skills 规范,一条命令即可装进你的 AI 客户端 —— Claude Code、Codex、Cursor、Copilot、Windsurf 等 18+ 个客户端通用。
npx skills@latest add Cedriccmh/claude-code-skill-scrapling
另有 21 个未列出,运行 npx skills@latest add Cedriccmh/claude-code-skill-scrapling --list 可查看全部。
加 -g 装到全局(所有项目可用)· 加 --agent claude-code 指定客户端 · 加 --yes 跳过交互。安装后重启 AI 客户端即可识别。
在哪使用
这个技能要装在上面这个客户端里才能用。
Overview功能介绍
核心功能
为 AI Agent 提供一套可复用的网页抓取决策与执行流程,解决反爬、登录态、Cloudflare 防护等抓取难题。核心功能要点包括:1.【Fetcher Decision Tree】:按目标站点特征自动选择抓取器(静态请求、浏览器渲染、代理等),避免盲目试错;2.【Cloudflare Bypass】:针对 Cloudflare 防护站点提供绕过策略,提升受保护页面的抓取成功率;3.【Session Login】:支持携带登录会话抓取需鉴权的页面,获取登录后才能看到的内容;4.【Site Pattern Library】:将新站点类型的抓取经验去敏感化后沉淀为站点模式库,后续同类站点直接复用;5.【Cookie Vault】:保存并复用抓取过程中获得的有效 Cookie,减少重复登录与验证;6.【Troubleshooting Guide】:抓取失败时按排查指南定位问题(选择器、反爬、会话失效等),快速恢复抓取;7.【Safety Guardrails】:对抓取行为设置安全边界,避免越权或高风险操作;8.【沉淀经验(必做)】:每次抓取完成后强制检查是否有新 Cookie 或站点模式需要保存,形成经验闭环。
适用场景
需要突破反爬与登录限制的网页数据采集、Cloudflare 防护站点的内容获取、抓取失败后的快速排查与修复、同类站点批量抓取时的经验复用。
适用职业
AI / 算法工程师、数据分析师 / 数据工程师、后端开发工程师、全栈 / 独立开发者。
Rating用户评分
还没有人给这个技能评分。它是全站第一次被评价 —— 你的这一票就是最初的平均分。
Repository仓库信息
| 技能 ID | 1940 |
|---|---|
| 数据来源 | GitHub |
| 仓库全名 | Cedriccmh/claude-code-skill-scrapling |
| 所属分类 | AI 与智能体技能 / 网页抓取与数据采集 |
| 主要语言 | Python |
| 开源协议 | MIT License |
| 默认分支 | master |
| GitHub 仓库 ID | 1178495230 |
| 节点 ID | R_kgDORj5o_g |
| 榜单排名 | #1413 (来源榜单内名次) |
| 全站热度排名 | #1604 (按 Stars 实时计算,共 5833 条) |
GrowthStar / Fork 增长
每天一次快照,记录 Star 与 Fork 的变化过程
- 当前447
- 上一记录点 · 09-29 436
- 较上一记录点 +11
- 共 2 个记录点 跨度 12 天
- 当前57
- 上一记录点 · 09-29 56
- 较上一记录点 +1
- 共 2 个记录点 跨度 12 天
Timeline时间线
仓库创建2026-03-11 04:32:218 个月前
资料最后更新2026-10-26 12:13:5621 天前
最近一次代码推送2026-06-18 02:39:345 个月前
Commit更新记录
版本【latest】由提交人 Cedriccmh 提交,主要更新类型为:功能特性新增与扩展。提交说明:docs: add safety and upstream alignment guidance。为项目引入了新的能力与模块支持。