SkillPedia Skills Encyclopedia
中文 EN
今日更新 2026-11-17 UTC

今天还没有新提交

查看更新动态

claude-code-skill-scraplingCedriccmh/claude-code-skill-scrapling

为 AI Agent 提供一套可复用的网页抓取决策与执行流程,解决反爬、登录态、Cloudflare 防护等抓取难题。核心功能要点包括:1.【Fetcher Decision Tree】:按目标站点特征自动选择抓取器(静态请求、浏览器渲染、…

还没有人评分 我要评分
Stars447
Forks57
Watchers447
Open Issues2

Install一键安装

可安装 · 21 个技能

该仓库遵循 Agent Skills 规范,一条命令即可装进你的 AI 客户端 —— Claude Code、Codex、Cursor、Copilot、Windsurf 等 18+ 个客户端通用。

npx skills@latest add Cedriccmh/claude-code-skill-scrapling

另有 21 个未列出,运行 npx skills@latest add Cedriccmh/claude-code-skill-scrapling --list 可查看全部。

加 -g 装到全局(所有项目可用)· 加 --agent claude-code 指定客户端 · 加 --yes 跳过交互。安装后重启 AI 客户端即可识别。

在哪使用

这个技能要装在上面这个客户端里才能用。

Overview功能介绍

核心功能

为 AI Agent 提供一套可复用的网页抓取决策与执行流程,解决反爬、登录态、Cloudflare 防护等抓取难题。核心功能要点包括:1.【Fetcher Decision Tree】:按目标站点特征自动选择抓取器(静态请求、浏览器渲染、代理等),避免盲目试错;2.【Cloudflare Bypass】:针对 Cloudflare 防护站点提供绕过策略,提升受保护页面的抓取成功率;3.【Session Login】:支持携带登录会话抓取需鉴权的页面,获取登录后才能看到的内容;4.【Site Pattern Library】:将新站点类型的抓取经验去敏感化后沉淀为站点模式库,后续同类站点直接复用;5.【Cookie Vault】:保存并复用抓取过程中获得的有效 Cookie,减少重复登录与验证;6.【Troubleshooting Guide】:抓取失败时按排查指南定位问题(选择器、反爬、会话失效等),快速恢复抓取;7.【Safety Guardrails】:对抓取行为设置安全边界,避免越权或高风险操作;8.【沉淀经验(必做)】:每次抓取完成后强制检查是否有新 Cookie 或站点模式需要保存,形成经验闭环。

适用场景

需要突破反爬与登录限制的网页数据采集、Cloudflare 防护站点的内容获取、抓取失败后的快速排查与修复、同类站点批量抓取时的经验复用。

适用职业

AI / 算法工程师、数据分析师 / 数据工程师、后端开发工程师、全栈 / 独立开发者。

Rating用户评分

还没有人给这个技能评分。它是全站第一次被评价 —— 你的这一票就是最初的平均分。

给这个技能打分

填了才会进入下面的「按职业平均」。

每个 IP 只能投一票,投出后不能修改,请一次选准。不收集账号,也不用登录。

Repository仓库信息

技能 ID1940
数据来源GitHub
仓库全名Cedriccmh/claude-code-skill-scrapling
所属分类AI 与智能体技能 / 网页抓取与数据采集
主要语言Python
开源协议MIT License
默认分支master
GitHub 仓库 ID1178495230
节点 IDR_kgDORj5o_g
榜单排名#1413 (来源榜单内名次)
全站热度排名#1604 (按 Stars 实时计算,共 5833 条)

GrowthStar / Fork 增长

每天一次快照,记录 Star 与 Fork 的变化过程

02004006002026-09-292026-10-112026-09-29 · 4362026-10-11 · 447
  • 当前447
  • 上一记录点 · 09-29 436
  • 较上一记录点 +11
  • 共 2 个记录点 跨度 12 天
02040602026-09-292026-10-112026-09-29 · 562026-10-11 · 57
  • 当前57
  • 上一记录点 · 09-29 56
  • 较上一记录点 +1
  • 共 2 个记录点 跨度 12 天

Timeline时间线

仓库创建2026-03-11 04:32:218 个月前
资料最后更新2026-10-26 12:13:5621 天前
最近一次代码推送2026-06-18 02:39:345 个月前

Commit更新记录

版本【latest】由提交人 Cedriccmh 提交,主要更新类型为:功能特性新增与扩展。提交说明:docs: add safety and upstream alignment guidance。为项目引入了新的能力与模块支持。

85dd89f vlatest Cedriccmh 2026-06-18