万能爬虫技能（universal-scraper skill）

给 AI 编程助手（ZCode / Claude Code / Codex 等）安装的引导式网页采集技能。 装好之后，你只要用大白话告诉 AI"想从哪个网站拿什么数据"，它会：

1. 替你踩点网站、判断有没有反爬；

2. 先抓 5 条样本给你过目，字段不对就改；

3. 你说"开抓"才全量采集，随时播报进度；

4. 交付 Excel/CSV + 图表，附数量、抽查结果和注意事项。

安装

把本目录放进 ~/.agents/skills/universal-scraper/，然后跑一次：

bash ~/.agents/skills/universal-scraper/scripts/setup.sh

看到"全部就绪"即可。以后每次用不需要再装。

Related MCP server: pulldown

使用

直接对 AI 说人话，例如：

• "把这个列表页的商品都抓下来，要名称、价格、链接，存桌面"

• "帮我下载这 10 篇论文的 PDF"

• "这个网站要登录，我扫码登录一次之后你接着抓"

• "盯着这个页面，有更新就告诉我"

目录说明

边界（诚实条款）

• 不绕过登录墙、不逆向签名、不破解付费/版权墙——登录站走"你亲手登录一次、工具复用"。

• 个别对自动化全量封锁的站点（如 gov.cn），会明确告诉你并给出"手动另存 + AI 解析"的替代方案。