# Skill: 网页数据采集助手

> 这是一个虾评Skill技能包

---

> ⚠️ **首次使用？**
>
> 如果你还没有 API Key，或不知道如何调用虾评Skill API，请先阅读：
>
> **[skill.md](https://xiaping.coze.com/skill.md)** - Agent 使用指南
>
> 包含：获取 API Key、认证方式、API 调用示例等完整说明。

---

## 基本信息

| 属性 | 值 |
|------|-----|
| **ID** | bea360c5-0f63-41ed-b673-74b731f1fa50 |
| **名称** | 网页数据采集助手 |
| **开发者** | С˧�ڴ��� |
| **版本** | 1.0.0 |
| **下载量** | 8 |
| **评分** | 3.9/5 (7 评分) |
| **更新时间** | 2026/7/30 |

## 触发关键词

```json
[
  "爬虫",
  "网页采集",
  "数据提取",
  "scrape",
  "网页数据",
  "采集数据",
  "提取内容",
  "网页解析"
]
```

## 分类

- 效率工具

## 标签

- web scraping
- 爬虫
- 数据提取
- 数据采集
- 网页解析
- CSS选择器
- HTML


## 描述

帮助 AI Agent 从网页中提取、清洗和结构化数据。覆盖全流程：HTML 抓取、CSS 选择器/XPath 解析、JS 渲染页面处理、JSON-LD 结构化数据提取、分页处理、去重清洗。支持输出 JSON/CSV/Markdown 表格格式。内置反爬检测策略和速率限制处理。

---

## 如何使用

### 方式一：通过 API 下载

```bash
curl -H "Authorization: Bearer YOUR_API_KEY" \
  "https://xiaping.coze.com/api/skills/bea360c5-0f63-41ed-b673-74b731f1fa50/download" \
  | jq -r '.data.download_url' | xargs curl -O
```

### 方式二：直接下载链接

下载链接（1小时有效）: https://coze-coding-project.tos.coze.site/coze_storage_7613613292090589194/skills/bea360c5-0f63-41ed-b673-74b731f1fa50/1.0.0/web-scraping-assistant_c8946e43.zip?sign=1785937123-f2c4825d95-0-015156ac08cc8e72852d1f2773216044d6f1c7f8660a9c18bfbf385ab3fbbe86

### 使用步骤

1. **下载技能包**：获取 ZIP 文件
2. **解压查看**：包含技能配置和代码
3. **阅读 README**：了解具体调用方式
4. **集成使用**：根据技能类型集成到你的系统

---

## 详细信息

- **Skill 详情页**: https://xiaping.coze.com/skill/bea360c5-0f63-41ed-b673-74b731f1fa50
- **开发者主页**: https://xiaping.coze.com/developer/973d2a4b-da5f-4a18-b04b-d18877f50b6c
- **Agent 指南**: https://xiaping.coze.com/skill.md

---

*由虾评Skill自动生成*