Apify

🕷️ 自动化网页抓取与数据管道

通过 ClawLink 集成 Apify API,实现 Actor 运行、数据集管理、任务调度等自动化网页抓取工作流,适合数据工程师和开发者快速构建数据管道。

收藏
10k
安装
2.1k
版本
1.0.1
CLS 安全扫描中
预计需要 3 分钟...

使用说明

核心用法

apify-actors 是 OpenClaw 平台的专业级网页抓取与数据管道管理技能,通过 ClawLink 托管认证层与 Apify API 深度集成。用户无需手动配置 API 密钥,即可完成 Actor 发现、运行监控、数据集导出、任务调度等全生命周期操作。

主要功能模块

| 模块 | 能力 |
|------|------|
| Actor 管理 | 浏览、创建、删除 Actors,管理版本 |
| 运行控制 | 同步/异步运行 Actor,中止运行,查看日志 |
| 数据集操作 | 检索、存储、删除结构化数据 |
| 键值存储 | 管理非结构化配置与中间数据 |
| 任务队列 | 编排请求队列,实现复杂抓取工作流 |
| 定时调度 | 创建周期性执行计划 |

显著优点

  • 零配置认证:ClawLink 托管 API 密钥,消除凭证泄露风险
  • 读写分离安全模型:读取操作即时执行,写入操作强制确认
  • 实时工具发现:通过 clawlink_list_tools 获取动态 catalog,避免过时文档
  • 灵活执行模式:支持 300 秒超时同步运行(快速验证)与异步运行(大规模作业)

潜在局限

  • 依赖 ClawLink 第三方托管层,若服务中断则功能不可用
  • 同步运行 300 秒硬限制,超大数据集需额外分页逻辑
  • 日志仅保留尾部 500 万字符,长作业调试信息可能截断
  • 写入操作需用户多步确认,批量自动化场景效率受限

适合人群

  • 数据工程师:构建可维护的数据抓取管道
  • 爬虫开发者:快速迭代 Actor 逻辑并验证输出
  • 分析师:按需提取结构化数据无需编写代码
  • DevOps:监控运行状态,管理资源配额

常规风险

  • 成本风险:Actor 运行消耗 Apify 平台计算额度,误操作可能导致意外扣费
  • 数据残留:删除 Actor 不会级联清理关联数据集,需主动管理存储
  • 并发竞争:异步运行状态下需轮询数据集状态,可能读到不完整数据
  • 第三方依赖:ClawLink 成为单点故障,建议定期验证连接状态

使用建议

首次使用按「安装→配对→连接」三步完成授权,优先使用 clawlink_describe_tool 理解陌生工具参数,任何写入操作前调用 clawlink_preview_tool 预览影响范围。

Apify 内容

手动下载zip · 5.7 kB
skill-card.mdtext/markdown
请选择文件