Apify

🕷️ 网页抓取自动化 · 安全托管

通过 ClawLink 安全代理连接 Apify 平台,实现网页抓取 Actor 的编排、数据集管理与自动化工作流,适合开发者和数据工程师构建可靠的数据管道。

收藏
8.7k
安装
2.1k
版本
1.0.5
CLS 安全扫描中
预计需要 3 分钟...

使用说明

核心用法

Apify Actors 技能通过 ClawLink 托管网关接入 Apify API,用户无需直接配置 API 密钥即可完成身份验证。核心能力围绕三大场景展开:

1. Actor 编排与执行

  • 列出账户下的 Actors 及其版本 (apify_acts_get, apify_act_versions_get)
  • 同步/异步执行 Actor (apify_run_actor_sync, apify_run_actor)
  • 获取运行日志与数据集输出 (apify_get_log, apify_get_actor_last_run_dataset_items)
  • 中止或删除运行记录 (apify_actor_run_abort_post, apify_actor_run_delete)

2. 任务与数据管理

  • 创建可复用的 Task 配置 (apify_create_task)
  • 管理 Datasets、Key-Value Stores、Request Queues(支持分页读取、批量写入、删除)
  • 设置定时 Schedule 实现自动化调度 (apify_schedules_post)

3. 安全代理工作流
所有调用均通过 ClawLink 代理完成,API 密钥由 ClawLink 安全注入,用户侧零配置。采用"读取优先、写入确认"的双层模式:

  • 读取操作(List/Get/Search)可直接执行
  • 写入操作(Create/Update/Delete/Run)必须先调用 clawlink_describe_tool 获取参数说明,再经 clawlink_preview_tool 预览变更,最终用户确认后执行

显著优点

| 维度 | 优势 |
|------|------|
| **认证安全** | ClawLink 托管 OAuth/API Key,避免密钥泄露到聊天上下文 |
| **零配置启动** | 3 步完成插件安装、设备配对、平台连接,无需手动生成 Apify Token |
| **细粒度管控** | 28+ 个专用工具覆盖 Actor 全生命周期,支持精确到资源级别的操作 |
| **成本可控** | 同步运行 300 秒超时保护,运行前强制确认防止误触计费 |
| **生态兼容** | 直接复用 Apify Store 数千个现成 Actor(如 `apify/web-scraper`) |

潜在缺点与局限性

1. 代理依赖风险:ClawLink 为第三方托管服务,若其服务不可用则整个技能失效;用户无法直接指定自有 Apify 代理或自建网关。
2. 调试透明度有限:错误信息需经过 ClawLink 转发,复杂网络问题的诊断链路较长。

3. 同步运行限制:300 秒超时硬性约束,大规模抓取必须采用异步模式+轮询数据集,交互复杂度提升。

4. 数据滞留:Dataset/Log 保留策略受 Apify 平台约束(日志仅保留 trailing 5M 字符),非 ClawLink 可控。

5. 学习成本:工具命名空间较大(如 apify_actor_task_run_sync_get vs apify_run_actor_sync),需熟悉 Apify 资源模型才能高效调用。

适合人群

  • 数据工程师:需自动化 ETL 管道,定时抓取网页数据入库
  • 开发者/爬虫工程师:快速原型验证,利用 Apify Actor 市场复用成熟抓取逻辑
  • 产品经理/分析师:低代码获取结构化竞品数据,无需编写抓取代码
  • 运维人员:监控 Actor 运行状态、日志审计、成本追踪

常规风险

| 风险类型 | 说明 | 缓解措施 |
|----------|------|----------|
| **误操作删除** | `delete` 类操作不可逆 | 强制 preview + 用户二次确认 |
| **计费失控** | Actor 运行按计算单元计费 | 执行前显式确认,优先使用 `describe_tool` 查看预估消耗 |
| **数据隐私** | 抓取内容暂存于 Apify 云 | 敏感数据建议配置加密 Dataset 或缩短保留周期 |
| **供应链安全** | ClawLink 插件及网关的安全性 | 需信任 ClawLink 的密钥托管机制;建议定期审计连接状态 |

> 来源可信度:T2(官方 Apify API 经 ClawLink 代理,ClawLink 为第三方集成商,非 Apify 官方直连)
> 安全等级:A(密钥托管隔离、写入确认机制完善,但存在第三方代理信任假设)

Apify 内容

手动下载zip · 5.4 kB
skill-card.mdtext/markdown
请选择文件