🎬 AI Video Generation — Pro Pack on RunComfy

🎬 顶尖视频模型一键调度,AI 制片新范式

智能路由 RunComfy 全量视频模型,一键调用 HappyHorse、Veo、Kling 等 10+ 顶尖引擎,支持 T2V/I2V/视频延长与原生音频生成。

收藏
7k
安装
3.2k
版本
0.1.0
CLS 安全性认证2026-08-04
点击查看完整报告 >

使用说明

核心用法

本 Skill 是 RunComfy 视频生成模型的智能路由层,通过本地 CLI 统一调度 10+ 行业顶尖视频模型。支持三大生成模式:

文本生成视频 (T2V):默认调用 HappyHorse 1.0(Artificial Analysis Video Arena #1),原生 1080p 同步音频生成;可选 Wan 2-7 实现特定语音对口型,或 Seedance v2 Pro 进行多模态 cinematic 创作(支持 9 图/3 视频/3 音频参考)。

图像生成视频 (I2V):HappyHorse 1.0 I2V 为默认,擅长人物动效与音频描述;Veo 3-1 主打物理精确运动与物体恒常性;Kling 3.0 提供 4K 多镜头角色一致性。

视频延长:Veo 3-1 Extend 支持运动/光照/身份连贯的片段续作。

调用范式标准化为 runcomfy run <vendor>/<model>/<endpoint> --input '{...}',Skill 自动匹配用户意图(质量优先/速度优先/成本敏感/特定功能如 lip-sync)至最优模型。

显著优点

  • 模型覆盖全面:集成 Arena 榜首 HappyHorse、Google Veo 3-1、Kling 3.0 4K、ByteDance Seedance v2/Dreamina、MiniMax Hailuo、Wan 2-7 等全量商业级模型,避免多平台账号碎片化。
  • 意图智能路由:内置决策树自动选择模型——需原生音频选 HappyHorse,需物理精确旋转选 Veo,需 4K 角色叙事选 Kling 3.0,需语音对口型选 Wan 2-7,大幅降低模型选择认知负担。
  • 统一 CLI 工作流:单条命令完成鉴权、提交、轮询、下载,输出目录可控,支持 CI/CD 集成。
  • 提示词工程内置:每模型附带经 RunComfy 验证的 prompting 模式(如 Seedance 的 lens language、Veo 的 "no other motion" 约束),降低试错成本。
  • 原生音频能力:HappyHorse 1.0 与 Seedance v2 支持 in-pass 音频生成,省去独立 Foley 制作步骤。

潜在缺点与局限性

  • 成本分层显著:Kling 3.0 4K、Seedance v2 Pro 等顶级模型单位成本较高,需显式降级至 Pro/Standard/Fast 档位控制预算。
  • 音频对口型局限:Wan 2-7 虽支持 audio_url 驱动唇同步,但需用户自备语音文件,无法像 HappyHorse 那样自动生成匹配音频。
  • 物理 vs. 美学权衡:Veo 3-1 物理精确但艺术表现力弱于 Seedance;Seedance cinematic 风格强但计算开销大,无免费档位。
  • 视频延长依赖同源:Extend 功能目前仅限 Veo 3-1 生态,其他模型(如 Kling、HappyHorse)尚不支持跨模型延长。
  • CLI 依赖 Node/npm:需全局安装 @runcomfy/cli,Windows/Linux/macOS 环境需预配置 Node 运行时。

适合人群

  • 创意广告与社媒运营:需快速产出 9:16/16:9 多比例短视频,带原生音频,迭代频繁。
  • 影视预演与概念设计:利用 Seedance v2 多模态参考与 Kling 多镜头一致性,快速验证分镜。
  • 电商与产品可视化:Veo 3-1 的物理精确旋转、物体恒常性适合产品 360° 展示。
  • AI 工作流集成者:通过标准化 JSON 输入与 CLI 退出码,嵌入自动化管线(如批量生成、A/B 测试)。
  • 技术型创作者:熟悉命令行,愿以代码化方式控制视频生成参数(seed、aspect_ratio、camera language)。

常规风险

  • Token 安全RUNCOMFY_TOKEN 以 0600 权限写入 ~/.config/runcomfy/token.json,CI 场景需通过环境变量注入,禁止硬编码或日志输出。
  • 间接提示注入:参考图/音频/视频 URL 内容可能被恶意嵌入指令(图像内文字、EXIF 元数据、音频水印),需确保素材来源可信或由用户显式提供。
  • 生成内容合规:AI 视频可能产生虚假人物、不当场景或版权敏感元素,商用前需人工审核,遵守平台 AUP 与地区法规。
  • 成本失控:4K 档位与多模态参考叠加可能产生高额费用,建议先用 Fast/Standard 档位验证提示词。
  • 依赖服务可用性:RunComfy 为第三方托管平台,模型 API 变更、速率限制或区域性故障可能影响生成任务。

安全解读

核心用法

该技能作为RunComfy视频模型生态的智能路由器,通过单一CLI命令调用行业领先的AI视频生成引擎。用户只需描述意图(如"生成带音频的社交媒体竖屏视频"或"制作产品360度旋转展示"),技能即自动匹配最优模型并生成精确的执行指令。

三大核心场景覆盖

  • 文生视频(t2v):支持HappyHorse 1.0(Arena榜首,原生同步音频)、Wan 2-7(开源权重,音频驱动口型同步)、Seedance v2(多模态电影级,支持9图3视频3音频参考)、Kling 3.0 4K(多镜头角色一致性)等
  • 图生视频(i2v):HappyHorse 1.0 I2V(默认,音频内嵌)、Veo 3-1(物理精确运动)、Kling 3.0三档画质(4K/Pro/Standard)、Hailuo 2-3(真实人物自然运动)、Dreamina 3-0(插画风格)
  • 视频延展:Veo 3-1 Extend支持连续叙事,突破单段时长限制

调用模式:通过runcomfy run <vendor>/<model>/<endpoint>标准接口,JSON参数传递提示词、时长、比例等,CLI自动处理轮询与下载。

显著优点

模型生态全面:一次性接入全球顶尖视频模型——包括Artificial Analysis Video Arena #1的HappyHorse、Google DeepMind的Veo 3-1、字节跳动的Seedance/Dreamina、快手的Kling、阿里Wan等,避免多平台账号管理的碎片化。

智能意图匹配:内置决策矩阵,根据"是否需要音频""是否物理精确""是否4K交付""成本敏感度"等维度自动推荐模型,降低选择门槛。例如检测到audio_url参数自动路由Wan 2-7实现口型同步,检测到"rotates 180 degrees"物理描述则优先Veo 3-1。

提示词工程内置:每款模型附带经过验证的提示词范式——HappyHorse强调"动词优先、音频内嵌",Seedance支持镜头语言("35mm anamorphic""rack focus"),Veo要求物理描述精确到角度,大幅降低试错成本。

多模态原生支持:Seedance v2 Pro可同时注入9张参考图、3段参考视频、3段参考音频,实现角色+场景+配乐的多元素精准控制,超越单一文本提示的表达能力。

潜在缺点与局限性

成本分层复杂:Kling 3.0提供4K/Pro/Standard三档,Seedance分Pro/Fast,Veo分标准/快速版,初次使用需理解成本-质量权衡曲线。技能虽提供选型建议,但最终成本仍取决于具体调用模型和时长。

功能边界需明确:部分能力存在模型独占性——如音频内嵌仅HappyHorse原生支持,口型同步需Wan 2-7的audio_url,物理精确运动唯Veo擅长,延长视频仅Veo支持。用户若未明确需求,可能错过最优解。

CLI环境依赖:需预装Node.js环境、全局安装@runcomfy/cli包、配置RUNCOMFY_TOKEN,对非技术用户存在初始设置门槛。Windows/Linux/macOS系统行为可能存在细微差异。

生成可控性边界:AI视频生成仍存在随机性,即使相同seed也可能因模型更新产生差异。多镜头叙事依赖提示词显式描述转场("Then the camera cuts to..."),隐性要求用户具备基础视听语言知识。

适合的目标群体

  • 广告与社交媒体创作者:快速产出带音频的9:16竖屏内容,HappyHorse原生音频省去后期配乐步骤
  • 电商产品团队:Veo 3-1的物理精确旋转、物体恒常性适合产品360°展示,避免形变穿帮
  • 影视预演与概念设计师:Seedance v2的电影级镜头语言、Kling的多镜头角色一致性,支撑广告分镜预演
  • AI视频技术研究者:Wan 2-7开源权重可对接LoRA微调生态,进行深度定制
  • 多平台内容运营者:单一CLI统一管理HappyHorse、Kling、Veo等多平台能力,降低账号切换成本

常规使用风险

性能与延迟:视频生成属于计算密集型任务,单次调用通常耗时30秒至数分钟。技能虽支持--output-dir异步下载,但长队列期间CLI持续轮询可能占用本地进程。Veo 3-1 Fast/Seedance v2 Fast等加速档位可降低等待,但质量有妥协。

依赖项风险:CLI依赖Node.js运行时,若版本过旧(<16)可能引发兼容性问题。RUNCOMFY_TOKEN需定期轮换,长期未使用的token可能失效导致认证错误(exit code 77)。

成本累积风险:4K模型(Kling 3.0 4K)与标准档存在数倍价差,批量测试时若未注意模型选择可能造成意外账单。建议先用Standard/Fast档验证提示词,再切Pro/4K档最终交付。

内容合规风险:RunComfy作为平台执行自身内容政策,生成内容需符合服务条款。用户应知晓间接提示注入风险——上传的参考图像、音频可能包含隐藏指令影响生成结果,建议仅使用可信来源素材。

网络稳定性:模型API与结果下载依赖*.runcomfy.net域名,企业防火墙若限制境外域名需提前配置白名单。大文件下载(单视频可达数百MB)在弱网环境可能超时(exit code 75)。

🎬 AI Video Generation — Pro Pack on RunComfy 内容

手动下载zip · 8.6 kB
skill-card.mdtext/markdown
请选择文件