Skip to main content
Kling 2.6 Motion Control 是由快手开发的专门多模态模型,能够实现从参考视频到角色图像的精准动作迁移。通过结合 参考图像(你的角色)和 动作参考视频(动作来源),AI 会将视频中的动作、表情和节奏应用到你的静态角色上,同时保持角色的身份特征。 与标准的图生视频不同,Motion Control 使用参考视频作为动作蓝图,而不是从文本提示词猜测动作。该模型就像一个数字木偶师,从参考视频中提取编舞动作,并以电影级的保真度应用到你的角色上。

Kling 2.6 运动控制擅长什么

  • 复杂运动处理:在保持角色连贯性的同时,执行舞蹈、武术或体育运动等复杂动作序列。该模型理解重心转移和动量,能够呈现逼真的物理冲击效果。
  • 精准的手部和手指表现:手部一直是 AI 视频的传统短板。此功能通过模仿真实视频素材,专门改善手指关节活动和手部动作,非常适合演示和示范场景。
  • 场景与环境灵活性:使用文本提示词更改环境,而角色继续执行其参考动作。你不必局限于参考视频的背景。
  • 高级相机与透视模式:通过不同的方向模式,精细控制相机如何解读你的参考内容。
  • 支持 30 秒单次生成:单次生成即可输出长达 30 秒的连续动作,从而在叙事场景中呈现不间断的角色动作。
使用 API 节点需要保证你已经正常登录,并在受许可的网络环境下使用,请参考API 节点总览部分文档来了解使用 API 节点的具体使用要求。
请确保你的 ComfyUI 已经更新。本指南里的工作流可以在工作流模板中找到。如果找不到,可能是 ComfyUI 没有更新。如果加载工作流时有节点缺失,可能原因有:
  1. 你用的不是最新版(每夜版)。
  2. 启动时有些节点导入失败。

角色朝向模式

character_orientation 参数决定模型如何解读空间信息并限制输出时长:

模型级别

Kling2.6:动作控制

通过同步动作控制,将参考视频中精确的角色动作和表情应用到角色图像上。

在 Comfy Cloud 上运行

在 Comfy Cloud 中打开

下载工作流

下载 JSON,或在模板库中搜索“Kling2.6:动作控制”
输入素材 请将这些文件上传到对应的 LoadImageLoadVideo 节点:

streetwear_fox.jpg

LoadImage 节点 11 · streetwear_fox.jpg

street_dancer.mp4

LoadVideo 节点 2 · street_dancer.mp4

输入依赖项

  • 图像格式:JPG、PNG、WEBP、GIF、AVIF(最大 10MB)
  • 视频格式:MP4、MOV、WEBM、M4V、GIF(最大 100MB)
  • 视频时长:3-30 秒,具体取决于方向模式
  • 最小分辨率:宽度和高度均为 720px
  • 主体可见性:角色必须清晰显示头部、肩部和躯干

获得更好效果的技巧

  • 匹配宽高比:确保角色图像和参考视频具有相似的宽高比(例如,均为 16:9 或均为 9:16),以避免尴尬的拉伸或裁剪。
  • 干净的背景:使用背景简单或静止的参考视频,以获得最佳动作提取效果。演员轮廓清晰的高对比度视频效果最佳。
  • 清晰的角色角度:如果参考视频中有旋转动作,请使用能更好处理旋转的 3D 风格角色或真实照片。平面 2D 卡通可能难以处理背面视角。
  • 肢体可见:确保角色的肢体在来源图像中可见。如果角色双手插在口袋里,但动作需要挥手,AI 会凭空生成手部,通常会导致伪影。
  • 留出呼吸空间:在主体周围留出负空间。如果角色要跳舞或将手臂大幅展开,他们需要画面内的空间以避免被裁剪。
  • 构图对齐:匹配图像与参考视频之间的构图。面部动画使用特写参考,行走或舞蹈序列使用全身参考。