UniVideo 是一个 AI 视频模型,主打“统一理解、生成与编辑”的视频工作流。它由先进的多模态大语言模型(MLLM)和扩散变换器(Diffusion Transformers)驱动,旨在把视频理解、视频生成和视频编辑整合到一个无缝流程中,减少在多个工具之间切换的需要。
用途方面,UniVideo 面向需要视频创作的个人创作者、专业影视制作团队、游戏开发者以及社交媒体内容制作者。它适合将创意想法转化为具有电影感的视频,也适合在已有素材上进行编辑和修改。
主要能力包括:
- 统一框架:在单一工作流中集成理解、生成和编辑。
- 双流架构:以双流架构处理视觉数据,融合生成与编辑能力。
- 角色一致性:解决角色在不同场景和镜头中“身份漂移”的问题,适合剧集式内容、动画系列、广告和叙事故事。
- 参考图像处理:上传参考图像来引导 AI,确保特定物体和环境被精确复现。
- Hy-motion 技术:提供流畅、真实、符合物理规律的运动表现,模拟现实物理,避免恐怖谷效应,并支持包含多个运动部件的复杂动态场景。
- 视觉提示理解:通过先进 MLLM 架构解释复杂视觉线索,理解情绪、灯光和构图,可将概念草图或情绪板转化为完整的视频片段。
- 上下文编辑:基于图像提示智能替换或修改视频中的特定片段,而无需重新渲染整个片段。
- 自然语言控制:使用自然语言或视觉指令直接修改视频内容,无需复杂设置或节点。
使用方式方面,官网提供了 AI Video Generator 入口,用户可以将想法转化为视频。具体操作步骤、界面流程和详细使用教程暂未提供。
适用场景包括:
- 角色一致性:制作剧集式内容,让角色在不同场景中保持一致外观。
- 动态物体替换:用一张参考照片替换或添加现有素材中的物体,例如后期无缝植入产品或在场景中更新道具,无需重拍。
- AI 电影摄影:为游戏开发者和电影制作人生成高质量预告片和过场动画,在制作前以电影级保真度可视化剧本和分镜。
- 视觉提示:将概念草图或情绪板转化为完整的视频序列,加速预可视化过程。
限制与收费:官网提到提供 Starter、Pro 和 Ultimate 三种方案,分别包含 700 credits/月(年 8400 credits)、2000 credits/月(年 24000 credits)和 4000 credits/月(年 48000 credits)。更具体的价格、计费规则、免费试用情况以及平台支持情况暂未提供。