Happy Oyster AI 是一个开放式世界模型,旨在实现实时世界创建与交互。其核心是基于原生多模态架构,支持文本、语音和图像输入,并具备音视频联合生成能力。与一次性生成一个成品片段的标准 AI 视频工具不同,Happy Oyster 在生成过程中持续接收并响应用户输入,世界会实时演变。模型生成连续且物理一致的环境,光照、重力、物体位置和角色运动在整个会话期间保持连贯。该团队此前发布了 HappyHorse,曾登顶全球文本到视频基准,Happy Oyster 于 2026 年 4 月 16 日揭晓。
主要能力方面,Happy Oyster 以两种模式运行。导演模式类似于实时制作工作室:用户可在生成过程中随时通过文本、语音或图像指令引导场景,切换镜头角度、重新引导角色或重写叙事,无需重新开始,最长可运行三分钟,支持 480p 或 720p。漫游模式将用户置于生成环境中的第一人称视角,可使用 WASD 和镜头控制导航,最长一分钟,480p,世界随用户移动程序化扩展,并保持物体放置、空间物理和环境连续性一致。目标应用包括实时电影前期制作、游戏世界原型设计和互动叙事。
使用方式上,该平台当前提供由 Kling、Veo、Seedream、GPT Image 等引擎驱动的视频、图像和音频生成工具。用户可从文本提示或上传参考图像开始,在几分钟内获得输出。支持 JPEG、PNG、WebP 格式,最大 10MB。图像将作为视频的起始帧。生成流程分为三步:编写提示词或上传参考素材;选择适合任务的 AI 引擎;下载并用于商业用途。生成时间从几秒到几分钟不等,取决于模型和分辨率。付费计划输出无水印,并带有完整商业许可,可用于社交媒体、广告、电影前期制作、产品内容和客户交付。无需 GPU、软件安装、动作捕捉硬件或渲染农场。
平台上可用的 AI 引擎包括:Kling(快手视频引擎,基于 3D VAE 空间建模,视频与音频单管道联合生成,支持文本到视频、图像到视频、最长 15 秒多镜头序列、运动控制角色动画和 AI 数字人唇同步视频);Veo(Google DeepMind 电影级视频生成器,8 秒广播级质量片段,内置 AI 音频,支持首尾帧控制和参考风格视频生成);GPT Image(OpenAI 图像模型,在 LMArena、Design Arena 和 Artificial Analysis Image Arena 上排名第一,注重文本渲染准确性);Flux(Black Forest Labs 生产级图像引擎,1K 和 2K 分辨率,七种宽高比,注重生成速度);Nano Banana(Google 角色一致性图像引擎,文本到图像模式最多接受 8 张参考图像;Nano Banana 2 增加 Google 搜索接地、14 张参考图像支持和 15 种宽高比);Seedream(字节跳动原生 4K 图像引擎,最高 4096×4096 像素,八种宽高比,包括 21:9 超宽;Seedream 5 Lite 应用思维链视觉推理);Runway Gen-4 Aleph(AI 视频编辑,通过文本提示转换现有视频素材,风格迁移、对象修改和场景更改,同时保留原始运动路径)。
此外还有图像模型和文本到语音功能,以及多说话人对话,支持 70 多种语言。平台围绕世界模型愿景构建,提供视频、图像和音频生成工具,同时 Happy Oyster 世界模型正在开发中(暂未正式上线)。新用户可免费开始使用(具体免费政策暂未提供完整信息)。
限制方面,世界模型本身尚未发布,当前平台提供的是现有 AI 引擎的集成工具。世界模型公布的模式规格为:导演模式最长三分钟、480p 或 720p;漫游模式最长一分钟、480p。这些是公布的目标规格,实际可用性暂未提供。具体定价、订阅费用和免费额度细节在提供的资料中暂未完整提供。