跳到正文
原文
Google DeepMind·· 2026-05-18精选AI 评分80

Google DeepMind 发布 Gemini Omni 系列首个模型 Gemini Omni Flash

Introducing Gemini Omni

AI 导读

Google DeepMind 发布 Gemini Omni 系列首个模型 Gemini Omni Flash,可组合图像、音频、视频和文本输入生成高质量视频,并通过自然语言对话编辑视频。

推荐理由

Gemini 首个 Omni 系列模型发布,多模态输入加对话式视频编辑的入口值得关注。

正文 · AI 翻译

Gemini Omni Flash 是一款能够从任意输入创建任何内容的模型——从视频开始。



去年,Nano Banana 将 Gemini 的智能带入了图像生成与编辑领域。自那以后,它已帮助数百万人修复老照片、依据草图进行设计,并以以往不可能的方式将想法可视化。从一开始,我们就将 Gemini 打造为原生多模态模型,而现在我们迈出了下一步。

我们推出 Gemini Omni,在这里,Gemini 的推理能力与创造能力相结合。Omni 是我们的新模型,能够从任意输入创建任何内容——从视频开始。借助 Omni,你可以将图像、音频、视频和文本组合为输入,生成以 Gemini 的现实世界知识为基础的高质量视频。你还可以通过对话轻松编辑视频。

今天,我们面向 Gemini 应用、Google Flow 和 YouTube Shorts 推出 Omni 系列的首个模型:Gemini Omni Flash。未来我们将支持图像和音频等输出模态。以下是 Omni 的一些特别之处:

通过对话编辑你的视频

Gemini Omni 为你提供了一种更简单的视频编辑方式——使用自然语言。每条指令都建立在上一条之上。你的角色保持一致,物理效果稳定,场景会记住之前发生的内容。

改变你周围的世界。 改变特定的事物,或者改变一切。你的视频将成为某种你原本无法亲自拍摄之物的起点。

提示词:让雕塑由泡泡构成。

重新构想动作。 拿一段你拍摄的视频,只需让 Omni 改变正在发生的事。编辑动作、添加新角色或物体,或将某个瞬间转变为意想不到的内容。

在多轮编辑中不断完善你的视频。 改变环境、角度、风格甚至具体细节,同时始终不丢失原始场景的脉络。滑动轮播图,看看这些编辑如何层层递进。

将想法变为现实,以 Gemini 的世界知识为基础

Gemini Omni 不只是构建看起来真实的场景,它还会推理接下来应该发生什么。它将直觉性的物理理解与 Gemini 在历史、科学和文化背景方面的知识相结合,弥合了从照片级真实感到有意义叙事之间的差距。

创建物理效果更准确的视觉效果。 Omni 对重力、动能和流体动力学等作用力有了改进的直觉理解,让你能够创建更逼真的场景。

提示词:一颗弹珠在连锁反应式轨道上快速滚动,连续平滑镜头。

融合知识与创造力。 Omni 借助 Gemini 的知识,以远超模式匹配的方式将语言、图像和意义连接起来。

提示词:视频展示字母表中的物品。每个字母对应一件不寻常的物品,摆放在桌子上(比如 C 对应 Capybara 水豚,D 对应 disco globe 迪斯科球,L 对应 Lava Lamp 熔岩灯)。全部 26 个字母都必须由 26 件物品代表,并配有显示该字母的对应下三分之一字幕条。一次只显示一件物品和一个下三分之一字幕条。每个下三分之一字幕条都必须看起来像是用黑色马克笔写在纸条上,位于左下角。快速切换,24FPS 下每件物品约 9 帧。最后一帧是一张写着“THE END”的纸条。整个视频配有平静流畅的音乐。

将复杂想法可视化。 Omni 可以根据简短提示词创作引人入胜的讲解内容,生成能够拆解更复杂想法的视觉效果。

提示:用黏土动画讲解蛋白质折叠,一切均由黏土制成,无手部出现,定格动画,准确

从任意输入组合创建视频

引用任何内容。 Omni 可将任何参考素材——图像、文本、视频或音频——转化为统一、连贯的输出。虽然音频起初仅支持语音参考,但我们很快就会推出其他类型的音频输入。

从你已有的内容开始。 借助输入参考,你可以使用角色、场景或绘画图像,以符合你构想的方式进行创作。

应用风格、动态或效果。 通过输入参考定义视觉语言,或直接用自然语言描述。Omni 会融合输入参考,生成连贯的片段。

使用你自己的数字虚拟形象创建视频

我们致力于负责任地开发 AI,并制定了明确的政策来保护用户免受伤害,并规范我们 AI 工具的使用。首先,你可以使用 Avatars 用自己的声音创建视频,它会创建你的数字版本,让你能够生成外观和声音都像你的视频。除虚拟形象功能外,就通过编辑视频来更改音频和语音而言,我们仍在努力测试,并更好地了解如何负责任地将这一能力带给用户。

所有使用 Omni 创建的视频都包含我们不可感知的 SynthID 数字水印。你可以通过 Gemini 应用、Chrome 中的 Gemini 和 Google 搜索轻松验证视频是否由 Gemini Omni 生成。你可以在我们的博文中进一步了解我们如何扩展内容透明度和验证工具,以帮助你了解网络上的内容是如何创建和编辑的。

立即试用 Gemini Omni

今天,我们推出 Omni 家族的首个模型——Gemini Omni Flash。Gemini Omni Flash 今天起通过 Gemini 应用和 Google Flow 面向全球所有 Google AI Plus、Pro 和 Ultra 订阅者推出。从本周开始,它还将在 YouTube Shorts 和 YouTube Create 应用上免费向用户推出。

未来几周,我们还将通过 API 将其推广给开发者和企业客户。

Collection

I/O 2026

以下是我们在 Google I/O 2026 上宣布的全部内容。

查看更多

The image shows a colorful abstract design with the Google I/O 2026 logo.

在收件箱中获取 Google 最新资讯

订阅我们的新闻通讯,获取产品更新、活动信息、特别优惠等。

你的信息将根据 Google 隐私政策使用。你可以随时选择退出。

来源:Google DeepMind · deepmind.google