AI 前线
InfoQ
AI 前线团队
5249 人已学习
免费领取
课程目录
已更新 75 讲/共 1000 讲
AI 前线
15
15
1.0x
00:00/00:00
登录|注册

Runway 全新 Gen-3 视频生成模型获网友盛赞:比 Sora 更好

编译:核子可乐 褚杏娟
凭借广受欢迎的视频生成工具而声名大噪的 AI 厂商 Runway 最近发布了最新版本的 Runway Gen-3。Gen-3 Alpha 是 Runway 在专为大规模多模态训练所构建的全新基础设施之上,训练出的模型家族的首位成员。与 Gen-2 相比,Gen-3 在保真度、一致性和运动表现方面迎来重大改进,并朝着构建通用世界模型迈出了坚实一步。
新模型目前仍处于 alpha 内测阶段,尚未对外公布。但从一系列演示视频的效果来看,与目前已经开放的 Gen-2 相比,下代模型生成的视频似乎在连续性、真实性以及提示词遵循能力方面取得了重大飞跃。
细粒度的时间控制
Gen-3 Alpha 由描述精细、时间密集的描述词训练而成,可实现富有想象力的过渡效果并为场景元素生成精确的关键帧。
逼真的人类形象
Gen-3 Alpha 擅长生成具有各种动作、手势及情绪,且富有表现力的人类形象,开拓出前所未有的叙事方式与空间。
00:00 / 00:00
    1.0x
    • 3.0x
    • 2.5x
    • 2.0x
    • 1.5x
    • 1.25x
    • 1.0x
    • 0.75x
    • 0.5x
    网页全屏
    全屏
    00:00
    为艺术家而生,供艺术家使用
    Gen-3 Alpha 的训练由研究科学家、工程师及艺术家共同组成的跨学科团队倾力完成,旨在诠释各种视觉风格及镜头语言。
    00:00 / 00:00
      1.0x
      • 3.0x
      • 2.5x
      • 2.0x
      • 1.5x
      • 1.25x
      • 1.0x
      • 0.75x
      • 0.5x
      网页全屏
      全屏
      00:00
      Gen-3 模型生成的视频,特别是包含大画幅人脸特写的视频,拥有极为逼真的画面效果。这也不禁令 AI 艺术社区的成员们将其与 OpenAI 尚未发布,但同样备受期待的 Sora 进行了比较。
      确认放弃笔记?
      放弃后所记笔记将不保留。
      新功能上线,你的历史笔记已初始化为私密笔记,是否一键批量公开?
      批量公开的笔记不会为你同步至部落
      公开
      同步至部落
      取消
      完成
      0/2000
      荧光笔
      直线
      曲线
      笔记
      复制
      AI
      • 深入了解
      • 翻译
        • 英语
        • 中文简体
        • 中文繁体
        • 法语
        • 德语
        • 日语
        • 韩语
        • 俄语
        • 西班牙语
        • 阿拉伯语
      • 解释
      • 总结

      1. Runway发布了全新的视频生成模型Gen-3 Alpha,该模型在保真度、一致性和运动表现方面取得了重大改进,具有细粒度的时间控制和逼真的人类形象生成能力。 2. 网友对Runway Gen-3给予了积极评价,认为其视频生成效果比Sora更真实,具有电影质感,且画面流畅、自然可信。 3. Runway还推出了微调工具,提供更灵活的图像与相机控制选项,以支持各种视觉风格及镜头语言。 4. Gen-3 Alpha是Runway在专为大规模多模态训练所构建的全新基础设施之上训练出的模型家族的首位成员,代表了构建通用世界模型的重要一步。 5. Runway宣称Gen-3是其实现建立“通用世界模型”目标的重要一步,使得AI系统能够模拟环境中将要发生的未来事件,而非只关注特定时间轴内下一可能帧的传统预测技术。 6. Runway的AI探索之旅始于2021年,与慕尼黑大学的研究人员合作开发了Stable Diffusion的首个版本,成为AI视频生成领域的重要参与者。 7. 随着OpenAI宣布推出Sora,市场格局发生变化,出现了新的竞争对手,如快手的Kling和Luma AI的Dream Machine,以及开源领域的Stable Video Diffusion和Vidu。 8. 竞品对比显示,Runway Gen-3在视频生成领域面临来自多个竞争对手的挑战,但其新模型的发布仍受到广泛关注和期待。

      该试读文章来自《AI 前线》,如需阅读全部文章,
      请先领取课程
      免费领取
      登录 后留言

      精选留言

      由作者筛选后的优质留言将会公开显示,欢迎踊跃留言。
      收起评论
      显示
      设置
      留言
      收藏
      沉浸
      阅读
      分享
      手机端
      快捷键
      回顶部