Sora可生成游戏?!
34389 0
实名

通过了实名认证的内容创造者

发布于 2024-2-29 22:47:50

您需要 登录 才可以下载或查看,没有账号?注册

x
点击上方蓝字CG世界关注我们“ 感知技术 · 感触CG · 感受艺术 · 感悟心灵 ”中国很有影响力影视特效CG动画领域自媒体
提问:最近业内最热话题是什么?
相信小伙伴们都可以抢答成功,那必须是OpenAI最新推出的黑科技:首个AI生成视频模型Sora。
74922fcb0bb925cf692420d19f86105f.png
你永远可以相信OpenAI的实力,不出手则已,一出手惊人。作为行业的领头羊,前有DALL-E、ChatGPT等在各领域收获巨大成功的优秀工具,现在又来了个能通过文本生成逼真视频而震惊全网的Sora,这也预示着人工智能领域的又一重大进步。Sora只需要几行提示,仅仅根据文本描述就能生成令人惊叹的视频。就在我们感叹这款新王炸真的很强的时候,OpenAI表示:我知道你们很震撼,但你们先别震撼,因为它可能预想中还要厉害
a3b49140ae1165c576276afe0bd99413.png


根据OpenAI最新发表的技术论文显示,Sora的能力似乎比OpenAI最初认为的还要强大和不可思议。这篇论文由OpenAI的多个研究人员共同撰写,揭示了Sora架构的关键方面:如可以生成任意分辨率和宽高比的视频(高达1080p);能够执行各种图像和视频编辑任务,从创建循环视频到向前或向后扩展视频时间到更改现有视频中的背景。

要说Sora最强悍的还要数“模拟数字世界”的能力,其中的一个例子就是游戏。按照OpenAI的合著者所说,在一项实验中,OpenAI向Sora提供了包含“Minecraft”一词的提示,并让它渲染出令人信服的类似《Minecraft》的HUD和游戏,以及游戏动态,包括物理运动,同时控制玩家角色。

有社交媒体账户展示了由AI生成的《我的世界》视频。

这段由Sora生成的视频,以玩家在平原生物群系中慢动作行走开始。通过观察整体的纹理外观,可以推测出Sora模型使用了具有不同天空纹理和灯光引擎的资源包以及着色器。同时,显示生命值、饱食度和物品的快捷栏看起来也非常地准确。当玩家行走时,可以看见纹理完全不同的一只鸡和一只猪,也侧面证实了Sora使用资源包来生成游戏视频。

仅仅是在提示文字中加入“Minecraft”关键词,Sora就可以零样本展示出它自主控制游戏角色进行基本操作,同时渲染出游戏世界和游戏中动态变化的能力。OpenAI认为,Sora的这种能够完整模拟游戏世界的能力,表明视频生成AI的发展正在朝着能够高度仿真物理和数字世界,及其中的动物和人等对象的方向迈进。

而之所以说Sora模型有潜力颠覆视频游戏世界,原因在于它与其他的AI视频生成器有着根本的不同。
Nvidia高级研究员Jim Fan博士就曾指出,比起图像生成器,Sora更像是一个“基于数字训练的物理引擎”,可以模拟许多真实或虚拟的世界。不仅能生成单个照片或视频,还能确定环境中每个对象的物理属性,并根据这些计算渲染照片、视频或交互式3D世界(视情况而定)。Sora能够执行成千上万次计算来预测物体之间的相互作用关系,从而生成游戏物理规则,这就使得它非常适合游戏世界的模拟。

当然,Sora目前在游戏模拟方面也存在一定的局限性。它还无法精确模拟像玻璃破碎这样的物理效果,也会在生成游戏交互时出现一些不合理的细节。在生成的《Minecraft》游戏视频中,也存在类似的问题。当玩家靠近猪并触碰它时,它开始向后跑,但脸却是朝向玩家的…视频中猪继续在地面上滑行,最终消失在远处的小屋里;不久之后,玩家走近湖旁的小屋,这时可以看到湖里有几只“奇怪”的动物,从脸上看像牛,但又不太符合身体力学。

不少网友表示,虽然视频总体看起来像《Minecraft》,但在一些小细节上还是存在着肉眼可见的问题。不过以OpenAI的能力,也不难预见,这些问题都会在未来的版本中不断改进和完善。那么问题来了,小伙伴们,你们怎么看?
end


《显卡》《幻兽帕鲁》《模型》《会员》


可以在AMD显卡上跑CUDA软件么?


拉个Box即可渲染超写实单帧!C4D版AI渲染引擎出现了!


《显卡》《幻兽帕鲁》《模型》《会员》

内容主要涵盖影视特效,CG动国,前沿CG技术,作品欣賞
使用道具 <
您需要登录后才可以回帖 登录 | 注册

本版积分规则

快速回复 返回顶部 返回列表