重磅!OpenAI首个视频生成模型发布,效果炸裂!网友:我要失业了
文字拾贝
2011-01-04 23:00:31
0

今天(2月16日)

OpenAI再次扔出一枚深水炸弹

发布了首个视频生成模型Sora

Sora完美继承了

DALL·E3的画质和遵循指令能力

能生成长达1分钟的高清视频

消息一出

相关话题立刻登上热搜

据介绍,Sora可以直接输出长达60秒的视频,并且包含高度细致的背景、复杂的多角度镜头,以及富有情感的多个角色。

目前官网上已经更新了48个视频demo,在这些demo中,Sora不仅能准确呈现细节,还能理解物体在物理世界中的存在,并生成具有丰富情感的角色。该模型还可以根据提示、静止图像甚至填补现有视频中的缺失帧来生成视频。

比如,AI想象中的龙年春节

红旗招展人山人海

有紧跟舞龙队伍抬头好奇观望的儿童

还有不少人掏出手机边跟边拍

海量人物角色各有各的行为

一位时髦女士漫步在东京街头

周围是温暖闪烁的霓虹灯

和动感的城市标志

一名年约三十的宇航员

戴着红色针织摩托头盔

展开冒险之旅

电影预告片呈现其穿梭于蓝天白云

与盐湖沙漠之间的精彩瞬间

独特的电影风格、

采用35毫米胶片拍摄,色彩鲜艳

竖屏超近景视角下

这只蜥蜴细节拉满↓

对此,网友直呼game over

ass="textAlignCenter">“工作要丢了!”

甚至有人已经开始

“悼念”一整个行业

还有网友表示

电影业要彻底颠覆了

不过,对于Sora当前存在的弱点,OpenAI也不避讳,指出它可能难以准确模拟复杂场景的物理原理,并且可能无法理解因果关系。

例如“五只灰狼幼崽在一条偏僻的碎石路上互相嬉戏、追逐”,狼的数量会变化,一些凭空出现或消失。

此外,该模型还可能混淆提示的空间细节,例如混淆左右,并且可能难以精确描述随着时间推移发生的事件,例如遵循特定的相机轨迹。

如提示词“篮球穿过篮筐然后爆炸”中,篮球没有正确被篮筐阻挡。

OpenAI表示,他们正在教AI理解和模拟运动中的物理世界,目标是训练模型来帮助人们解决需要现实世界交互的问题。

随后OpenAI解释了Sora的工作原理,Sora是一个扩散模型,它从类似于静态噪声的视频开始,通过多个步骤逐渐去除噪声,视频也从最初的随机像素转化为清晰的图像场景。Sora使用了Transformer架构,有极强的扩展性。

视频和图像是被称为“补丁”的较小数据单位集合,每个“补丁”都类似于GPT中的一个标记(Token),通过统一的数据表达方式,可以在更广泛的视觉数据上训练和扩散变化,包括不同的时间、分辨率和纵横比。

Sora是基于过去对DALL·E和GPT的研究基础构建,利用DALL·E 3的重述提示词技术,为视觉模型训练数据生成高描述性的标注,因此模型能更好的遵循文本指令。

如今,Sora正面向部分成员开放,以评估关键领域的潜在危害或风险。同时,OpenAI也邀请了一批视觉艺术家、设计师和电影制作人加入,期望获得宝贵反馈,以推动模型进步,更好地助力创意工作者。OpenAI提前分享研究进展,旨在与OpenAI以外的人士合作并获取反馈,让公众了解即将到来的AI技术新篇章。

你怎么看?

相关内容

中国太保携手共筑金融消费者...
为深入贯彻落实国家金融监督管理总局关于消费者权益保护的要求,3月9...
2011-01-16 21:54:18
【忠阳车评】以新质生产力推...
继获得22亿美元大手笔投资之后,蔚来再次把自己送上热搜。在年底举行...
2011-01-04 23:00:55
预算不足 美国明尼苏达州一...
  美国明尼苏达州卡尔顿县穆斯莱克市2月15日发布报告称,出于对预...
2011-01-04 23:00:52
中坚科技:投资者,截止20...
证券之星消息,中坚科技(002779)03月02日在投资者关系平台...
2011-01-04 23:00:50
长春的历史建筑让人尴尬?
长春历史建筑尴尬之处在于,大多是日本控制的伪满“新京”时期修建的“...
2011-01-04 23:00:48
AI x 机器人爆发年:英...
【新智元导读】AI x 机器人正逐渐走上时代的风口,近日,谷歌 D...
2011-01-04 23:00:46

热门资讯

“它”才是孩子喜欢的家常菜,省... 孩子一上学,我的空闲时间就多一些,偶尔在群里聊聊天,看见有的宝妈就抱怨孩子挑食,每天都不知道做什么给...
【忠阳车评】以新质生产力推动品... 继获得22亿美元大手笔投资之后,蔚来再次把自己送上热搜。在年底举行的NIO Day 2023上,蔚来...
瑞华泰(688323)2月5日... 证券之星消息,截至2024年2月5日收盘,瑞华泰(688323)报收于10.59元,下跌13.76%...
2024首场寒潮将至 中国气象...   中国天气网讯 中央气象台预计1月20日至23日,受寒潮影响,中东部地区将出现剧烈降温和大风天气,...
中国太保携手共筑金融消费者权益... 为深入贯彻落实国家金融监督管理总局关于消费者权益保护的要求,3月9日,中国太保旗下中国太保产险、中国...
重磅!OpenAI首个视频生成... 今天(2月16日)OpenAI再次扔出一枚深水炸弹发布了首个视频生成模型SoraSora完美继承了D...
AI x 机器人爆发年:英伟达... 【新智元导读】AI x 机器人正逐渐走上时代的风口,近日,谷歌 DeepMind 以及英伟达两家 A...
(经济观察)新动能:中国多地发...   北京2月25日电 题:新动能:中国多地发力布局新质生产力  记者 刘亮  开年来,新质生产力已成...
主次节奏:白银开盘上涨动能不足... 人们对美国经济可能陷入衰退的预期以及美联储可能降息的预期打压了美元,并提振了以美元计价的大宗商品及贵...
清风论金:黄金探底迎调整,20... 黄金方面、上周五黄金冲高,凌晨震荡回落,而且凌晨在回落同样反抽力度比较弱,那么一定不是强势,昨日早间...