太炸了!OpenAI深夜发布,文字直接生成视频!网友:我要失业了

2月16日凌晨,OpenAI再次扔出一枚深水炸弹,发布了首个文生视频模型Sora。据介绍,Sora可以直接输出长达60秒的视频,并且包含高度细致的背景、复杂的多角度镜头,以及富有情感的多个角色。

目前官网上已经更新了48个视频demo,在这些demo中,Sora不仅能准确呈现细节,还能理解物体在物理世界中的存在,并生成具有丰富情感的角色。该模型还可以根据提示、静止图像甚至填补现有视频中的缺失帧来生成视频。

太炸了!OpenAI深夜发布,文字直接生成视频!网友:我要失业了

例如一个Prompt(大语言模型中的提示词)的描述是:在东京街头,一位时髦的女士穿梭在充满温暖霓虹灯光和动感城市标志的街道上。

在Sora生成的视频里,女士身着黑色皮衣、红色裙子在霓虹街头行走,不仅主体连贯稳定,还有多镜头,包括从大街景慢慢切入到对女士的脸部表情的特写,以及潮湿的街道地面反射霓虹灯的光影效果。

太炸了!OpenAI深夜发布,文字直接生成视频!网友:我要失业了



,时长00:59




电影预告片讲述了30岁宇航员戴着红色羊毛针织摩托车头盔的冒险经历,蓝天、盐漠,电影风格,35毫米胶片拍摄,色彩鲜艳。




,时长00:17



AI想象中的龙年春节,红旗招展人山人海。有紧跟舞龙队伍抬头好奇观望的儿童,还有不少人掏出手机边跟边拍,海量人物角色各有各的行为。

太炸了!OpenAI深夜发布,文字直接生成视频!网友:我要失业了

竖屏超近景视角下,这只蜥蜴细节拉满:

太炸了!OpenAI深夜发布,文字直接生成视频!网友:我要失业了

网友直呼game over,工作要丢了:

太炸了!OpenAI深夜发布,文字直接生成视频!网友:我要失业了

甚至有人已经开始“悼念”一整个行业:

太炸了!OpenAI深夜发布,文字直接生成视频!网友:我要失业了

还有网友表示,电影业要彻底颠覆了。

太炸了!OpenAI深夜发布,文字直接生成视频!网友:我要失业了

太炸了!OpenAI深夜发布,文字直接生成视频!网友:我要失业了

太炸了!OpenAI深夜发布,文字直接生成视频!网友:我要失业了

太炸了!OpenAI深夜发布,文字直接生成视频!网友:我要失业了

太炸了!OpenAI深夜发布,文字直接生成视频!网友:我要失业了


一位YouTube博主Paddy Galloway发表了对Sora的感想,他表示内容创作行业已经永远的改变了,并且毫不夸张。“我进入YouTube世界已经15年时间,但OpenAI刚刚的展示让我无言…动画师/3D艺术家们有麻烦了,素材网站将变得无关紧要,任何人都可以无壁垒获得难以置信的产品,内容背后的‘想法’和故事将变得更加重要。”

对于Sora当前存在的弱点,OpenAI也不避讳,指出它可能难以准确模拟复杂场景的物理原理,并且可能无法理解因果关系。

例如“五只灰狼幼崽在一条偏僻的碎石路上互相嬉戏、追逐”,狼的数量会变化,一些凭空出现或消失。

太炸了!OpenAI深夜发布,文字直接生成视频!网友:我要失业了

该模型还可能混淆提示的空间细节,例如混淆左右,并且可能难以精确描述随着时间推移发生的事件,例如遵循特定的相机轨迹。

如提示词“篮球穿过篮筐然后爆炸”中,篮球没有正确被篮筐阻挡。

太炸了!OpenAI深夜发布,文字直接生成视频!网友:我要失业了

OpenAI表示,他们正在教AI理解和模拟运动中的物理世界,目标是训练模型来帮助人们解决需要现实世界交互的问题。

随后OpenAI解释了Sora的工作原理,Sora是一个扩散模型,它从类似于静态噪声的视频开始,通过多个步骤逐渐去除噪声,视频也从最初的随机像素转化为清晰的图像场景。Sora使用了Transformer架构,有极强的扩展性。

视频和图像是被称为“补丁”的较小数据单位集合,每个“补丁”都类似于GPT中的一个标记(Token),通过统一的数据表达方式,可以在更广泛的视觉数据上训练和扩散变化,包括不同的时间、分辨率和纵横比。

Sora是基于过去对DALL·E和GPT的研究基础构建,利用DALL·E 3的重述提示词技术,为视觉模型训练数据生成高描述性的标注,因此模型能更好的遵循文本指令。

如今,Sora正面向部分成员开放,以评估关键领域的潜在危害或风险。同时,OpenAI也邀请了一批视觉艺术家、设计师和电影制作人加入,期望获得宝贵反馈,以推动模型进步,更好地助力创意工作者。OpenAI提前分享研究进展,旨在与OpenAI以外的人士合作并获取反馈,让公众了解即将到来的AI技术新篇章。


东莞本地生活综合界面新闻、量子位、OpenAI官网等


东莞本地生活—就在我们身边!

这里发布一切与东莞有关的事情!



更多

太炸了!OpenAI深夜发布,文字直接生成视频!网友:我要失业了


回复【天气】即可获取东莞天气

回复【违章】即可获取东莞违章信息

回复【路况】即可查看东莞最新路况消息

回复【水费】即可获取东莞水费缴纳方式

回复【居住证】即可查看最新居住证消息

回复【台风】即可获取台风最新消息


太炸了!OpenAI深夜发布,文字直接生成视频!网友:我要失业了



声明:本文来自掌上东莞用户投稿,以上内容(如有图片或视频亦包括在内)为自媒体平台“掌上东莞号”用户上传并发布,用于个人学习、研究或者欣赏使用,作品版权归源作者所有,本平台仅提供信息存储服务,不代表掌上东莞立场,如有侵权,请联系后台处理。仅供交流分享不作任何商业用途。如需转载请注明出处。

(0)
上一篇 2024年2月15日
下一篇 2024年2月17日

相关推荐

发表评论

登录后才能评论