创作者亲自揭开Sora视效大片《气球人》真相:大量人工后期参与,被指广告宣传效果误导大众
哈?OpenAI Sora火爆全网的短片《气球人》,竟然也是造假的?
背后艺术家团队的最新揭秘,可谓一石激起千层浪:原来,视频画面并非完全由AI系统逐帧自主生成,其中有大量视觉效果需要人类后期实现。
这下网友不干了,合着大家伙儿跟OpenAI玩真心,OpenAI背后却耍起心眼子来了:
他们含糊其辞,就是希望观众认为短片完全是AI生成的,这是不是有点不诚实了啊。
这不是人工智能生成的视频,而是使用了一些AI技术的视频。
还有网友直接开喷:误导性营销!这是误导性营销!
究竟是怎么个事儿,咱们还是具体捋一捋。
揭秘Sora大片工作流
尽管OpenAI一开始就介绍了,《气球人》这样的短片出自艺术家团队之手,他们只是把Sora开放给了艺术家使用,但官方并未提及短片具体是如何制作而成的。
现在,《气球人》背后的艺术家团队Shy Kids自己来了个大揭秘,内容包括:
视频片段一致性如何实现如何处理Sora生成的视频素材Sora生成视频的局限性及后期处理保持一致性很困难
针对视频内容生成的一致性,《气球人》中主角形象的一致性可谓惊艳众人。
但实际上吧,据Shy Kids团队中负责后期制作的老哥Patrick Cederberg透露,想要实现这种前后一致并不是写写提示词就能成的。
Sora团队并没有提供任何的辅助编辑工具,来帮助实现不同镜头之间的主体一致性。
也就是说,哪怕提示词都是一样的,两次运行的结果也会有所不同。他们的做法是,尽可能详细地去对主角形象进行描述。
解释角色的服装以及气球的类型是我们解决一致性问题的方法,目前Sora还没有集成适当的功能来实现此类控制。即便如此,团队在用Sora生成视频素材时还是遇到了不少这样那样的问题。
比如,提示词里明明写了气球需要生成黄色的,但Sora最终给出的生成片段里,气球却可能是红色的。
视频素材处理
除了一致性的问题之外,Patrick Cederberg提到,在时间轴方面,Sora允许用户修改关键帧。但这种时间控制并不精准,无法保证一定能实现预想的效果。
另外,想要实现这个镜头:
即把镜头焦点从牛仔裤一路上移到气球头,也得人类自己后期裁切平移画面,因为Sora本身不会渲染这样的镜头:它总是倾向于把焦点集中在气球头上。
Patrick Cederberg还谈到,他们在写提示词时也遇到了一些问题:OpenAI在让艺术家试用Sora前,并没有考虑到真正的电影制作人是如何思考的。
简单来说,就是Sora对摄影术语(比如跟拍、平移等专业术语)的理解能力有限。老帕认为,这一点上Sora的体验感受其实不如Runway。
值得一提的是,尽管Sora原生支持生成1080P视频,但Patrick Cederberg他们实际上生成的素材都是480P的。他们是在后期使用Topaz等工具对视频素材进行了超分处理。
生成速度方面,根据Patrick Cederberg的回忆,每次输入提示词后,大概需要10-20分钟的时间。
视频后期
接下来,就到了网络舆情反应最强烈的部分——人为介入了后期。
前面已经说到,Sora本身还解决不了不同视频片段里一致性的问题。除了气球不一定符合设定,或许是因为训练数据的原因,Sora还喜欢自动给气球加上奇奇怪怪的人脸。
给主角“气球人”生成一个其实并不需要的人头。
此外,Sora还很坚定地认为,气球就得带根绳儿。
总而言之,这些细节的问题,都需要Patrick Cederberg上手丢到Adobe AE里,进行后期处理。
另外,尽管Shy Kids发现“35mm胶卷”这样的关键词很好用,能让Sora生成的视频画面风格更一致,但艺术家们仍需要为最后的成片做调色,为画面添加颗粒和闪烁效果,以使整部影片画面更加协调统一。
Patrick Cederberg还提到了一个有意思的细节——Sora真的很喜欢慢镜头。
他说:
我不知道为什么,但有很多镜头看上去都是0.5倍速和0.75倍速。因此我们需要对大量画面进行调速,免得影片看上去像个大型慢动作项目。
-
创作者亲自揭开Sora视效大片《气球人》真相:大量人工后期参与,被指广告宣传效果误导大众
Sora生成视频《气球人》背后艺术家团队最新揭秘:原来,视频画面并非完全由AI系统逐帧自主生成,其中有大量视觉效果需要人类后期实现。
2025-01-29 16:43:15 -
苹果5月7日新品发布活动产品曝光:旗下首款AI平板电脑,新一代iPad Pro将直接搭载M4处理器
地时间5月7日,苹果公司将会发布新一代的iPad设备。苹果新一代的iPad Pro,直接搭载M4芯片,跳过M3这一代,主要提升的是神经网络引擎的性能。
2025-01-29 16:20:39 -
微软启动备份项目!自研5000亿参数大模型「MAI」,力邀谷歌前DeepMind团队CEO加盟带队
微软自研5000亿参数绝密武器曝光!前谷歌DeepMind高管带队
2025-01-29 15:53:12 -
月之暗面发布Kimi+专业版:AI助手再升级,财报分析、文案创作、研报轻松生成
5月6日,国内AI创业公司月之暗面旗下的Kimi智能助手迎来一次重要的升级,推出了名为「Kimi+」的专业版智能助理服务。
2025-01-29 15:29:16 -
AI算力王者!苹果M4芯片搭载iPad Pro来袭丨OpenAI推出AI图像辨别工具丨马斯克:AI技术在太空探索领域的表现不佳
【AI奇点网2024年5月8日早报】本站每日播报AI业界最新资讯,触摸时代脉搏,掌握未来科技动向。事不宜迟,点击查看今日AI资讯早餐。
2025-01-29 15:06:19 -
准确率 98%,OpenAI 推出专用 AI 工具:能识别 DALL・E 3 生成的图片
5月8日,OpenAI在官网宣布,将推出面向其文生图模型DALL·E 3 的内容识别器,以及一个媒体管理器。随着ChatGPT、DALL·E 3等生成式AI产品被大量应用在实际业务中,人们越来越难分辨AI和人类创建内容的区别,这个识别器可以帮助开发人员快速识别内容的真假。
2025-01-29 14:41:50
-
AI绘画comfyUI教程_图生图工作流程
本期的视频教程是关于在ComfyUI中搭建完整的图生图工作流的。视频中介绍了如何使用ComfyUI中的组件来实现图像的裁剪和重绘。
2024-12-18 13:42:28 -
商汤AI视频生成器如影使用方法_如影使用教程_AI视频生成测评
国内知名人工智能软件公司商汤科技近日宣布,“商汤如影SenseAvatar”数字人视频生成平台正式上线,产品愿景是“让每个人都可以轻松制作视频”,非常的直抒胸臆呀。
2024-12-17 03:24:28 -
怎么快速给模特换装_怎么用stable diffusion给模特换装
本篇教程主要运用StableDiffusion这个工具来进行操作,下面会通过几个小案例,给大家展示不同需求下,我们该如何使用StableDiffusion来辅助我们完成服装效果展示。本教程适用于电商设计场景、摄影场景等多个运用人物设计的实战中
2024-12-23 13:57:15 -
万万没想到,兵马俑都开始跳「科目三」:阿里云通义千问APP打造“全民舞王”视频创作工具,实测效果大赞
兵马俑跳《科目三》,是我万万没想到的。有人借助了阿里云之前走红的AI视频生成技术——「Animate Anyone」,生成出来了这个舞蹈片段。
2024-12-13 16:46:26 -
AIGC落地实践!四招帮你快速搞定运营设计
回顾这一年,随着 AIGC 浪潮的爆发,在掌握AI工具已经成为设计师必备技能。今天这篇文章,通过三个案例流程拆解带大家从新时代设计工作流,到必备「四大招式」,到图标设计六大方向,到训练专属模型,再到全流程手把手拆解设计项目,绝对干货满满
2024-12-18 16:57:17 -
stable diffusion初识_stable diffusion跟其他工具有什么区别]
关于Stable Diffusion的内容很多,在本篇教程里,我会先为你介绍Stable Diffusion模型的运行原理、发展历程和相较于其他AI绘图应用的区别。
2024-12-24 13:45:31 -
PikaAI怎么用_PIkaAI怎样生成视频_AI视频生成器Pika怎么用_AI视频生成工具Pika教程
Pika这款工具7月份在AIGC界横空出世,被圈内誉为目前“全球最好的文本生成视频AI工具”之一,也被认为是另外一款知名AI视频生成工具Runway的强有力挑战者。
2024-12-25 13:35:53 -
如何使用 ChatGPT 调试代码
当您的代码出现问题时,您可以向 ChatGPT 提供故障代码和问题描述。AI 工具将尝试识别并纠正问题。
2024-12-31 12:01:41 -
stable SR脚本安装_stable diffusion脚本网站
上节课我们讲的4xUltraSharp是不是觉得已经很强了! 那么如果我拿出Stable SR脚本你应该如何应对呢?
2024-12-31 13:49:18 -
怎么设置关键词权重_怎么设置Multi Prompts
AI 绘画,顾名思义就是利用人工智能进行绘画,是人工智能生成内容(AIGC)的一个应用场景。其主要原理简单来说就是收集大量已有作品数据,通过算法对它们进行解析,最后再生成新作品,Midjourney是一个由同名研究实验室开发的人工智能程序。
2025-01-03 10:00:57