当AI遇上影视业,首部AI科幻短剧是如何生成的?

当AI遇上影视业,首部AI科幻短剧是如何生成的?
2024年07月11日 10:58 第一财经网

近日,全国首部AIGC生成式连续性叙事科幻短剧集《三星堆:未来启示录》在抖音上线,以每集3分钟、每日一集的节奏播放。该剧基于四川省电影局2022年立项的同名电影,由博纳影业(001330.SZ)出品制作,抖音联合出品,抖音旗下即梦AI提供首席技术支持。

截至目前,《三星堆:未来启示录》相关词条在抖音的播放量2036.8万。在接受第一财经记者专访时,博纳影业制作总监、博纳AIGMS制作中心负责人曲吉小江表示,以最快速度推出该剧的目的之一,就是让行业看到目前AI技术的极限是什么,未来的可能性在哪里。

AIGMS 制作中心是博纳影业人工智能影视制作基地,即梦AI是抖音旗下生成式人工智能创作平台,支持通过自然语言及图片输入,生成图像及视频。平台提供智能画布以及首尾帧、运镜控制、速度控制等AI编辑能力。

谈及双方合作的起始,曲吉小江对记者表示,即梦AI需要一款视频作品展现技术,博纳需要一款产品提供AI技术支持。2023年博纳确定通过AI技术来制作该剧集,2024年确定了与即梦AI的合作。

通过大模型创作视频内容是2024年AI赛道发力重点,此前快手大模型可灵推出高清晰高画质版,以及镜头控制等新功能,创作者单次生成的文生视频时长增加至10秒,并对外释放AIGC星芒短剧《山海奇镜之劈波斩浪》预告片。

2024年2月,OpenAI推出文生视频大模型Sora,引发“AI颠覆传统影视业”的讨论。对于目前AI对影视行业的影响,曲吉小江表示自己认可“没有AI就没有生产力”的观点,影视产业需要做好准备,翻天覆地的时代变化已经到来,如果不去面对,一定会被甩在后面。

据曲吉小江观察,如今各影视公司创作者都开始使用AI了,只是用的程度不同,有的像博纳一样重投入,有的只是将AI作为软件工具。“你如何看待AI,就会如何使用AI。”曲吉小江称。

目前AI视频行业普遍存在难以准确模拟复杂场景物理原理的问题,据记者观察,《三星堆:未来启示录》也存在该问题,如人物口型与发音对不上、肢体动作不够协调、人物面部表情僵化等。中科深智创始人兼CEO成维忠此前对记者表示,目前所有AI视频模型均存在模型搞不清楚人与环境的关系,搞不清楚前后逻辑关系等情况,该问题会导致模型在实际应用的时候,达不到使用者设想的完美程度。

《三星堆:未来启示录》技术总监李康康对记者表示,目前团队仍面临几大技术挑战:高质量与高效结合的问题、人物角色一致性的控制问题、画面一致性问题、动态可控性问题。另外,行业目前缺少一个工业级、专业的整合软件,博纳所有视频生产的操作都是基于模型去完成的,但整个工作流程是被拆开的,流程非常长,中间大量工作需要人工进行推动,这中间的技术支撑处于空白状态。

即梦AI相关负责人对记者表示,AI迭代很快,未来AIGC的成熟度、稳定性都会提升。此次合作过程中,即梦AI改进了“视频生成”的功能,包括支持24fps、30fps、60fps的补帧以及二倍超分的能力,新增镜头水平移动、上下移动,支持镜头移动的方向和幅度控制等。

博纳坚持尽早推出视频产品,博纳影业行政总裁蒋德福对记者表示,在如今的技术发展状态下,《三星堆:未来启示录》的效果可以说“不错”,但技术发展永无止境,都有一个提升的过程,如果去等技术完全成熟,便会永远处在“等待”状态,因为技术永远在更新迭代。所以博纳技术团队目前在超负荷工作,为的就是在行业内第一个推出AIGC生成式短剧集,“你不能等到年底的时候再推,因为到时新技术又出现了,你的产品又落后了。”

对于AI给传统影视行业带来的改变,曲吉小江表示,过去有很多项目不敢“动”,一方面成本很高,另一方面目前的电影市场,观众也很挑剔,试错成本太高,不像过去有一个大概的行业规律。但现在借助AI,公司可以先用较低的成本“跑两圈”,如果观众的反响不够热烈或对这个IP不感兴趣,后面可以直接换项目再试。

目前博纳AIGMS制作中心具体团队人数暂未披露,但AI技术架构具体包括文生图、文生视频、图生视频、视频增强、视频剪辑,以及最后的整体补帧,即梦AI作为首席技术支持主要负责其中的图生视频,其他各有专业应用负责。

博纳与即梦AI均未透露此次项目的成本规模,合作模式主要是即梦AI为博纳提供tokens,团队将其称为“积分制”,以及新版内测等技术支持。对于未来的商业变现方式,曲吉小江表示,如果剧集能够实现破亿的播放量,就摸到商业化的门槛。第二季可能会走付费模式,未来AI技术足够成熟之后,也有可能将AIGC作品搬到大荧幕。

新浪科技公众号
新浪科技公众号

“掌”握科技鲜闻 (微信搜索techsina或扫描左侧二维码关注)

创事记

科学探索

科学大家

苹果汇

众测

专题

官方微博

新浪科技 新浪数码 新浪手机 科学探索 苹果汇 新浪众测

公众号

新浪科技

新浪科技为你带来最新鲜的科技资讯

苹果汇

苹果汇为你带来最新鲜的苹果产品新闻

新浪众测

新酷产品第一时间免费试玩

新浪探索

提供最新的科学家新闻,精彩的震撼图片