昆仑万维进军短剧市场,发布AI短剧平台SkyReels

昆仑万维进军短剧市场,发布AI短剧平台SkyReels
2024年08月19日 15:15 第一财经网

入局短剧的玩家又多一个,不过这次是AI短剧。

8月19日,昆仑万维领先发布集成视频大模型与3D大模型的AI短剧平台SkyReels。SkyReels平台集剧本生成、角色定制、分镜、剧情、对白/BGM及影片合成于一体,让创作者“一键成剧”,轻松制作高质量AI视频。

国海证券研报提到,AI有望提高短剧产能,降低成本。据昆仑万维的实践,其采用游戏引擎技术与视频大模型混合构建的WorldEngine,用于视频生成可以将成本降低百倍以上。在可见的未来,技术平权或将带来一个全新的短剧生态。

“生产内容的门槛每降低一倍,创作内容的人数增长十倍。”这是昆仑万维董事长兼CEO方汉在7月世界人工智能大会期间提出的一个判断,他认为,AI将带来全球文化平权和巨大的出海红利,也会催生大量的新的AI UGC平台。

在这样的判断下,昆仑万维入局AI短剧并不突然。与此同时,短剧市场近两年增长迅猛,短剧也是内容赛道当下的新增长极,基于昆仑万维此前多年的AI与娱乐产品孵化与运营经验,AI短剧赛道将杀入一名猛将。

制作周期缩短至小时级

昆仑万维此次推出的AI短剧平台SkyReels,与当下视频生成赛道的可灵AI、智谱清影等平台有显著区别,赛道更垂直,功能也更细分和全面,不仅仅是是“生成一段视频”,而是从创意的概念到最后成片的全流程创作。

据官方的介绍,SkyReels是AI驱动的全流程短剧创作平台,集剧本生成、角色定制、分镜设计、视频拍摄与合成于一体,这样的一站式短剧创作平台,能将制作周期从周级缩短至小时级,一个人即可独立完成创作。

SkyReels背后,有几大模型和引擎支撑,包括昆仑万维自研的剧本大模型SkyScript、自研的分镜大模型StoryboardGen以及业界率先将AI 3D引擎与视频大模型深度融合的创新平台WorldEngine,基于此,SkyReels拥有支撑短剧创作全流程的能力。

具体操作上,在SkyReels中用户只需简单输入一个概念或创意,系统就能自动生成一份结构完整、情节丰富的剧本,并且提供不同类型和风格的故事模板供选择。

短剧创作最重要的是戏剧冲突或者说观众情绪上的“爽点”,据介绍,昆仑万维首先构建了亿级的高质量短剧结构化数据集SkyScript-100M,该数据集针对海量精彩短剧的剧情节奏、爽点、情绪变化进行了高质量标注,基于这些高质量且结构化的训数据得到的剧本大模型,能生成高质量的故事情节,包含戏剧冲突、爽点及情感表达,能保证剧本的吸引力。

此外,如果创作者有更多自己的想法,SkyReels也支持创作者导入已有剧本文档,基于AI能整理、识别并润色优化故事内容。

剧本之外,短剧的角色也是重要的创作要素。在角色定制方面,SkyReels能实现自动角色生成,根据剧本自动推荐合适角色。当然,如果有更多个性化想法创作者也可自定义角色,系统内置了多种角色形象库,支持用户自定义设计与修改角色形象。同时,平台也提供了多样化的音色选择,用户可自行添加或调整人物音色,增强角色表现力。

在角色创作方面, AI 3D引擎与视频大模型融合的创新平台WorldEngine能大幅提升效率,

据介绍,这一平台聚合了多家顶级视频生成大模型,包括昆仑自研视频大模型,同时针对人物表演做了定向优化,因此在人物表演能有更强的口型表情和肢体动作的可控生成能力。

由于引擎的使用,与传统的视频生成相比,WorldEngine在成本上实现了革命性地下降,可大幅降低百倍以上。同时,生成速度也提升了数个量级。

在分镜生成方面,模型能根据剧本内容一键生成分镜图片和对应的文字脚本,创作者等待1-2分钟即可查看每个镜头的效果。在美术风格上,创作者可选择动漫、卡通、真人3D等,每个分镜的视频长度可选择5秒或8秒,满足不同的叙事需求。

最后,创作者无需费力剪辑,分镜可以自动转换为连续视频,所有流程成果可以一键整合,快速生成最终短片。SkyReels能够自动将内容转换为1080P 60帧的高清视频,并且单次可生成视频长度达180秒,相比Sora单次可生成60秒视频、可灵单次可生成10秒视频,有显著突破。

创意是极为个性化的,作为创作工具来说,灵活性、可调整很重要。在这方面,昆仑万维介绍,SkyReels可以高精度调整,如用户可通过修改文字描述(如场景或人物动作)灵活调整分镜效果,也可以控制创意参数,调整镜头主体、人物站位、故事场景等主要描述,以及运镜方式、镜头角度、运动轨迹等参数,确保创意的精确实现。

AI赋能的短剧创作能极大程度节省创作成本,这样的一站式创作流程,不再需要高昂的专业团队和设备支持。它将对视频内容创作流程进行全面颠覆,让创作者从繁琐、复杂的制作流程中解放出来,专注于创意实现与灵感表达,让“一人一剧”的梦想成为现实。

华泰证券研报认为,“AI+短剧”模式推动剧本生产以及推广触达,能有效为短剧行业赋能。短剧行业“剧本为王”,由于短剧制作周期短,需要大量剧本储备,高效率产出优质剧本是短剧行业的重要能力。传统模式下,编剧产能有限,这种创作模式不能保证短剧产出效率和爆款率的稳定。

华泰证券认为,AI大模型可以通过快速读取大量小说,生成剧本大纲,辅助编剧进行剧本创作,提升剧本创作的效率和爆款率。除剧本创作外,AI还在短剧的素材选取、制作与后期和内容推广与反馈等环节为短剧制作方提供帮助。

此外,SkyReels AI短剧平台极大地降低了AI短剧创作的门槛,有望带来AI短剧用户生成内容(UGC)与专业用户生成内容(PUGC)的爆发式增长,推动短剧内容创作与消费市场的进一步快速增长。

在具体场景上,除了短剧,SkyReels也有更多的适用范围,如广告制作、短视频内容创作、科普、公益和宣传片、产品展示与推广等创作,对内容创造者、企业宣传部门、新闻机构、独立制作人等从业者来说,SkyReels同样有其应用价值。

AI UGC平台有巨大红利

2023年4月,在2022年年报中昆仑万维提到:展望未来十年,将坚定“All in”AGI(通用人工智能)与AIGC。

自2020年布局AIGC以来,昆仑万维在AGI与AIGC领域已有不少积累,已形成AI大模型、AI搜索、AI游戏、AI音乐、AI社交、AI视频多元AI业务矩阵,公司面向国内已率先推出搭载MoE架构并面向全体C端用户免费开放的千亿级参数大语言模型AI应用——天工AI智能助手。同时,面向海外推出《Club Koala》、Linky等多款AI产品。在生成式AI落地的当下,聚焦全球化市场,推出AI短剧创作平台SkyReels,是昆仑万维新的探索。

“未来30年是自我表达的30年。”昆仑万维创始人周亚辉对于UGC赛道也有很大的信心,“未来30年,人类社会将从感知线,变成表达线,整个人类社会在自我表达侧要翻1000倍;创作和自我表达是未来30年在整个社交和文化领域增长最快的曲线,会有越来越多人表达自我,表达对世界的理解、对社会事物的态度。”他提到,这种表达在过去很困难,因为工具门槛高,而昆仑万维要做的是,用AI把人类创作的门槛降得足够低,让人们更充分地实现自我表达。

基于这一判断,在短剧方面,昆仑万维希望建立一个新的创作生态系统,激发更多的人参与到短剧创作中来。“无论是专业的电影制作人,还是对视频创作感兴趣的普通用户,都可以在这个平台上创作、表达个性化的想法。”这是团队的愿景。

另外方汉还有一个判断是,内容创作成本降低后,每个语言都需要自己的一套产品,这时 AIGC 平台就能在全球得到红利。“综合来看,我们的机会一是做可以泛化的垂类,二还是做全球市场。”方汉提到,这个垂类可能是偏网文、短剧、动画的 IP 创作,相比to B,这类娱乐性的C 端方向更容易成为巨头。

从过往的经验中,昆仑万维观察到,内容、娱乐赛道的用户和收入增长都更明显,昆仑万维推出的Opera和StarMaker(一款音频社交产品)在100多个国家上线,月活用户均突破3亿。

昆仑万维做AI短剧产品延续了既有思路,瞄准内容与娱乐赛道的C端应用,这类应用的用户对AI输出的容错度较高,市场上限也非常高,“全球80亿人即使只有1%的用户买单,也会形成规模收入。”

AI的市场是全球化的,具体到海外的短剧赛道,也还是一片蓝海。海外短剧发展始于2022年8月ReelShort上线,后其他短剧APP陆续推出。2023年11月ReelShort登上美国iOS娱乐榜免费第1名,实现破圈。国海证券研报认为,短剧出海市场空间保守估计约为360亿美元。团队采用短剧DAU*ARPPU测算海外短剧市场空间,得出的范围为144-648亿美元,中值为360亿美元。

昆仑万维此时入局,推出一站式短剧视频创作平台SkyReels,将是全球短剧赛道的劲敌,其优势除了在大模型上的积累外,也具备十余年的娱乐产品经验和全球化视野。昆仑万维曾从0到1打造了多款千万级别DAU产品,以其目前在内容娱乐产品上的方法论积累和经验优势,将AI短剧产品在全球范围内落地推广是顺势而为。

SkyReels内测申请地址:https://skyreels.ai/beta

昆仑万维AI
新浪科技公众号
新浪科技公众号

“掌”握科技鲜闻 (微信搜索techsina或扫描左侧二维码关注)

创事记

科学探索

科学大家

苹果汇

众测

专题

官方微博

新浪科技 新浪数码 新浪手机 科学探索 苹果汇 新浪众测

公众号

新浪科技

新浪科技为你带来最新鲜的科技资讯

苹果汇

苹果汇为你带来最新鲜的苹果产品新闻

新浪众测

新酷产品第一时间免费试玩

新浪探索

提供最新的科学家新闻,精彩的震撼图片