
8月19日,昆仑万维(37.500, 0.00, 0.00%)发布全球首个集成视频大模型与3D大模型的AI短剧平台SkyReels。SkyReels平台集剧本生成、角色定制、分镜、剧情、对白/BGM及影片合成于一体,让创作者“一键成剧”,轻松制作高质量AI视频,“一人一剧”时代来临。
SkyReels能够通过AI一键生成完整剧本、分镜、人物对白与BGM,支持角色形象、音色与分镜的自定义调整,并能够自动将内容转换为1080P 60帧的高清视频,单次可生成视频长度达180秒,相比Sora单次可生成60秒视频、可灵单次可生成10秒视频,有显著突破。一键整合所有创作成果,极大提高视频的创作效率,降低创作成本,推动“一人一剧”时代加速来临。
同时,WorldEngine结合了引擎的精确可控能力(如光照模拟、物理模拟、3D空间、实时交互等) 以及AI视频大模型的幻想生成能力,提供了全新的线上混合视频创作模式,让视频创作从模糊生成迈向更加精确可控。
SkyReels亮点如下:
全自动化剧本生成:用户输入概念或创意,AI将一键生成一份结构完整、情节丰富的剧本,并支持已有剧本的自动整理与润色,提高创作效率。
高质量情节设计:系统通过分析大量剧本情节,生成高质量的故事情节、戏剧冲突、爽点及情感表达,保证剧本的丰富性与吸引力。
智能分镜生成:根据剧本内容,一键生成分镜图片和对应的文字脚本,用户还可自由调整分镜、镜头角度、运镜方式等参数,确保创意的精确实现。
情感化对白/BGM:通过情感化语音合成技术,赋予角色自然的句间停顿、情感表达、抑扬顿挫,并基于视频内容自动生成AI BGM,让画面与音乐完美融合。
个性化定制:支持角色形象、音色和分镜的智能生成与自定义调整,满足创作者的个性化需求,并提供动漫、卡通、真人3D等多种视觉风格选择,适应不同创作者的偏好和内容表达需求。
内容一致性与精确性:确保角色与场景在不同分镜中的一致性,同时根据故事描述自动推演角色表演,实现人物表情、动作、台词的协调一致,提升故事表现力。
高效视频生成:自动将分镜转换为连续高清视频,提供1080P 60帧输出,确保流畅的观看体验。
便捷的后期合成:一键整合所有创作成果,并可快速导出和分享,支持多种格式下载,方便后期编辑。
SkyReels的AI剧本生成功能基于昆仑万维自研剧本大模型SkyScript打造。
为了让AI生成的剧本具备短剧的高密集爽点剧情,昆仑万维首先构建了亿级的高质量短剧结构化数据集SkyScript-100M,该数据集针对海量精彩短剧的剧情节奏、爽点、情绪变化进行了高质量标注;
其次算法团队设计了渐进式生成的剧本生成框架,实现了模型能够输出高度结构化的精彩剧本,无论是新手作者还是资深剧作家,都能通过它激发创意,轻松创作出引人入胜的短剧剧本。

短剧创作的另一重要环节——分镜生成,则由昆仑万维自研分镜生成大模型StoryboardGen提供底层技术。StoryboardGen是昆仑万维首创的的基于DiT-MoE架构(基于Diffusion Transformer技术的Mixed-of-Experts混合专家架构)的分镜生成模型,能够实现高密度分镜信息生成,大幅增强视觉叙事表达能力。
输入剧本后,StoryboardGen模型会将剧本拆解成全局与主体两部分,全局部分包括场景、景别、构图等对分镜的整体描述,主体部分包括角色形象、动作人物角色的定制,最终汇集至故事板(Storyboard)智能体生成完整分镜。StoryboardGen的专项多智能体架构,能够有效保证人物与场景的可控性和一致性,创造出高质量的工业级分镜。

在最终的影像生成环节,WorldEngine是业界首个将AI 3D引擎与视频大模型深度融合的创新平台。这是一项划时代的技术创新,WorldEngine以图层融合技术为桥梁,打造出前所未有的3D与视频混合创作模式。
用户使用SkyReels生成AI视频时,可以对任意元素自由选择使用3D AI引擎生成或者视频大模型生成,该创新模式突破了当前AI视频大模型时常出现的“穿模”、“反地心引力”等反物理规律现象,最大程度实现了物理模拟的精细度与视频大模型的幻想创造力的完美融合。自此,AI视频生成大模型将从“模糊控制”时代走向“精确可控”时代。
在3D AI引擎方面,昆仑万维自研的Sky3DGen大模型能够生成多样化的3D元素和场景,从自然景观到未来都市,从静态物体到动态角色,并提供了实时的3D场景交互能力,使得用户可以即时看到调整和编辑的效果,加快创作流程。在WorldEngine的加持下,用户还可以轻松构建3D虚拟影棚,实现虚拟拍摄的梦幻体验。
人物表演是短剧画面呈现的核心环节之一。因此,在AI人物表演方面,昆仑万维SkyReels团队专门研发了ActorShow人物生成模型,使得SkyReels所生成的AI人物有着更强的口型表情和肢体动作的可控生成能力,角色呈现更自然。
而针对视频后期合成中遇到的光照差异、风格差异等需求,昆仑万维SkyReels团队单独训练了专门的融合生成模型,使得图层融合后的视频呈现良好的一致性。
昆仑万维AI短剧平台SkyReels的推出,标志着全球AI短剧创作的一次技术飞跃,它将对视频内容创作流程进行全面颠覆,让创作者从繁琐、复杂的制作流程中解放出来,专注于创意实现与灵感表达,让“一人一剧”的梦想成为现实。
此文内容为企业供稿,仅供参考。


APP专享直播
热门推荐
吕国泉委员:建议每周上班不超44小时 收起吕国泉委员:建议每周上班不超44小时
- 2025年03月04日
- 11:32
- APP专享
- 扒圈小记
23,330
在白宫质疑泽连斯基着装,美国记者称遭死亡威胁
- 2025年03月04日
- 08:18
- APP专享
- 扒圈小记
12,451
鸿蒙智行称遭某公司操纵上万账号诋毁 该公司多人已被公安机关缉拿归案并被检察院依法批准逮捕
- 2025年03月04日
- 09:55
- APP专享
- 北京时间
8,220

24小时滚动播报最新的财经资讯和视频,更多粉丝福利扫描二维码关注(sinafinance)
投资研报 扫码订阅
股市直播
-
北京红竹今天 01:09:08
早上好 -
波段擒龙今天 01:09:05
【波段擒龙直播室风险提示】1、本人郑重声明不承诺收益,不代理财,不私下收费;2、本直播室中的证券投资相关信息内容均为网络摘录·整合,仅供学习参考,不构成股市投资建议;3、请各位投资者理性投资,根据自身经济实力、投资经验和风险承受能力独立做出投资决定。 -
趋势领涨今天 01:08:57
富时中国A50指数期货在上一交易日夜盘收涨0.31%的基础上高开,现涨0.4%。国内期货主力合约大多数下跌,集运欧线跌超8%,菜粕跌超3%,燃油、低硫燃料油(LU)、SC原油、橡胶、玻璃跌超2%;涨幅方面,原木涨超1%。 -
徐小明今天 01:04:17
【盘中直播】早上好 -
波段擒龙今天 01:03:09
早上好,欢迎您加入本直播室!刚来的朋友请点击屏幕顶部的【关注】按钮,以便实时获取盘面分析更新,确保投资之路不偏离方向。感谢大家的支持!简介:华源证券广东分公司投资顾问王君毅,华南理工大学学士,目前担任广东广播电台特邀嘉宾,21财经网栏目嘉宾,曾担任第三届粤港澳大湾区高峰论坛嘉宾。 -
趋势起航今天 01:02:55
从技术上看,大盘反弹幅度我们预判,不过量能萎缩,大结构看还是一个强势震荡,但是小结构看处于弱势,压力位就在3350点,这个位置没有突破之前都属于短期弱势震荡,只有突破之后才能算是盘整节奏,中期只要不破3300点出现3卖就不能说行情结束。 -
趋势起航今天 01:02:47
全球首个人形机器人(sz300024)半程马拉松将在北京亦庄举办。盘后人形机器人(sz300024)又来利好了,全球首个人形机器人(sz300024)半程马拉松将在北京亦庄举办,时间是4月13日。机器人(sz300024)跑半马这事儿,虽然没太多实际用途,但只要能完赛就是一个很好的信号。人形机器人(sz300024)现在在风口,也有各种落地的举措。接下来要看哪些公司真实受益了,蹭热点的可能会被慢慢抛弃。 -
趋势起航今天 01:02:40
海南华铁(sh603300)公告称,全资子公司海南华铁(sh603300)大黄蜂建筑机械设备有限公司与杭州X公司签订了《算力服务协议》,为X公司提供算力服务,算力服务期5年,预计合同总金额为36.9亿元(含税)。本合同为算力服务合同,合同履行期限较长,预计平均每年产生营业收入约7亿元。盘后一个重磅新闻,海南华铁(sh603300)公告与杭州某公司签订36亿算力租赁大单,基本这家杭州公司就是阿里云了!因为阿里刚公布要在未来三年投资3800亿搞AI基建,叠加盘中还有个消息,杭州开展阿里巴巴集团云和AI投资计划本地配套供应商摸排,那基本是实锤了。海南华铁(sh603300)算力大单落地,算力租赁逻辑是顺的。前两年国产算力行情靠美股映射,今年靠大量的订单+业绩催化!重点关注杭州算力公司,深圳算力公司,阿里、字节、腾讯、华为等算力公司。当然,今天海南华铁(sh603300)基本锁定涨停板,基本上是买不到的!其它算力租赁概念股已经涨幅不小,所以留一份清醒一分醉,不要乱追。 -
趋势起航今天 01:02:30
盘后消息,国务院新闻办公室将于明天上午11时30分举行吹风会,请《政府工作报告》起草组负责人解读《政府工作报告》,并答记者问。国务院新闻办公室将于今天上午11时30分举行吹风会,解读《政府工作报告》。A股也正式进入两会时间了。大家重点关注政府工作报告中,今年的GDP增长目标以及CPI、财政赤字率、专项债规模等目标数字,这直接影响2025年经济刺激的力度!还有相关产业政策方面表述,去年的低空经济首次写入政府工作报告,就引发一轮炒作。今年机会比较大的是机器人(sz300024),总之,今天两会正式开始了,各个有预期的方向可能会动一动了,养老、消费、机器人(sz300024)、人工智能、低空经济等等!可以考虑埋伏一下说不定就轮动到了。另外,今天的首场“部长通道”也有有看头,尤其工信部、科技部、发改委的关于产业的表述,如果有超预期的也会引起市场炒作。 -
冯矿伟今天 00:59:51
最新博文:《冯矿伟:周三操作策略》【更多独家重磅股市观点请点击】