阿里Animate Anyone跳舞火了,作者带你解读背后技术

阿里Animate Anyone跳舞火了,作者带你解读背后技术
2023年12月11日 13:38 机器之心Pro

从 GAN 开始,研究者一直在不断深入了解将图像进行动画化以及进行姿态迁移的探索,然而,生成的图像或视频仍然存在局部失真、细节模糊、语义不一致和时间不稳定等问题,从而阻碍了这些方法的应用。

近半年来,随着视觉 AIGC 技术的速度发展,视频生成相关技术正在进行高速迭代。然而人物作为视觉内容一个重要主体,和人物相关的视频生成仍然面临巨大的挑战。一个重要的原因是在生成人物运动视频的同时,需要保持人物外观的短时连续性和长时一致性,目前大部分视频生成算法都还做不到这一点。

上周四阿里巴巴 XR 实验室在 arxiv 上公开了 Animate Anyone 论文,实现了基于人物图片生成可控且一致的人物视频,在国内外的社交媒体上得到了非常多的讨论。

Animate Anyone 示例展示:钢铁侠、梅西都扭起来了。
Animate Anyone 示例展示:钢铁侠、梅西都扭起来了。

为了更好的帮助大家了解这项研究,机器之心最新一期线上分享邀请到了论文作者之一胡立,为大家解读他们近期的工作。这次分享将聚焦于解读 Animate Anyone 的相关技术解读以及对该技术在实际产业中的应用案例探索。

分享主题:Animate anyone 技术及应用

嘉宾简介:胡立,毕业于浙江大学,目前工作于阿里巴巴 XR 实验室,在视觉相关的顶会 CVPR/ICCV/ECCV 等发表过多篇论文,获得过 COCO2019 目标检测、DAVIS2020 视频分割竞赛冠军。目前研究方向聚焦于 Human-Centric AIGC,包括图像、视频生成,数字人等领域。

分享摘要:

  • 技术背景及研究动机

  • Animate Anyone 算法介绍

  • 算法扩展及应用案例探索

  • 论文链接:https://arxiv.org/pdf/2311.17117.pdf

  • 项目链接:https://humanaigc.github.io/animate-anyone/

直播间:关注机器之心机动组视频号,立即预约直播。

交流群:本次直播设有 QA 环节,欢迎加入本次直播交流群探讨交流。

机器之心 · 机动组

机动组是机器之心发起的人工智能技术社区,聚焦于学术研究与技术实践主题内容,为社区用户带来技术线上公开课、学术分享、技术实践、走近顶尖实验室等系列内容。机动组也将不定期举办线下学术交流会与组织人才服务、产业技术对接等活动欢迎所有 AI 领域技术从业者关注

图像阿里直播
新浪科技公众号
新浪科技公众号

“掌”握科技鲜闻 (微信搜索techsina或扫描左侧二维码关注)

创事记

科学探索

科学大家

苹果汇

众测

专题

官方微博

新浪科技 新浪数码 新浪手机 科学探索 苹果汇 新浪众测

公众号

新浪科技

新浪科技为你带来最新鲜的科技资讯

苹果汇

苹果汇为你带来最新鲜的苹果产品新闻

新浪众测

新酷产品第一时间免费试玩

新浪探索

提供最新的科学家新闻,精彩的震撼图片