阿里通义实验室发布了名为Motionshop的框架,可以用3D角色替换视频中的角色。该框架由两部分组成:一部分用于提取和修复背景视频序列,另一部分用于生成3D角色视频序列的姿势估计和渲染。整个过程可以在几分钟内完成,利用了高性能光线追踪渲染器TIDE。用户可以在魔搭社区试用Demo,在上传不超过15秒的人物视频后,选择替换人物和虚拟角色模型,等待大约10分钟即可生成替换后的视频。
项目主页:
https://aigc3d.github.io/motionshop
试用地址:
https://modelscope.cn/studios/Damo_XR_Lab/motionshop/summary