阿里巴巴推出Motionshop：AI技术让视频人物瞬间转为3D动画

8 月 28, 2024 #3D, #AI, #motionshop, #动画, #替换, #每日AI快讯, #阿里

上海枫泾古镇正门_20240824

阿里巴巴智能计算研究院的XR实验室和TIDE三维渲染团队近日发布了创新项目——Motionshop，这是一个AI角色动画框架，能够将视频中的真实人物转换为生动的3D化身，同时保留视频的原始场景和其余人物。这一技术的出现，预示着虚拟与现实的融合进入了一个新的阶段。

功能与特色

Motionshop的核心功能在于，用户只需上传视频，AI系统就能智能识别主要人物，并将其转换为3D角色模型，动作与原视频中的角色同步，保持高度的真实感。通过这一技术，现实世界的人物与虚拟角色可以无缝融合，为视频内容创作带来无限创意空间。

Motionshop的工作流程包括视频处理、角色检测、对象分割与跟踪、视频修复、姿态估计、动画映射、光影估计和3D渲染等多个步骤。借助先进的算法和TIDE高性能光线追踪渲染器，整个过程在几分钟内即可完成，确保了生成的3D角色与原始视频的流畅性和逼真度。

用户可以访问Motionshop在ModelScope魔搭社区的Demo体验地址进行操作。首先，上传一段不超过15秒的视频，系统会自动识别人物；接着，选择想要替换的3D虚拟角色模型；最后，点击生成视频，等待片刻即可获得融合了3D角色的新视频。

Motionshop的推出，不仅展示了阿里巴巴在AI领域的技术实力，也为内容创作者提供了一个便捷的工具，使得普通用户也能轻松实现虚拟现实的交互体验。这一项目不仅有望改变娱乐、教育和广告等领域的视频内容创作方式，还可能推动相关行业对AI技术的进一步探索和应用。