Customize Consent Preferences

We use cookies to help you navigate efficiently and perform certain functions. You will find detailed information about all cookies under each consent category below.

The cookies that are categorized as "Necessary" are stored on your browser as they are essential for enabling the basic functionalities of the site. ... 

Always Active

Necessary cookies are required to enable the basic features of this site, such as providing secure log-in or adjusting your consent preferences. These cookies do not store any personally identifiable data.

No cookies to display.

Functional cookies help perform certain functionalities like sharing the content of the website on social media platforms, collecting feedback, and other third-party features.

No cookies to display.

Analytical cookies are used to understand how visitors interact with the website. These cookies help provide information on metrics such as the number of visitors, bounce rate, traffic source, etc.

No cookies to display.

Performance cookies are used to understand and analyze the key performance indexes of the website which helps in delivering a better user experience for the visitors.

No cookies to display.

Advertisement cookies are used to provide visitors with customized advertisements based on the pages you visited previously and to analyze the effectiveness of the ad campaigns.

No cookies to display.

新闻报道新闻报道
0

摘要: 阿里巴巴集团近日推出一项突破性技术——TaoAvatar,这是一种高保真、轻量级的3D全身对话虚拟人技术。该技术基于3D高斯溅射技术,能够生成照片级逼真的3D全身虚拟形象,并在移动和AR设备上实现90FPS的高帧率实时运行。TaoAvatar的发布,预示着虚拟互动领域即将迎来一场深刻的变革,为电子商务直播、全息通信、虚拟会议等诸多场景带来前所未有的可能性。

北京 – 在人工智能技术日新月异的今天,阿里巴巴再次走在了技术创新的前沿。该公司最新发布的TaoAvatar技术,无疑为数字人领域注入了新的活力。这项技术不仅能够生成高度逼真的3D全身虚拟形象,更实现了在移动和AR设备上的流畅运行,为用户带来更加沉浸式的互动体验。

TaoAvatar:技术细节与突破

TaoAvatar的核心在于其采用的3D高斯溅射(3DGS)技术。与传统的3D建模方法相比,3DGS通过使用3D高斯函数来表示场景中的点,能够更精细地捕捉物体的细节,从而生成更加逼真的图像。每个3D高斯由位置、协方差、颜色和透明度等参数描述,通过结构光(Structure from Motion, SfM)技术从多视角图像中估计3D点云,然后将每个点转换为高斯函数,使用随机梯度下降进行训练。

此外,TaoAvatar还创新性地解决了姿态依赖的非刚性变形问题。通过将复杂的非刚性变形分解为刚性变形和形状变形两部分,并利用知识蒸馏技术将形状变形“烘焙”到轻量级的MLP网络中,TaoAvatar能够高效处理复杂的姿态变化,同时保持虚拟形象的逼真度和可控性。为了进一步增强虚拟形象的外观细节,TaoAvatar引入了可学习的高斯混合形状。通过训练神经网络学习不同姿态和表情下的高斯混合形状参数,然后将这些参数应用到虚拟形象上。使虚拟形象在不同姿态和表情下都能保持极高的保真度。

为了实现高质量的实时渲染,TaoAvatar还采用了多种优化技术,如GPU加速、减少不必要的计算、优化模型结构和参数等。这些优化措施使得TaoAvatar能够在高清立体显示设备如Apple Vision Pro上,保持每秒90帧的流畅运行。

应用场景:无限可能

TaoAvatar技术的应用前景十分广阔,以下是一些潜在的应用场景:

  • 电子商务直播: TaoAvatar可以用于创建逼真的虚拟主播,提升用户体验并降低人力成本。虚拟主播可以24小时不间断地进行直播,与用户进行互动,从而提高销售额。
  • 全息通信: TaoAvatar可以在远程通信中生成逼真的虚拟形象,增强沉浸感。用户可以通过虚拟形象进行面对面的交流,从而提高沟通效率。
  • 虚拟会议: 参与者可以使用个性化的虚拟形象进行交流,增强互动性。虚拟会议可以打破地域限制,让人们随时随地进行协作。
  • 在线教育: 利用虚拟人进行在线课程教学,增加趣味性。虚拟教师可以生动形象地讲解知识,吸引学生的注意力。
  • 虚拟娱乐: 在游戏和虚拟现实应用中创建个性化的虚拟角色。用户可以扮演自己喜欢的角色,体验不同的生活。

挑战与展望

尽管TaoAvatar技术取得了显著的进展,但仍面临一些挑战。例如,如何进一步提高虚拟形象的逼真度,如何降低对硬件设备的要求,以及如何保护用户的隐私等。

展望未来,随着人工智能技术的不断发展,TaoAvatar有望在更多领域得到应用。例如,在医疗领域,虚拟人可以用于辅助诊断和治疗;在金融领域,虚拟人可以用于提供个性化的金融服务;在旅游领域,虚拟人可以用于提供导游服务。

TaoAvatar的发布,不仅是阿里巴巴在技术创新上的又一次突破,更是对未来人机交互方式的一次大胆探索。随着这项技术的不断完善和普及,我们有理由相信,虚拟互动将成为我们生活中不可或缺的一部分。

参考文献:

致谢: 感谢阿里巴巴集团研究团队为本文提供的信息和资料。

作者: [你的名字],资深新闻记者和编辑,曾供职于新华社、人民日报、中央电视台、华尔街日报、纽约时报等。


>>> Read more <<<

Views: 0

0

发表回复

您的邮箱地址不会被公开。 必填项已用 * 标注