1. 视频
  2. 图片
微软发布一款头显,可以全身3D虚拟化

分享 长期 2022-03-14

案例介绍

为了在MR应用中表现人体动作的协调, 一般需要生成逼真的人像以及忠实于人类动作姿势。

来自微软旗下的Mixed Reality & AI Lab研究团队,开发了“FLAG:Flow-based Avatar Generation from Sparse Observations”解决方案,运用 HMD(头戴式显示器)可以完成从头部到手部的三维数据跟踪,以生成佩戴者全身的3D运动。

微软的HoloLens和Meta Quest等头戴式显示器仅限于头部及手部的数据追踪,对其方位的预测,并不能体现人体全身运动,很难生成逼真的3D虚拟形象。

“FLAG:Flow-based Avatar Generation from Sparse Observations”解决方案,从HMD信号中生成人体全身,完美地解决了这一问题。该解决方案是基于流模型学习给定的人体头部和手部数据,实现3D人体姿势的分布和基础分布之间的可逆映射。并从观测数据中学习潜在空间的概率映射,对人体关节的不确定性进行预测,生成合理的姿势

据了解,通过实验评估和消融研究,该方法优于大型运动捕捉数据集AMASS的最新方案,该数据集以SMPL人体模型模拟多种全身姿势,以误差极低、优化较少著称。

项目主页:https://microsoft.github.io/flag/files/paper.pdf

案例参与

* 内容为作者独立观点,不代表数艺网立场转载须知

本文由 “数艺网” 授权数艺网发布,已由本站编辑优化排版。 转载请务必在开头或结尾标注 “作者:XXX | 来源:数艺网”,尊重原创及授权权益。 并附上本页链接: 本站部分图文取自网络,如涉及侵权问题,欢迎通过微信 ID:d-arts-cn 告知。我们会立即核实并及时处理,感谢您的理解与监督。

HoloLens

25812 举报
登录| 注册 后参与评论