雨果巴拉:行业北极星Vision Pro过度设计不适合市场

Facebook用AI训练VR化身进行音乐演奏表演

文章相关引用及参考:映维网

虚拟化身能够栩栩如生地弹奏乐器

映维网 2017年12月30日Facebook的人工智能(AI)研究团队想到了一个巧妙的方法,让AR/VR中的虚拟化身能够栩栩如生地弹奏乐器。

在一份新发表的论文中,Facebook的研究科学家Eli Shlizerman、Ira Kemelmacher-Shlizerman以及协作者Lucio Dery、Hayden Schoen共同探讨了,他们如何通过国外视频网站YouTube上的钢琴和小提琴演奏视频来训练AI系统。他们利用该AI系统来指导虚拟化身进行表演,基于录制的音频在虚拟的乐器上移动手和手指,实现虚拟化身“实时音乐演奏”的效果。

Facebook的研究科学家在YouTube上传了一个说明及演示视频,在Facebook的社交VR应用“Spaces”中演奏。他们说:“我们坚信,音频与人类形体直接的关系,在广泛的AR/VR应用以及认知上具有极大的前景。”

相关论文:Audio to Body Dynamics

本文链接https://news.nweon.com/39912
转载须知:转载摘编需注明来源映维网并保留本文链接
素材版权:除额外说明,文章所用图片、视频均来自文章关联个人、企业实体等提供
QQ交流群苹果Vision  |  Meta Quest  |  微软HoloLens  |  AR/VR开发者  |  映维粉丝读者

您可能还喜欢...

资讯