| 新闻中心 | 合作共赢,崇德铸品,卓越恒久

facebook展示oculus rift 2 全身动捕技术,从骨架到肌肉、毛发、服饰-凯发app

t
2019-05-07 浏览:111次 来源:映维网

 2019年05月05日) s在今年游戏开发者大会gdc上发布之后迎来了一些从业者的质疑声,因为他们希望看到的是备受期待的 2,而不是一款 rift改进版。面对这种情况,oculus在采访回应中解释说oculus rift 2太具颠覆性而不适合现在推出。

延伸阅读

在这些采访回应中,oculus也透露说第二代vr头显应该具备全身动捕追踪功能,言下之意oculus rift 2可能会具备这些功能。这显然有点不可思议,因为当下的全身动捕追踪技术非常笨重庞大,需要大量的外部设备,如惯性传感器、马克点标记等等。而且相对于一款消费者设备,当前市面上的动捕系统都是面向企业端,定价高达数万数十万。

1. 无标记动捕

然而这种疑问都在今年的facebook f8大会上被挥去,因为facebook正式介绍了他们的凯发登录的解决方案,而这有望颠覆全身动捕市场。在facebook f8大会的第二天主题演讲中,oculus公司的research supervisor ronald mallet登台介绍了这一研究成果。

ronald mallet说:“我们的codec avatar技术在捕获面部方面实现了突破性的逼真感,但真正的人类交流需要完整的身体语言。”


ronald mallet表示现有的动捕技术扩展至vr面临多个挑战,需要大量的硬件,大量的人工,大量的数据,以及大量的时间来打造一个虚拟化身,这导致动捕技术难以扩展并广泛地用于vr,并且不能允许用户定制自己的虚拟化身。

为了解决这个挑战,所以facebook开发了一种无标记的动捕技术,在有限的传感器数量下,利用人工智能技术来复刻完整的身体运动。那他们又是怎么做到的呢?

2. 设计人体骨架模型

ronald mallet说:“你的大脑控制着肌肉,肌肉驱动着骨骼,骨骼反过来又驱动组织和皮肤以及表面的衣物,骨骼反过来又驱动组织和皮肤以及表面的衣物。所以为了用有限传感器的数据来复刻所有这一切,并且渲染完整的3d虚拟化身,我们需要采用一个复刻人体解剖学的身体模型。这个模型需要完全自动地适配任何一个人,并且需要基于真实的人类行为。”


为了打造这个模型 他们首先研究了医学刊物,并且利用了先进的医学成像参考,然后再设计符合解剖结构,并且有着合理接合和自由度的人体骨架。

ronald mallet说:“这个模型比传统动画制作中的模型要复杂得多,你可以想想要做到专注于你的微妙姿势。你的肩胛骨是如何运动,你的臀关节又是如何运动,或者你的关节是如何伸展。接下来我们匹配这个骨架和用户身体结构,并且实时地将其制作成动画,当用户四周走动时模型能够继续适配用户,并且忠实地复刻用户的运动。”

3. 捕捉肌肉活动

但这并不够,oculus认为没有肌肉表现可能会让虚拟化身有点诡异,所以他们还复刻了肌肉活动的实时追踪,并展示了对oculus研究员tony的一段演示视频。



oculus表示该演示只采用了 1 个传感器进行捕捉

ronald mallet继续解释说:“令骨架表达出情感的是肌肉,肌肉运动对理解行为和意图非常关键。所以这个片段是用于说明对tony肌肉活动的实时追踪。但要做到这一点,我们利用了他身体的惯性以及骨骼肌肉系统,来帮助我们预测和平滑化他的运动。要创建逼真的身体,建模肌肉收缩时出现的变形同样重要。”

4. 捕捉服饰、毛发

不仅仅是对人体的骨架的全身追踪,oculus表示对人体身上的服饰、毛发的逼真还原同样重要。


ronald mallet说:“我们采用了视觉观察法来推断身体几何,并且重构其形状。然后我们应用了基于物理的模型来重构实际的衣服变形,而且我们需要逼真地匹配人们的真实服饰。”

5. 未来挑战

ronald mallet所展示的这一切都无需动捕套装或标记,而且是实时进行的。只需有限的硬件进行捕捉,这是非常突破性的进步。但面对大众消费市场,这个凯发登录的解决方案还存在延迟问题。

ronald mallet解释说:“你可以想象,延迟是关键。在将其变成可行的产品之前,这是我们需要克服的一大挑战。我们同时需要一种只利用现有传感器,即可允许用户轻松生成虚拟化身并实现动画化的方法。”


  • 权利的游戏番外篇 | hbo推出“夜王”ar效果滤镜

    2017-09-01
    一点想大家对这句话应该不是很陌生吧,此句话的出处来自于最近热播的美剧《权利的游戏》第七部。每次人们说这句话,就带了点阴险的诡异的语气。的确如此,冬天对马丁创造的这个世界,是很危险的。不错,也许大家已经猜到了,一点今天给大家讲的有可能是和权利的游戏有...
  • 如果你没试过vr设备,看完我们老大的反应应该就会“吃土“了!

    2017-09-01
    也许,没有体验过vr的人根本不明白一个简简单单的vr头戴究竟有多沉浸?有些人始终不明白为什么带上那个眼睛,竟然能摔倒,简直不可思议?有那么真实吗?纳尼?纳尼?why? 来来来,下面一系列图片看我公司老大是如何沉浸在其中不能自拔的。...
  • vr与医疗的完美结合,15种新应用被发挥到极致

    2017-09-01
    说起vr,大多数人的刻板印象仅限于游戏,可是各位有所不知,vr可以应用在各行各业当中,vr与医疗结合也能碰撞出激情的火花。 在今年五月份,kalorama信息咨询公司的报告称,vr和ar医疗市场从2012年的5.25亿美元增长到2017年的月9.76亿美元。 ...
  • 教育部发布《2017年中国互联网学习白皮书》 vr/ar促进教育创新进程加速

    2018-04-13
    vr/ar促进教育创新进程加速 《2017年中国互联网学习白皮书》(以下简称“白皮书”)正式公布,由教育部教育管理信息中心、数字学习与教育公共服务教育部工程研究中心、百度教育共同编著。针对2017年互联网学习,白皮书公布了...
  • 我们距离《头号玩家》里的虚拟幻境还有多远?

    2018-04-02
    电影《头号玩家》故事发生在离我们并不遥远的2045年,世界经济濒临崩溃,百业凋零,印象中唯一能拿的出手的高科技只剩下虚拟现实vr和无人机。人们也逐渐对残酷的现实不再抱有希望,而虚拟现实游戏成了无所事事的人们唯一的精神寄托。 ...
  • 大众集团通过vr培训一万名员工

    2018-03-30
    在2017年初,大众集团就已经部署了vr平台“volkswagen digital reality hub group”,以帮助奥迪,西亚特,斯柯达和大众品牌的员工进行协作。现在,这家公司表示他们正准备进一步深入应用虚拟现实,利用与innoactive合作开发的30多个vr培训...

全国电话:400-0471-910 

座  机:0471-3481343     

手  机(微信):13789418942   

公众号

全国电话:400-0471-910 

座  机:0471-3481343     

手  机(微信):13789418942   

网址:www.ceyee.cn


地址:

内蒙古自治区呼和浩特市玉泉区南二环路138号玉泉大厦4层内蒙古策义vr 5g产业创新基地


策义  策义集团  策义科技 策义科技集团  内蒙古策义科技集团股份有限公司

凯发app的版权所有:内蒙古策义科技集团股份有限公司   网站地图 :