历史上的今天
返回首页

历史上的今天

今天是:2025年03月22日(星期六)

2021年03月22日 | 人脸跟踪如何让VR变得更好

2021-03-22 来源:EEWORLD

如今的 VR 更多还是运用于电影游戏这样相对成熟的领域,想象一下,若能将 VR 运用于社交那将会怎样呢?或许,人们只需要回到自己房间带上 VR 眼镜,从此天涯变咫尺,朋友就像真正在身边一样。

 

专家称,用于虚拟现实头盔的新型面部跟踪系统可能会改变用户沟通方式。

 

 

HTC最近发布了一套新的Vive虚拟现实耳机追踪器,其中一款可以追踪面部表情和嘴部运动。这是使虚拟现实更具响应性和互动性的日益增长的趋势的一部分。

 

科技政策智库信息技术与创新基金会(Information technology and Innovation Foundation)的政策分析师Ellysse Dick表示:“要想把VR从一种新奇或小众工具完全转变为一种广泛使用的消费技术,拥有更真实的体验很重要。”

 

“它将允许更多有意义的互动和丰富的体验,将扩大教育、工作协作和娱乐等领域的市场。”

 

近日,HTC发布了一款VIVE 追踪器 (3.0)及 VIVE 面部追踪器。HTC表示,相较于前代产品,全新推出的第三代 VIVE 追踪器电池续航能力增加 75%,重量减轻 15%,覆盖体积占用减小 33%。VIVE 追踪器 (3.0)将延续其备受欢迎的前代产品在动作捕捉、影视制作、运动康复和训练、医疗、企业培训等领域的广泛应用,支持 VR 虚拟形象的全身追踪,可以无缝集成物理对象搭建扩展现实环境。VIVE面部追踪器可以追踪多达38种不同的面部动作,当它与VIVE Pro Eye配对时,用户可以开启全面部追踪功能。

 

 

该设备的响应时间在10毫秒以下,并使用双摄像头捕捉你的下半张脸的运动。由于红外照明,它也可以在低光环境下跟踪。VIVE表示,这款面部追踪器将于3月24日上市,售价129.99美元。

 

VIVE面部追踪器通过嘴唇、下巴、牙齿、舌头、脸颊和下巴的38种混合形状精确捕捉表情和手势。哪怕是一丝微笑,也会清晰捕捉到。

 

但面部追踪器并不适用于所有HTC的设备中。该公司表示,它将兼容专业级别的Vive Pro系列产品,但不兼容面向消费者的Vive Cosmos。

 

其他公司已经将面部追踪技术整合到虚拟现实设备里。Magic Leap One和微软的HoloLens都有表情跟踪功能。

 

还有一家名叫 Veeso 的国外创业公司也在这么干。具体来说,Veeso 是一个类似于普通眼镜盒子的移动虚拟现实头显,支持安卓和 iOS。Veeso 会为标准头显添加两个额外的内置摄像头。其中一个摄像机被安置在两眼之间,检测的部位包括瞳孔、眉毛以及眼睑。另外一个摄像机则悬挂在设备底部,可以识别下颚、嘴唇和口型变化。

 

现在市面上绝大多数的 VR 游戏都没有人物表情捕捉功能,虽然面部表情捕捉技术已经在电影领域运用了很多年,但其设备即为复杂,需要在人脸上贴很多标记点,并用多个摄像头进行跟踪拍摄,显然,其不适合 C 端消费者使用。

3a9186594acac08c099fa522b8e52cb4

 

但是当我们在虚拟现实世界中社交或者玩社交类游戏时,表情跟踪显示功能却又显得尤为重要,比如在玩杀人游戏时,我们可以从玩家的表情中找到蛛丝马迹等等。

 

现在Veeso已经推出了几款尚未上市的应用,其中一款是 VR 视频通话 app。该应用下的人们坐在一个虚拟的房间里进行聊天,个人形象会被卡通松鼠或者青蛙代替。但是当用户说话时,用户表情就会实时而准确的还原在卡通形象上。当然,Veeso 的这项功能还能被运用在扑克、猜谜等社交游戏上。

 

一个激进的飞跃

 

专家表示,未来面部跟踪可能会给虚拟现实带来根本性变化。软件用户界面开发先驱、argodesign首席创意技术专家Jared Ficklin表示,举例来说,头戴式设备可以了解用户对界面的反应,并据此进行调整。

 

 “想象一下,看着一个物体,用一个小小的手势来选择它,而不是试图用光标四处移动。或者将声音、眼神和手势结合起来,可以实现非常自然的互动。你也可以想象另一个方向和更小的,更少社交性的视觉线索的发展。”

 

菲克林介绍,用握紧脸颊或拉嘴角这种表情可以映射到“选择”和“返回”等交互动作,这让一些人在公共场合进行计算,而又不会让人注意。

 

“如果你正在使用可穿戴的移动电脑,尤其是以眼镜的形式,这种被社会接受或被隐藏的计算能力将变得非常重要。”

 

面部解锁通信

 

阅读表情是虚拟和现实生活中交流的关键。肢体语言专家Patti Wood表示,人脸可以产生21种基本的面部表情,虚拟现实技术可以解读这些表情。在36块用来产生面部表情的肌肉中,只有一小部分用于微笑。

 

 

“它将允许更多有意义的互动和丰富的体验,将扩大教育、工作协作和娱乐等领域的市场。”

 

Wood:“肌肉的精确数量取决于研究人员如何定义微笑。”

 

Ficklin:“面部表情跟踪可能会从根本上改变用户的虚拟现实体验,尤其是那些在远程会话中使用虚拟角色与他人聊天的用户。”

 

“这完全是关于非语言交流的重要性,”“将面部表情映射到用户的化身上,意味着与他们会面的人拥有更多非语言交流渠道,这是我们在面对面聊天或视频聊天中所期待的。”他们可以看到对方的反应。”

 

如果是那样,那就真的和面对面交流没啥区别了…


推荐阅读

史海拾趣

高创科技(gotrend)公司的发展小趣事

聚辰(Giantec)公司电子行业发展的五个故事

故事一:技术传承与独立运营

聚辰半导体股份有限公司(Giantec Semiconductor Corporation)的故事始于2009年,由美国ISSI公司与其高管共同出资成立。这家公司继承了ISSI在EEPROM和智能卡芯片技术上的专利和研发团队,为后续的快速发展奠定了坚实基础。随着ISSI公司股权的变动,聚辰半导体逐渐由国资企业接手并开始独立运营。这一转变不仅让聚辰获得了更大的自主权,也为其在存储芯片领域的深耕细作提供了有力支持。

故事二:全球布局与市场拓展

自成立以来,聚辰半导体便致力于全球化布局,不仅在上海设立总部,还在美国硅谷、韩国、中国香港、中国台湾、深圳、南京、苏州等地设立了子公司、办事处或销售机构。这一战略布局使得聚辰能够更好地服务全球客户,迅速响应市场需求。同时,聚辰的产品线不断扩展,从最初的EEPROM存储芯片,逐步延伸到NOR Flash、音圈马达驱动芯片和智能卡芯片等多个领域,广泛应用于智能手机、汽车电子、工业控制等多个行业。

故事三:技术突破与产品创新

在技术创新方面,聚辰半导体始终走在行业前列。2012年,聚辰推出的EEPROM存储芯片成功进入三星、OPPO等手机品牌的摄像头模组供应链,标志着公司在全球EEPROM存储芯片市场的地位逐渐稳固。此后,聚辰不断推出新产品,如音圈马达驱动芯片与EEPROM二合一产品,进一步提升了其在手机摄像头模组中的竞争力。同时,聚辰还积极布局汽车电子市场,多款车规级存储芯片获得市场认可,为公司带来了新的增长点。

故事四:资本市场助力与品牌提升

2019年,聚辰半导体在上海证券交易所科创板成功上市,为公司的发展注入了强劲动力。资本市场的助力不仅让聚辰获得了更多的资金支持,还显著提升了公司的品牌影响力和市场认知度。上市以来,聚辰持续加大研发投入,优化产品结构,提升产品性能,进一步巩固了其在存储芯片领域的市场地位。

故事五:荣誉加身与行业认可

近年来,聚辰半导体凭借其出色的业绩和技术实力赢得了多项荣誉和行业认可。公司多次入选中国物联网企业百强榜单、上海硬核科技企业TOP100榜单等权威榜单,彰显了其在行业内的领先地位。同时,聚辰还积极履行社会责任,参与公益事业,如向中国科学技术大学捐赠资金用于支持人工智能创新中心建设等,进一步提升了公司的社会形象和品牌价值。这些荣誉和认可不仅是对聚辰过去努力的肯定,也是对其未来发展的期待和鼓舞。

Electric Imp Inc.公司的发展小趣事

在物联网设备管理平台的基础上,Electric Imp Inc.公司不断推动技术创新。公司研发团队经过数年的努力,成功研发出了一款基于边缘计算的物联网设备。这款设备具有更高的数据处理能力、更低的延迟和更好的安全性,能够满足更广泛的应用场景。这一技术突破使得公司在物联网领域的技术实力得到了显著提升。

广东长利光电(Changli Optoelectronic)公司的发展小趣事

在广东长利光电的发展历程中,公司始终注重企业文化建设和社会责任履行。公司倡导“以人为本、诚信务实、创新进取”的价值观,为员工提供了良好的工作环境和培训机会。同时,公司还积极参与社会公益事业,为社区的发展和环境保护做出了贡献。这些举措不仅提升了公司的品牌形象,还增强了员工的归属感和凝聚力。

以上五个故事,展现了广东长利光电在电子行业的发展历程和取得的成就。从初创时期的坚持与创新,到质量管理的突破,再到市场拓展与全球化布局,以及技术升级与产品创新,最后到企业文化建设与社会责任履行,每一个阶段都充满了挑战与机遇。广东长利光电正是凭借着对LED技术的深刻理解和市场需求的敏锐洞察,不断创新和发展,成为了电子行业中的佼佼者。

Abbotec Incorporated公司的发展小趣事

随着技术的不断成熟,Abbotec开始将目光投向国际市场。公司积极参与国际电子展会,与多家国外企业建立了合作关系。通过与这些企业的合作,Abbotec不仅将产品销往全球各地,还引进了一些先进的生产技术和管理经验,进一步提升了自身的竞争力。

ESPROS [Espros Photonics corp]公司的发展小趣事

ESPROS Photonics corp(以下简称ESPROS)于2006年由Beat De Coi先生创立,总部位于瑞士。公司成立之初,就专注于芯片设计、集成与制造领域,依托其独特的光学工艺技术,为客户提供高性能的光电传感器解决方案。在中国上海,ESPROS设立了专门的芯片设计中心及技术支持部门,以更好地服务亚洲市场。

Cambridge Electronic Industries Ltd公司的发展小趣事

随着公司实力的增强和产品线的丰富,CEI开始积极寻求市场拓展的机会。公司不仅在国内市场取得了显著的成绩,还开始拓展国际市场。CEI与国际电子巨头建立了紧密的合作关系,共同研发新产品,分享技术和市场资源。这些合作不仅提升了CEI的技术水平和市场竞争力,也为其带来了更广阔的发展空间。

问答坊 | AI 解惑

中国IC产业销售收入规模及增长趋势

中国IC产业销售收入规模及增长趋势 2006-7-11     2006年第一季度,我国集成电路产业全行业共实现销售收入总额214.88亿元,同比增长54.8%。 …

查看全部问答>

基于PXA255的ARM Linux操作系统移植

摘要: Linux在嵌入式领域中应用越来越广泛,已成为最有潜力的嵌入式操作系统。操作系统的移植是进行嵌入式应用开发的前提和基础。ARM Linux是一种针对ARM体系结构的Linux操作系统。本文以新一代高端嵌入式处理器PXA255为例,进行ARM Linux的移植, ...…

查看全部问答>

请教各位前辈!!!

我是一名在校大学生,想问一下,现在Multisim 8这个电路设计软件怎么样?在实际工作中运用的多不多?本人想好好学一学!是否有这个必要?也请各位推荐下好的教程!!!…

查看全部问答>

CPES-IBM未来通信电源功率架构

CPES-IBM未来通信电源功率架构…

查看全部问答>

小车控制算法研究 高手大牛 来说说思路

车图 跑道 现在  要控制车子速度 通过一个舵机控制车头转动方向 转动的方向由前面的红外传感器检测到跑道的识别码得到 但是检测的识别码只可能尽量的和实际吻合但仍会有几度的误差 有时甚至会更多 程序会不停的扫描道路得到识 ...…

查看全部问答>

下载wince5.0内核液晶不亮,但wince4.2正常

我用的是QQ2440板子,液晶屏是FriendlyARM 8.4\'\'LCD,我将光盘自带的wince4.2的nk.bin下载后,液晶屏正常显示,但是换成wince5.0的nk.bin液晶屏却是黑屏,刚开机时能隐约看到5.0的界面,但慢慢就变黑了,哪位知道原因。对液晶屏的供电是3.3V和5V ...…

查看全部问答>

嵌入式问题

题目如下: 设计一个针对某一具体应用的嵌入式系统 要求:1有完整的系统设计方案 2对系统方案有完整说明 3有相应的印制版图 4有完整的系统调试方案 5软件流程及其说明 急 麻烦高手指点迷津 谢谢…

查看全部问答>

双网卡热备份(双网卡冗余备份)如何设计与实现呢(2)?

你好?WIN2000下,以太网网络,双网卡热备份,也就是一个网卡坏了,另一个冗余网卡热切换,两个网卡同一个IP地址,实现方案是什么?使用哪些工具,技术?代码是什么?请问做双网卡热备份,是不是在ndis的例子PASSTHRU的代码基础上,修改即可?怎么修改?希望不 ...…

查看全部问答>

求助:USB HID设备无法访问题

我在做一块usb声卡,这是一个USB Composite Device,Firmware写完了,现在想做pc host的app,要对HID的endpoint4写数据,打开设备的时候能得到设备路径,但是无法读写,部分代码如下。     //Open the USB device     char c ...…

查看全部问答>

类CPdd16550中m_dwWaterMark是用来干什么的?

类CPdd16550中m_dwWaterMark是用来干什么的? 是波特率的mark呢还是安全相关的mark? 有劳各位!…

查看全部问答>