为机器人提供一站式双向透视解决方案,万有引力 GravityXR E100低功耗空间渲染和显示专用芯片
扫描二维码
随时随地手机看文章
在原HUAWEI天才少年创办的智元机器人上,实现了3D落眼数字面部表情,表情是浮在其机器人头部的外面的,大家可以感受它的立体的感觉。而这项技术背后,来自于万有引力( GravityXR )的反向透明计算处理芯片技术加持。
在今天召开的第十五届松山湖中国IC创新高峰论坛上,万有引力(宁波)电子科技有限公司市场营销总监张武龙先生为大家介绍了公司最新的技术创新——EB100:面向机器人与XR应用的低功耗空间渲染和显示专用芯片。
EB100:反向透明计算处理芯片,实现更快呈现体验
从2024年开始,GravityXR推出一款名为EB100的反向透明计算处理芯片,采用12nm工艺,主要应用于数字人技术,并应用于特定的RST领域。
EB100芯片的设计目标是为XR和机器人领域提供低功耗、高效能的解决方案。张武龙先生特别提到,EB100芯片通过集成3D模型实时重建与驱动技术,可以实现更加精确和流畅的3D显示效果,尤其是在面部表情渲染方面,EB100芯片比苹果的技术实现了更高的亮度和分辨率,解决了传统设备在低亮度条件下的显示问题。同时,EB100芯片能够与市场上的XR移动端芯片(如高通8代、K3588芯片)和PC芯片协同工作,形成强大的协同效应,为用户提供更快的呈现体验。
这是一款专为空间渲染和显示设计的芯片,支持3D模型实时重建与驱动,能够处理3D显示图像并增强其效果。它还具备多视角平行渲染和多图层混合的能力,能够提供高效的图像处理。此外,EB100支持PCIe、USB 3.0和MIPI接口,并且能够通过提供SDK、ASIC和3D显示组件的整体解决方案,支持客户在XR和机器人领域的需求。
如下图展示了EB100芯片与XR2、XR2 Gen2芯片的配合工作方式。EB100芯片可用于面部扫描、实时跟踪和UI图层处理,它通过USB3.0/PCIe2连接进行数据传输,利用XR2 Gen2芯片的资源来支持离线建模、初始化校准、面部渲染、光源引擎、图形管道和模块补偿等功能。此外,EB100还与RST显示模块协同工作,完成显示与光学堆栈的校准和组装,确保XR设备的精准显示和用户交互。
通过先进的空间渲染技术和数字人技术,GravityXR公司为XR和机器人行业提供的一站式双向透视解决方案。这个方案由APP、SDK、ASIC(EB100芯片)以及定制3D显示模块组成,可以实现角色情感的实时捕捉与渲染,特别是在面部表情和眼部细节的处理上。该方案还支持无缝内容融合与共享,能够集成数字UI层,方便内容的展示与共享。同时,解决方案提供了增强角色情感表现空间的功能,通过为Avatar(数字化身)加入精美的3D表情和艺术效果,提升用户的沉浸感和交互体验。
EB100应用前景广阔:XR教育、数字人、具身智能等
EB100芯片作为万有引力(宁波)电子科技有限公司推出的低功耗空间渲染和显示专用芯片,其核心技术不仅为XR和机器人领域提供了强大的支持,还在多个实际应用场景中展现出了巨大的潜力。在XR领域的教育培训应用中,EB100芯片通过其强大的实时渲染能力,能够为教师和学生提供更加沉浸的互动体验。教师佩戴XR头盔,能够实时查看学生的视角,从而进行精准的教学指导。同时,EB100芯片支持面部表情和肢体动作的捕捉与传输,能够更加生动地展示教学内容,增强学生的学习体验。通过混合现实技术,学生能够与虚拟内容进行互动,获取更加直观和深入的理解。
例如,在一门科学课程中,学生可以通过XR头盔与虚拟实验设备进行互动,不仅能看到实验过程,还能实时了解实验原理和结果。这种体验方式显著提高了学习的趣味性和实用性,尤其适用于需要动手操作的实践性科目。
在数字人和虚拟角色的应用中,数字人不仅可以用于客户服务、虚拟助手等,还能与真实用户进行实时互动。通过AI和面部识别技术,EB100能够根据用户的面部表情生成高度逼真的虚拟形象,并将其实时映射到XR设备或机器人平台上。
例如,在虚拟会议中,用户可以使用EB100芯片生成虚拟形象,并与其他与会者进行面对面的互动,突破了物理距离的限制。在客户服务场景中,数字人可以通过EB100芯片与用户进行自然流畅的对话,提升用户体验。
在机器人领域,EB100芯片的低功耗和高效能特点使其成为具身智能机器人的理想解决方案。通过EB100,机器人能够实时渲染并表达面部表情,提升与用户的情感交流能力。该技术广泛应用于智能陪伴机器人、远程医疗机器人等领域。
例如,在智能陪伴机器人的应用中,EB100芯片能够使机器人生成真实的面部表情,并与远程用户进行互动。家长可以远程佩戴XR头盔,与家中的陪伴机器人进行对话,机器人通过EB100芯片同步面部表情,增强亲密感和互动性。这种技术使得机器人不仅仅是一个工具,更能成为与用户建立情感联系的伙伴。
不止于此,EB100芯片的实时面部表情捕捉与渲染技术,能够在虚拟社交和娱乐领域提供极为丰富的体验。用户在佩戴XR设备时,可以与朋友或家人通过虚拟角色进行互动,甚至在虚拟空间中共同参与游戏或其他娱乐活动。
例如,用户可以在虚拟社交平台中通过数字人代表自己,进行语音对话和面部表情同步,享受更加自然、真实的社交体验。此外,结合XR设备和EB100芯片,虚拟娱乐内容的呈现也更加生动,用户可以在虚拟世界中享受与现实无缝连接的互动体验。
EB100芯片凭借其在低功耗、高性能和实时渲染方面的优势,广泛应用于XR、机器人、数字人和虚拟角色等多个领域。无论是教育培训、数字人生成、具身智能机器人,还是虚拟社交和娱乐,EB100芯片都能够为这些应用提供强大的技术支持。随着技术的不断进步,EB100芯片将在未来的多个行业中发挥越来越重要的作用,推动数字交互和虚拟现实的全面发展。
结语
E100只是个起点,到2025年,万有引力计划发布X100芯片,这是一款功能全面的空间计算处理芯片,基于5nm + 12nm工艺,专为混合现实(MR)应用设计,同时也将与AR眼镜等设备配合使用。而在2026年,GravityXR的目标是推出X200芯片,这是一款AI辅助的MR-Lite芯片,专注于AI驱动的MR应用。此外,VX100 AI/AR ISP芯片也在开发中,旨在通过12nm工艺实现AI与AR的深度结合,进一步推动增强现实和人工智能技术的应用。整个路线图表明GravityXR致力于提供不断优化的芯片解决方案,以满足日益增长的MR、AR和AI市场需求。