【锋巢网】
近日,全球智能移动设 与沉浸式科技的创新领袖 HTC VIVE 在 SIGGRAPH 2024 大会上 宣布将与英伟达(NVIDIA)合作,将 NVIDIA ACE 技术集成到 VIVERSE 虚拟形象系统 (VIVERSE Avatar)中,增强其在扩展现实(XR)中互动的真实感和真实性。
HTC VIVE 的沉浸式 XR 开放平台 VIVERSE 一直致力于为用户提供最具沉浸感的使用体 验。VIVERSE Avatar 是一个开放的虚拟形象创建系统,不仅提供多种全身虚拟形象风格,还允许用户导入 VRM 3D 模型虚拟形象,在 VIVERSE 中创建自己的身份。
NVIDIA ACE 是一套可以将数字人变得栩栩如生的技术。其中一项技术 NVIDIA Audio2Face NIM 微服务,可以根据语音语调匹配出丰富的面部表情。在本次 SIGGRAPH 2024 大会的 NVIDIA Inception 初创企业创新区,参观者可以戴上 VIVE XR 精英套装,体验ACE NIM 与 VIVERSE Avatar 的实时集成演示。
Audio2Face NIM 支持多种语言,可以应用于从卡通到写实等各种虚拟形象风格。这种多 样性与 VIVERSE 的开放平台方法完全契合,用户可以使用开放的 VRM 标准导入虚拟形象,或者从头创建自己的卡通头像。通过将 Audio2Face NIM 集成到 VIVERSE Avatar 中,团队可 以更自然地协作,减少远程工作中的沟通问题。根据《福布斯》杂志报道,超过 50%的远程员工经历过这种问题。
NVIDIA ACE 的集成演示彰显了 VIVERSE 对不断提升协作和生产力功能的承诺。早些时 候,VIVERSE 便已推出了独家 3D 串流技术——Polygon Streaming,一种低延迟、高保真度 的 3D 模型可视化技术。Polygon Streaming 用途广泛,可以应用于建筑和设计等领域,提供可视化 3D 模型。
“集成 NVIDIA ACE NIM 微服务为我们的虚拟形象技术带来了更大的细腻度,联手克服了 XR 协作中的一个重大挑战,”VIVERSE 总经理林俊吴表示。“我们很高兴参加今年的创新 区,展示 HTC VIVE 和 NVIDIA 技术结合带来的影响。”
“在 XR 中释放更多动态互动的潜力一直是一个关键追求,”NVIDIA 数字人产品管理总监 Seth Schneider 说。“NVIDIA Audio2Face NIM 与 VIVERSE Avatar 的集成实现了动态口型同步,增强了对话体验。”
HTC VIVE 的沉浸式 XR 开放平台在各行各业中展示出了重要作用。例如,HTC VIVE 曾 与美国贝尔直升机公司(Bell Helicopter)和硬石酒店(Hard Rock Hotel)合作,使用 VIVE 的 VR 头戴设备进行设计和原型制作。这些合作大大加快了项目进度并降低了成本,节省了数年时间和数百万美元。
通过创造更具吸引力的虚拟环境,提供先进的 XR 培训,促进更好的协作等方式,VIVERSE 沉浸式 XR 开放平台为组织提供了巨大的价值。例如,远程团队可以在虚拟会议中互动,增强沟通和生产力。此外,XR 培训可以模拟真实场景,为员工提供安全有效的技能培养 方式。
HTC VIVE 之前曾与 NVIDIA 合作,将 NVIDIA CloudXR 集成到 VIVE Focus 3 头显中。此集成允许 XR 应用程序的远程渲染,用户可以在沉浸环境中设计、修改和协作处理大型资产。HTC VIVE 将继续为全球用户提供最有效和最前沿的沉浸式解决方案。欲了解更多信息,请访问 VIVERSE 网站,并试用 NVIDIA Audio2Face 预览。