RevAvatar突破VR社交障碍 AI实现“反向透视”

B站影视 韩国电影 2025-09-15 15:55 1

摘要:目前 VR 设备虽已广泛应用于游戏、远程协作及教育等领域,但其头显会遮挡用户眼部及面部表情,不仅阻碍了与现实世界的视觉交流,也令周围人难以感知用户的情绪和专注状态,从而加剧了使用者的社交隔离感。

近日,新泽西理工学院与中佛罗里达大学的研究团队共同开发出一款名为“RevAvatar”的创新框架,旨在解决VR头显长期以来存在的社交隔离问题。

目前 VR 设备虽已广泛应用于游戏、远程协作及教育等领域,但其头显会遮挡用户眼部及面部表情,不仅阻碍了与现实世界的视觉交流,也令周围人难以感知用户的情绪和专注状态,从而加剧了使用者的社交隔离感。

为此,研究团队提出了一种基于人工智能的反向透视技术。该技术仅通过一张类似自拍的照片,即可实时重建用户被遮挡的面部区域,生成高保真的 2D 面部图像与准确的 3D头 部虚拟化身,并支持在头显外部屏幕上实时显示眼神与表情。

这一方案无需依赖昂贵的多摄像头或 3D 扫描设备,即可适配包括 Apple Vision Pro 和 Meta Quest 3 在内的多种消费级头显,甚至在移动芯片上也能实现毫秒级响应,保证了良好的实时性。

此外,团队还公开发布了“ VR-Face ”数据集,包含 20 万个模拟不同遮挡、光照和畸变条件的样本,可用于训练和评估 VR 场景下的 AI 模型,为后续研究提供重要资源。

实验表明, RevAvatar 在重建质量、身份特征保持和运行效率方面均优于当前主流模型。该框架不仅有效缓解了 VR 使用中的社交隔离,也为沉浸式会议、虚拟社交等应用提供了更自然、真实的交互体验,进一步推动了虚拟与现实环境的融合。

来源:新浪VR一点号

相关推荐