CC-BY-NC 4.0
跨平台
Python

软件简介

DeepFocus 是一个基于 AI 可实现更逼真 VR 图像的系统。它可与高级原型头戴设备配合使用,实时渲染模糊和各种焦距。例如,当有头戴支持
DeepFocus
的设备观看附近的物体时,它会立即聚焦并变得清晰,而背景物体则会失去焦点,这与现实生活中的感观一样。这种散焦模糊(也称为视网膜模糊)对于实现 VR
中的真实感和深度感知非常重要。DeepFocus 是目前第一个能够为 VR 应用实时生成此效果的系统。

DeepFocus
使用深度学习降低了物理方法处理性能的要求,团队开发了一种新的端到端卷积神经网络,眼睛看到场景的不同部分,就会产生具有精确视网膜模糊的图像。该网络包括新的保持体积的交织层,以在完全保留图像细节的同时减小输入的空间维度。然后网络的卷积层以相同的、降低的空间分辨率运行,运行时间显着减少。

由于 DeepFocus 仅依赖于标准 RGB-D 颜色和深度输入,因此它几乎适用于所有现有的 VR 游戏和应用。