DeepFocus实时逼真 VR 图像合成系统

DeepFocus 是一个基于 AI 可实现更逼真 VR 图像的系统。它可与高级原型头戴设备配合使用，实时渲染模糊和各种焦距。例如，当有头戴支持 DeepFocus 的设备观看附近的物体时，它会立即聚焦并变得清晰，而背景物体则会失去焦点，这与现实生活中的感观一样。这种散焦模糊（也称为视网膜模糊）对于实现 VR 中的真实感和深度感知非常重要。DeepFocus 是目前第一个能够为 VR 应用实时生成此效果的系统。

DeepFocus 使用深度学习降低了物理方法处理性能的要求，团队开发了一种新的端到端卷积神经网络，眼睛看到场景的不同部分，就会产生具有精确视网膜模糊的图像。该网络包括新的保持体积的交织层，以在完全保留图像细节的同时减小输入的空间维度。然后网络的卷积层以相同的、降低的空间分辨率运行，运行时间显着减少。

由于 DeepFocus 仅依赖于标准 RGB-D 颜色和深度输入，因此它几乎适用于所有现有的 VR 游戏和应用。