Table of Contents

头显设备录屏：记录沉浸式 AR/MR 体验

在使用增强现实（AR）或混合现实（MR）头显设备进行开发、测试或用户支持时，录屏是复现和分析问题的重要手段。然而，与移动设备不同，头显录屏涉及到透视（Passthrough）、注视点渲染（Foveated Rendering）等特殊技术，录屏画面通常并非完全等同于用户双眼直接所见的完整立体视图。因此，在解读录屏内容时，需特别注意其与实际人眼体验之间的差异。

为什么头显录屏存在视觉差异？

用户必须特别注意：头显设备的录屏画面并不完全等于您在镜片后看到的实际画面。如果在录屏中发现了异常，请务必结合实际感受进行描述，以免误导开发人员。

以下是主要差异点：

  1. 分辨率与清晰度差异
  • 录屏：通常是单眼（如左眼）1080p 或更低分辨率的视频流。
  • 人眼：根据应用的不同，现代头显的单眼分辨率可达 2K 甚至更高。
  • 影响：您在录屏中看到的文字、画面模糊，在头显内可能不存在；反之，您在头显内看到的微小边缘锯齿，录屏可能完全看不出来。
  1. 视场角（FOV）差异
  • 录屏：录制的画面通常是方形的。尤其在宽视场角设备中，边缘内容常被裁切。
  • 人眼：人眼看到的画面是双眼显示的，视野更大。
  • 影响：如果您的问题发生在视野边缘，录屏可能无法准确体现。
  1. 注视点渲染（Foveated Rendering）影响
  • 录屏：全屏视野中所有内容都会包含在内，包括低分辨率边缘区域。
  • 人眼：人眼注视中心是高分辨率的，而非注视中心边缘是低分辨率的。
  • 影响：您实际感觉画面很清晰，但回看录屏时发现部分区域是模糊的。这通常是正常现象，并非Bug。因此，在录屏时务必专注于要展示的部分，这将确保该区域是清晰的。
  1. 帧率与刷新率影响
  • 录屏：录制视频的帧率通常以 30FPS 或 60FPS 的帧率进行。
  • 人眼：实际体验的屏幕刷新率可能达到 90Hz 或者 120Hz。
  • 影响：非常轻微的帧率下降在录屏中可能无法察觉，但人眼会感受明显的“卡顿”或“眩晕感”。如果录屏看起来流畅但实际体验则不然，这通常是性能问题，在录屏后务必说明。

OST 头显的特殊说明

特别注意：如果您使用的是 OST（Optical See-Through, 光学透视）头显，例如 Rokid、Xreal 等 AR 眼镜，使用录屏功能并不能录制到人眼看到的实景内容。

什么是 OST 设备？

OST 设备通过半透明的光学镜片直接将光线投射到您的眼中，虚拟内容则通过微型投影或波导叠加在视野中，让您同时看到真实世界和叠加的虚拟图像。它拍摄外部世界的摄像头仅用于空间定位，并不用于显示。由于这一机制，设备本身无法“录制”人眼所见的真实场景。

OST 设备录屏的局限性

  • 无法录制实景：OST 设备的录屏功能只录制虚拟内容层（GUI、3D 模型、UI 指针等）。
  • 背景是黑的：您在电脑或手机上回放这段视频时，看到的将是纯黑色背景上的虚拟物体，完全丢失了真实环境的上下文。
  • 遮挡关系丢失：如果虚拟物体应该被真实物体（如您的手、桌子）遮挡，在录屏中它们会悬浮在黑屏上，看起来像是错误的层级关系。

虚拟内容叠加的视觉误差问题

即使在理想环境下，OST 头显所呈现的虚拟内容与真实世界之间的对齐也不可避免地存在一定程度的视觉误差。这类误差并非总是由软件 bug 或跟踪失效引起，而往往源于设备物理特性与人类视觉系统的根本差异，部分误差在当前技术条件下无法完全消除。

在提交反馈时，注意区分以下情况：

  • 光学对齐误差：
    • 现象：当您移动头部时，虚拟物体似乎在“漂浮”或与真实物体的位置有微小偏差。
    • 原因：用户透过光学镜片直视现实世界，而虚拟内容的渲染坐标系通常基于头部跟踪与环境理解系统（如 SLAM）构建。由于光学显示光路与用于空间定位的摄像头/IMU 之间存在物理偏移，且难以做到亚像素级联合标定，虚实对齐在边缘视野或近距离场景中尤为敏感。
  • 人眼标定局限：
    • 现象：虚拟物体看起来有重影（鬼影）、边缘模糊，或者感觉图像没有正确投射在空间中。
    • 原因：OST 设备极度依赖精确的瞳距 (IPD) 和眼球位置标定。如果设备没有针对您的眼睛进行精确校准，或者您佩戴头盔的位置发生了偏移，光学引擎投射的光线就无法准确进入您的瞳孔。然而，即便设备存在校准，但校准过程基于有限采样点，难以精确匹配每位用户的眼球几何结构、角膜曲率及视觉感知习惯。微小的标定偏差会导致虚拟物体在深度或横向位置上出现系统性偏移。
  • 个体视觉差异：
    • 现象：不同用户对虚拟内容位置的主观判断可能不同。
    • 原因：不同用户的视力(如近视、散光)、动态聚焦能力等都会影响观察虚拟内容叠加效果的主观判断，OST 设备可能缺乏实时眼动跟踪与个性化光学校正能力，因此无法针对每个用户动态补偿这些差异。
  • 环境因素干扰：
    • 现象：在明亮环境下虚拟内容变淡、看不清甚至不可见；在暗环境下虚拟内容过曝、甚至产生鬼影。
    • 原因：OST 设备将微型投影或波导的虚拟光线与真实世界的环境光线直接叠加。如果真实环境过亮，会盖过微弱的虚拟光；反之亦然。这种光学伪影是 OST 设备的固有光学特性。
注意

此类误差属于 OST AR 眼镜技术的固有特性，而非功能故障。在问题排查时，请区分“可修复的软件/跟踪问题”与“受硬件与生理限制的体验边界”。若用户反馈涉及轻微错位、边缘畸变或深度感知不一致，建议先确认是否处于设备标称的使用条件（如工作距离、光照范围、校准状态）内。

如何处理 OST 设备的反馈？

如果您在使用 OST 设备时遇到视觉问题，在排除以上设备局限带来的因素之后，您可以进行录屏进行反馈。但单纯提交录屏内容通常是不够的：

  1. 配合照片：请使用手机拍摄一张您透过镜片看到的实际画面照片（称为“眼视角照片”）。这能展示虚拟物体与真实环境的相对位置。
  2. 描述环境：详细描述您所处的环境（光照条件、背景颜色、是否存在动态如行人等），因为 OST 的显示效果极度依赖环境光。

常见头显设备的录屏方法

注意

录屏过程中设备可能降低渲染帧率或分辨率，影响对流畅度和跟踪稳定性的判断。建议在复现问题后尽快录制，避免长时间运行影响结果。

Apple Vision Pro

  1. 抬头看屏幕顶部，直到看到控制中心点。专注于这一点并单击。
  2. 注视并点击 控制中心 > “录制我的视野”按钮 开始录制。
  3. 若要停止录制，打开控制中心，然后再次轻点“录制我的视野”。
  4. 您的视野录制会存在“照片”App 中。

PICO 4 Ultra Enterprise

  1. 打开控制中心 > 设置 > 通用 > 投屏、录屏与截屏，在“录屏和截屏”中选择录屏模式为“空间”。
  2. 短按手柄的 Home 键，在屏幕弹出的菜单中选中“录屏”按钮，扣动扳机键开始录屏。
  3. 此时系统会有开始倒计时提示，立即退回至待录制应用的界面，在倒计时结束后自动开始录制。
  4. 再次短按手柄的 Home 键，重复选择“录屏”按钮即可停止录制。
  5. 您的录制文件默认保存在设备的“内部存储/DCIM/ScreenRecord”目录。

Rokid AR Studio

  1. 进入桌面，找到底部状态栏，点击用户头像旁边的“快捷设置”区域。
  2. 在弹出的窗口中点击“录制”按钮，立即退回至待录制应用的界面。系统自动开始录制。
  3. 点击 Station Pro 上 X 按钮退回桌面。再次点击“快捷设置”区域的“录制”按钮即可停止录制。
  4. 您的录制文件默认保存在设备的“内部共享存储空间/ScreenRecorder”目录。

XREAL Air2 Ultra

  1. 在 Beam Pro 屏幕上下滑呼出眼镜的控制中心，点击上方的“录屏”按钮。
  2. 此时系统会有倒计时提示，立即退回至待录制应用的界面。
  3. 点击屏幕上方悬浮的红色“停止”按钮即可停止录制。
  4. 您的录制文件默认保存在设备的“内部共享存储空间/Movies/Record”目录。

最佳实践建议

使用头显录屏反馈问题时，关注以下几点：

  • 提交时明确标注设备型号、录屏方式及环境因素。
  • 若问题涉及深度、遮挡或跟踪抖动，补充文字描述人眼实际观察到的现象，因为录屏可能无法准确呈现。
  • 对于关键场景，可配合外部摄像机拍摄用户佩戴头显时的实景操作，以提供更全面的上下文。

头显录屏虽便捷，但始终是对体验的近似还原。最可靠的诊断仍需结合日志、传感器数据与用户主观反馈。有关日志采集方法，请参阅: