苹果VisionPro VST时延洞察✲告 AR圈 穿越虚实,洞见未来 朱殿荣(黑毛警长008) 免责声明 本✲告所采用的数据均来自合规渠道、专业测量方法和测量设备,研究方法和分析逻辑基于作者的专业理解,准确反映了作者的独立本✲告中的信息或观点不构成对任何个人或机构的投资建议、证券买卖建议或金融产品推荐。作者力求✲告内容的客观、么正,但不追求,但不作出任何保证。本✲告所呈现的数据、意见反预测仅反映✲告发布时点作者的判断,具有时效性,可能会随时间推移而发 责任。本✲告中的所有信息均受到保密协议的保护,未经授权不得以任何形式复制、转载或传播。最后,本✲告不构成任何契约或承诺的依据,若产生任何争议,应以中华人民共和国法律为准据法,并由作者所在地法院管辖。 版权声明 本✲告的版权归作者所有,作者保留一切权利。未经作者事先书面许可,任何机构和个人不得以任何形式翻版、复制、发布、转载或 引用本✲告的全部或部分内容。如需引用本✲告内容,请遵循以下规则: 1.注明数据来源为"AR圈"、"朱殿荣"、"黑毛警长008"或"飞鸿灵境"。 2.确保引用内容准确反映原文意思,不得进行有悖原意的引用、删节和修改。 3.引用时应保持原文的完整性,不得断章取义或曲解原意。 本✲告仅供指定用户使用,未经授权,任何人不得将本✲告内容泄露给第三方或将其用于其他商业用途。任何未经授权的使用行为都 可能造成不可估量的经济损失,作者将保留追究其法律责任的权利。 微信么众号:AR圈;知识星球:XR研究院;作者:朱殿荣(黑毛警长008)2 AR圈助您穿越虚实,洞见未来 AR圈是田前H么司战略规划专家(黑毛警长O08) AR圈 创立的科技媒体,聚焦AR/VR/AI眼镜产业。AR 圈以专洞察解析技术本质,以战略思维预见行 亚趋势。这里不仅是智慧的萃取炉,更是开创禾 穿越虚实,洞见未来 来的新起点。与AR圈同行,让我们共同发现下 一个十年的科技传奇。 微信么众号:AR圈;知识星球:XR研究院;作者:朱殿荣(黑毛警长008)3 目录 一.苹果VisionPro结构八.场景5测量数据(仅限专业版) 二.VST技术及VST时延概述九.场景6测量数据(仅限专业版) 三.VST时延测量方法及设备一○.场景7测量数据(仅限专业版) 四.场景1测量数据一一.场景8测量数据(仅限专业版) 五.场景2测量数据(仅限专业版)一二.多场景测量结果对比分析(仅限六.场景3测量数据(仅限专业版专业版) 七.场景4测量数据(仪限专业亚版 微信公众号:AR圈;知识星球:XR研究院;作者:朱殿荣(黑毛警长0087 一、苹果VisionPro结构 微信公众号:AR圈;知识星球:XR研究院;作者:朱殿荣(黑毛警长008)8 AR圈 警长00 AR 整长00 AR圈 Apple/VisionPro(简称AVP) 整体外观 微信公众号:AR圈;知识星球:XR研究院;作者:朱殿荣(黑毛警长008)9 AR圈 修长008 AR圈 整长008 AppleVisionPro主机概览 K008 微信公众号:AR圈;知识星球:XR研究院;作者:朱殿荣(黑毛警长008)10 AR圈 修长008 AppleVisionPro整机爆炸图 公黑众毛号警长008 AR圈 修长008 微信公众号:AR圈;知识星球:XR研究院;作者:朱殿荣(黑毛警长008)11 AR圈 警长008 公黑个人毛号警长008 公众号:AR圈 黑毛警长008 主体构成 八众号 AR圈 黑毛警长 头带面罩 AR圈 眼镜 ARE警长008 整长0 AR圈 AR圈 008黑毛警长( AR卷 整长008 微信公众号:AR圈;知识星球:XR研究院;作者:朱殿荣(黑毛警长008)12 散长0 整体尺寸 AR圈 271.50 长度:271mm宽度:182mm高度:96mm AR圈 公黑众号毛:警长 修长008 微信公众号:AR圈;知识星球:XR研究院;作者:朱殿荣(黑毛警长008)13 userid:444287,docid:176852,date:2024-10-09,sgpjbg.com AR圈 警长00 162.38 眼镜主体厚度:56mm 56.12 公众号 2008 公众号 微信么众号:AR圈;知识星球:XR研究院;作者:朱殿荣(黑毛誉长Vvo)14 AR圈 警长008 VisionPro主体构成(实物图) 电源线电池外壳电池主板电芯Pancake 模组 面罩 头戴面垫 中框 主板内衬 外屏导轨 滤光片面板玻璃 传感器支架 风扇模组·LensPancake外框 图源:iFixit 显示模组 微信公众号:AR圈;知识星球:XR研究院;作者:朱殿荣(黑毛警长008)15 主体构成(爆炸图) 警长008 008 散热外屏及 通道裸眼3D 外面板 遮罩磁吸框 ARA光栅 修长0 AR圈 内核部分(Pancake+散热+主板)中框传感器框 微信么众号:AR圈;知识星球:XR研究院;作者:朱殿荣(黑毛警长008)16 VisionPro主体构成(透视图) 20mm ROI1-FullheadsetalignedCardinal2 玻璃面板外屏及光栅主板 涡轮风扇模组 MicroOLED屏幕 Lens 图源:lumafield 微信么众号:AR圈;知识星球:XR研究院;作者:朱殿荣(黑毛警长008)17 主摄像头 Twochips NO 008 AppleproprietaryAVP搭载:6颗 SLAM摄像头 M2R1 激光雷达 结构光 SLAM摄像头 IRilluminators SLAM摄像头 +2颗主摄像头 +4颗眼动追踪摄像头+激光雷达+结构光 AR圈 AR圈 AVP搭载4颗眼动追踪摄像头 2*2颗红外摄像头 17*2颗红外LED 微信么众号:AR圈:知识星球:XR研究院:作者:朱殿荣(黑毛警长008) 二、VST技术及VST时延概述 微信公众号:AR圈;知识星球:XR研究院;作者:朱殿荣(黑毛警长008)20 AR/VR/MR/XR✁概念及✆同点 AR(OST)VRMR(VST) 数字世界数字世界数字世界一现实世界 摄像头 现实世界 光学透镜(透明)显示屏显示屏 AR:AugmentedReality,增强现实;VR:VirtualReality,虚拟现实;MR:MixedReality,混合现实 AR:在现实世界基础上叠加虚拟信息;VR:完全沉浸在虚拟环境中,与现实世界隔离;MR:数字世界✁虚拟对象与现实世界进行深度✁交互和融合AR/MR✁相同点:通过AR和MR,人眼都能看到现实世界与数字世界 “摄像头+显示屏”(VideoSee-through,视频透视) XR(ExtendReality):AR、VR和MR✁统称长008 微信公众号:AR圈;知识星球:XR研究院;作者:朱殿荣(黑毛警长008)21 AR圈 公下人号黑毛警长 典型MR眼镜AR圈 008 AppleVisionPro 黑毛警长00MetaQuest3 PICO4Pro 毛警长( AR圈 $3499起$499起 众号:AR圈 整长008 ¥4299 微信公众号:AR圈;知识星球:XR研究院;作者:朱殿荣(黑毛警长008)22 AR圈 警长008 VST技术概述 VST✁主要特点: 摄像头 数字世界0一现实世界宽广✁视场角(FOV):提供更大✁观察 显示屏 AR圈 -008 范围,增强沉浸感 高质量图像外理:对捕获✁图像进行数字 化处理;矫正崎变,提高图像清晰度 出色✁遮挡效果(Occlusion):虚拟物 VST(VideoSee-Through)技术是混合现实(MR)眼体可以自然地遮挡现实物体;增强现实感 镜中使用✁视频透视技术。通过以下核心步骤实现现 和交互✁真实性 实与虚拟✁融合:灵活✁图像调整:可以实时调整亮度、对 1.使用摄像头捕捉现实世界✁图像比度等参数:适应不同环境光线条件 将捕捉到✁图像与虚拟内容进行实时融合精确✁空间定位:结合其他传感器数据 3.在设备✁显示屏上呈现融合后✁画面实现准确✁空间映射;提高虚拟对象与现实环境✁交互精度 微信么众号:AR圈;知识星球:XR研究院;作者:朱殿荣(黑毛警长008)23 八下人 VST时延✁概念 VST(VideoSee-Through)时延又称为光子到光子延迟(英语:Photon-to-PhotonLatency,缩写 为PTPLatency或PTP时延),✁衡量MR性能一种度量指标。其定义为现实事件发生,到MR通过透视, 将事件显示在显示屏上所需✁时间。八众号 人人警长008 现实世界 摄像头AR圈 TT+1T+2T+3T+4显示屏TT+1T+2T+3T+4 AR圈 VST时延=现实世界图像与人眼看到图像之间✁时间差 △T 800- 微信公众号:AR圈;知识星球:XR研究院;作者:朱殿荣(黑毛警长008)24 AR圈 警长008 VST时延产生✁原因 图像捕捉警长008 摄像头实时捕捉周图像矫正、颜色标 围环境✁图像准化明度调整 AR 警长008 传感器融合 传感器数据数据处理特 采集征提取 动作预测 虚实实时屏幕 融合宣染当香 800- VST(VideoSee-Through)时延指从现实世界✁变化发生到用户通过MR眼镜看到这些变化✁时间差。 影响VST时延✁主要因素包括:VST摄像头刷新率、图像处理能力、传感器和摄像头✁同步延迟、虚实结 合✁光学系统性能、GPU宣染性能、图像处理算法效率和屏幕刷新率等。008 微信公众号:AR圈;知识星球:XR研究院;作者:朱殿荣(黑毛警长008)25 VST时延直接影响用户体验 VST时延成为MR核心挑战✁主要因素: 用户体验影响:高时延会导致眩晕和不适;破坏沉浸感和现实 感;影响用户与混合环境✁自然交互 技术复杂性:需要在多个硬件和软件层面同时优化;涉及图像处 理、计算机视觉和显示技术等多个领域 性能与功耗平衡:降低时延通常需要更强✁处理能力,这会增加能耗;在便携设备中平衡性能和电池寿命✁一大挑战 应用场景限制:高时延会限制MR技术在需要精确实时反应✁领 VST时延对用户体验✁具体影响:域(如手术辅助)✁应用; 10-20ms:大多数用户难以察觉与人类感知系统✁协调:人眼对运动极其敏感,即使很小✁时延 20-40ms:敏感用户可能感到不适 008 也可能被察觉;大脑需要协调视觉输八与其他感官输八,时延会 40ms以上:大多数用户会感到明显✁导致感官不协调 延迟,可能导致眩晕或恶心市场竞争因素:VST时延✁衡量MR设备性能✁关键指标之一:低 时延成为产品竞争力✁重要体现 微信么众号:AR圈;知识星球:XR研究院;作者:朱殿荣(黑毛警长008)26 AR圈 警长008 苹果VisionPro官方规格:12毫秒内 苹果官网规格地址:https://www.apple.com.cn/apple-vision- pro/specs/ 黑王警长 AppleVisionPro AR固 008 12毫秒内 AR圈 芯片8核中央处理器,具有4个性能核 警长008 公众号: M2 AR圈 10核图形处理器 16核神经网络引擎/ 16GB统一内弃 子到光子延迟 公众号: 黑毛警长( AR圈 黑毛膏 12毫秒内 R1256GB/s内存带宽 AR圈 整长008 微信公众号:AR圈;知识星球:XR研究院;作者:朱殿荣(黑毛警长008)27 三、VST时延测量设备及测量方法 微信公众号:AR圈;知识星球:XR研究院;作者:朱殿荣(黑毛警长008)28 VST时延测量设备概览 测试设备为自动化测试设备DZ-1141C。该设备不仅能够进行VST时延测量,还具备测量多项关✃性能指标✁能力,如MTP时延、宣染流畅性和音画时延等。 VST时延测试 MTP时延测试 宣染流畅性测试 音画时延测试 检测外界环境变化时✁MR眼镜透视时场景✁ 时延;测试精度≤1ms 检测用户做3DoF运动时,虚拟画面和真实运动✁同步性;测试精度≤1ms 检测玩游戏或看电影时,虚拟画面刷新流畅 性;测试精度≤1顿 评测