七鑫易维AI智能眼镜研报总结
一、核心观点:眼球追踪是AI智能眼镜的下一个关键功能
研报指出,随着XR(扩展现实)头显技术的成熟,眼球追踪已成为AI智能眼镜发展的关键功能需求。当前眼球追踪应用广泛,未来将推动人机交互进入第三次革命,从键鼠交互、触控交互升级为眼手口多模态自然交互。眼球追踪不仅能提升交互效率和精准度,还能降低延迟、功耗,提高续航能力,成为智能眼镜的核心竞争力。
二、关键需求场景及解决方案
1. 自然交互
- 优势:眼球追踪通过注视点定位,仅需传输注视区域图像,大幅降低传输流量(压缩至原来的几十分之一),节省模型资源并缩短延迟(从10-30秒降至3秒)。
- 应用:智能设备控制、拍照录像对焦、AR信息显示、多任务场景下的UI切换与自动隐藏/显示等。
- 解决方案架构:结合视觉分割、AI眼球追踪数据、视觉数据、文字及语音输入,通过AI大模型(如Qwen、SAM、LLaMa等)融合信息并输出,支持多模态交互(眼、手、口)。
2. 视觉健康
- 应用:斜视监测、弱视监测、视觉疲劳监测、用眼时长/距离监测等。
- 技术:通过眼球追踪数据结合AI算法,实现精准的视觉健康评估。
3. 认知健康
- 应用:监测认知障碍(如老年痴呆、多动症、自闭症、抑郁症等)。
- 技术:利用眼球追踪数据辅助诊断和干预。
4. 便捷支付
- 方案:虹膜识别结合眼球追踪,提升身份认证安全性。
- 优势:无需额外动作或硬件,成本更低,安全性更高。
5. 商业分析
- 应用:人因分析、消费者分析、广告分析、教育培训、工作质量监督等。
- 解决方案:提供aSee Studio商业眼动分析系统,支持多种分析工具、一键生成报告及行业定制化服务。
6. 驾驶安全
- 应用:车载系统交互、注意力监测、疲劳监测。
- 技术:通过眼球追踪实时监测驾驶员状态,提升驾驶安全。
7. 具身智能
- 应用:将人类眼动数据作为机器人训练数据,实现类人感知与交互。
- 意义:推动机器感知、自中心AI、情境智能等领域发展。
8. 表情追踪
- 应用:数字人社交应用的核心功能。
- 技术:结合眼部动作捕捉和AI嘴部追踪,实现逼真的数字人表情。
9. 虚实融合
- 问题:佩戴偏离导致虚拟图像与真实世界失真。
- 解决方案:实时校正显示坐标系,结合眼球坐标系和世界坐标系,实现虚实融合。
三、解决方案整体架构
技术路线
- 视觉AI方案:功耗极低(<40mW@30FPS@AR),预计2026量产。
- DVS+感算一体方案:高精准度,成熟度高,适用于VR/MR头显。
- 传统PC方案:基础方案,适用于特定场景。
架构组成
- 硬件:眼球追踪模组。
- 算法:眼球追踪算法。
- SDK/API:支持开发者集成,兼容OpenXR,可定制。
- 数据:时间戳、注视点坐标、瞳孔位置等。
四、解决方案特点与优势
- 户外场景优化:专为户外设计。
- 低功耗:常开功耗<40mW,AI交互接近0。
- 轻小:重量<0.5g,尺寸<2mm×2mm×2mm,不影响外观。
- 高精准度:0.2°~1°。
- 低延迟:<5ms。
- 快速校准:晃动手机即可完成。
五、七鑫易维公司简介
- 成立时间:2009年,专注眼球追踪16年。
- 业务领域:AI、XR、智能驾驶、医疗、消费电子等。
- 技术积累:专利申请超600项,授权约300项,全球领先。
- 合作与产品:与30+XR/AI企业合作,推出十余款上市产品。
- 融资:连续三年获高通投资,高通ISV。
- 产品线:Xvisio、SeerLens、云境、Mix One等。
- 未来规划:7款保密中的AI/AR智能眼镜产品。
六、研究结论
七鑫易维凭借其技术领先性、丰富的行业积累和强大的解决方案能力,在AI智能眼镜眼球追踪领域占据核心地位。其低功耗、高精准度、快速校准等技术优势,结合多模态交互、商业分析、驾驶安全等多样化应用场景,为智能眼镜的普及和升级提供了关键支撑。未来,随着眼球追踪技术的进一步成熟,七鑫易维有望在具身智能、数字人等领域持续拓展市场空间。
七鑫易维路伟成
AI智能眼镜下一个关键功能需求场景和对应的解决方案解决方案整体架构解决方案特点和优势七鑫易维公司简介
目录
一、AI智能眼镜下一个关键功能
AI智能眼镜的下一个关键功能
二、需求场景和对应的解决方案
AI智能眼镜眼球追踪需求场景
第三次人机交互革命
AI交互
不精确效率很低
交互精确效率很高
AI交互
有眼球追踪,只需要将注视点附近的部分图片传输给大模型,还可以结合AI视觉分割,只需要传输被注视的物体部分,进一步压缩传输的图像大小。
无眼球追踪,需要将整个图片传输给大模型。
•传输流量大•浪费大模型资源•延迟高:10-30s
•传输流量压缩到原来的几十分之一,提高续航•节省大模型资源•提高传输速度和大模型处理速度,降低延迟至3s
w w w . 7 i n v e n s u n . c o m让 世 界 读 懂 你 的 眼 神
智能眼镜交互
02
03
01
AI多模态交互
智能设备控制
拍照录像对焦
焦点提醒:注视点移出拍摄框或者过偏,可以进行提醒。注视点对焦:拍照或录像时,注视点可用于自动对焦。
基于注视点的多模态AI交互,提高交互效率和精准度,降低延迟,降低功耗,提高续航。
可以利用眼球追踪的指向性,提高智能设备的交互效率和交互准确性。如在多台同种设备的情况下,眼球追踪可以精准指定。
①自然交互
①自然交互
七鑫易维AI交互解决方案
七鑫易维AI交互解决方案
七鑫易维AI/AR交互解决方案
②视觉健康
认知健康
便捷支付
便捷性
不需要任何动作
和眼球追踪采用相同硬件不需要额外任何成本
额外的硬件成本
•虹膜识别是智能眼镜最适合的身份认证方式•眼球追踪可以进一步提升虹膜识别安全性
⑤商业分析
七鑫易维商业分析解决方案
七鑫易维驾驶安全解决方案
具身智能
“为更广泛的研究领域提供支持,特别是在机器感知、自中心AI、情境智能和机器人技术等领域。”
表情追踪
七鑫易维表情追踪解决方案
佩戴偏离
每个用户佩戴智能眼镜的位置不可能完全一致。
运动偏离
佩戴过程中会因为运动等各种原因使眼镜位置发生偏离或晃动
七鑫易维虚实融合解决方案
三、解决方案整体架构
技术路线
02
03
01
视觉AI方案
VR/MR头显推荐高精准度成熟度高
AI智能眼镜首选没有环形结构满足眼镜时尚性、多SKU
功耗极低延迟极低预计2026量产
Ø时间戳Ø主眼推荐Ø校准评分Ø注视点坐标Ø瞳孔位置Ø瞳孔直径Ø眼睑位置Ø眼皮开合度Ø眨眼Ø注视方向Ø眼球中心坐标Ø瞳孔到镜片距离Ø虹膜识别Ø注册Ø认证
七鑫易维是Khronos组织成员,API可兼容OpenXR,可定制
四、解决方案特点和优势
方案特点和优势
专门为户外使用设计研发
常开情况下
< 40mW
@30FPS @AR1
一般AI交互接近于0
<0.5g
<2mm×2mm×2mm
对外观几乎影响
0.2°~1°
w w w . 7 i n v e n s u n . c o m让 世 界 读 懂 你 的 眼 神
< 5ms
人眼可以感知的延迟:50-70ms
盯着手机晃几下头
五、七鑫易维公司简介
七鑫易维
•2009成立,专注眼球追踪16年•业务覆盖AI、XR、智能驾驶、医疗和消费电子等领域•眼球追踪专利申请超600项,授权约300项,全球领先•与超过30家XR/AI企业合作•十余款XR/AI眼球追踪上市产品•连续三年获得高通投资,高通ISV
部分已上市AI/AR眼球追踪产品
亮亮视野Lieon Pro眼球追踪配件
正在开发的AI/AR智能眼镜产品
7款
应合作企业要求,保密中
七鑫易维XR/AI发展历程
七鑫易维XR/AI发展历程
部分合作企业
汇报人:路伟成