基于网媒融合的沉浸式通信技术蓝皮书

沉浸式通信：基于网媒融合的6G技术展望

沉浸式通信作为6G的核心应用场景，旨在实现更智能、自然、真实的多模态交互，推动信息交互范式从“在线”向“在场”的根本性跨越。其核心特征包括全感官化、交互实时化、虚实一体化、智能内生化以及多元协同，覆盖虚实融合生产生活、全息远程协作、工业数字孪生、智能体协同等典型场景。

沉浸式通信的核心挑战：

• 基础理论与算法构建： 缺乏语义级评价测量体系，难以衡量信息传递的意义；传统通信机制在异质网络环境中的局限性；内容价值非均匀分布与网络资源非对称配置的错配；网络与媒体的“双向感知”鸿沟；以“智能用户”为中心的融合愿景与多维资源异构性的矛盾。
• 网络标准技术演进： 极致吞吐量与小区容量的挑战；确定性极低时延与调度灵敏度挑战；高可靠性与移动性体验连续性挑战；终端功耗与能效的平衡挑战；沉浸式通信集成多类数据流的同步传输挑战；系统跨域融合的复杂性；泛在实时挑战；安全可信挑战。
• 媒体资源适配协同： 边缘实时渲染和AI推理与终端低功耗的核心矛盾；沉浸式通信的多模态交互、3D超写实数字人、体积视频等强实时渲染和AI推理场景对网络边缘算力和存储提出了严峻挑战。
• 其他研究瓶颈： 能效瓶颈；安全挑战；隐私保护困境；标准化挑战。

网媒融合：沉浸式通信的解决方案：

• 基础理论： 面向任务/语义的通信理论，基于网媒融合的联合编码技术。
• 新范式： 用户语义导向的网媒融合架构，网络与媒体双向感知，通感智算存多维资源置换。

关键技术：

• 网侧协同： AI内生网络，算网融合架构，确定性网络。
• 媒侧适配： 语义编解码技术，沉浸式媒体编解码，通信感知一体化，全息呈现与全感官交互。

应用场景：

• 文娱与消费： VR大空间，全息演唱会。
• 工作与协作： 沉浸式多人协作，远程全息会议，远程专家指导，基于AI智能体的机房智能巡检。
• 教育与个人： 沉浸式学习，个人生活助理。

产业发展：

• 产业链生态： 芯片，算力基础设施，内容生态，XR智能终端。
• 产业赋能路径： 技术赋能，生态赋能，场景赋能，产业赋能。
• 标准化与国际合作： 沉浸式通信标准化进展，沉浸式媒体技术标准化进展。

未来展望：

• 以用户沉浸式体验为中心的智能体终端。
• 基于生成式大模型的多模态数据重构与分发。
• 语义驱动的沉浸式通信技术架构。
• 面向沉浸式通信的通感一体化与数字环境重构。

未来工作倡议：

• 聚焦核心技术攻关。
• 加快标准体系建设。
• 推动场景融合应用。
• 构建协同生态体系。