1-1 快手虚拟世界互动平台及解决方案

快手虚拟世界互动平台及解决方案

背景与现状

• 虚拟世界互动：在虚拟空间中进行沉浸式的多人互动，包括社交、游戏、展览等。
• 常见形态：云蹦迪、互动游戏、演唱会等，具有用户友好、形式灵活、迭代迅速的特点。

平台方案

• 快手虚拟世界互动平台（KMIP）
  • 包括PC软件、App、H5等多种形式。
  • 主要功能模块包括信令/音视频接入层、计算层、智能调度、鉴权、AI引擎、端云协同、视觉技术、语音技术、基础层自研云平台、网络、CPU/GPU、存储、三方云平台、图形引擎、物理引擎、渲染引擎、资产库、3D模型、动作库、交互信号、音视频RTC实时推流等。

软件方案

• 快手虚拟演播助手（KVS）

  • 面向PGC的数字人驱动及开播工具。
  • 功能包括3D数字人和场景的一站式能力、丰富的特效玩法、多平台推流直播。
  • 架构：直播电商虚拟人表情驱动、智能文娱虚拟拍摄、绿幕抠像及光影融合、虚拟人语音驱动、业务场景虚拟人肢体驱动、互动特效能力层、多机位运镜、虚拟世界互动等。

• 快手面捕助手（KFC）

  • 面向UGC的数字人驱动及直播工具。
  • 功能包括面部、肢体、手部的动作捕捉与驱动，丰富的预置模型，支持DIY捏脸，Live2D、VRM模型导入等。
  • 架构：虚拟人表情驱动、虚拟主播（娱乐、游戏等）、虚拟人拼脸及DIY、虚拟人语音驱动、业务场景虚拟人肢体驱动、互动特效能力层、从PSD原画重建虚拟人场景及挂件、虚拟世界互动等。

项目案例

• 主播与主播互动场景：多个虚拟主播同屏直播互动。
• 主播与观众互动场景：虚拟主播+真人主播+观众虚拟化身参与云蹦迪、演唱会等活动。
• 其他创新场景：互动剧、主播+观众虚拟化身互动/打赏等。

总结与展望

• 软件平台：快手虚拟世界互动平台（KMIP）、快手虚拟演播助手（KVS）、快手面捕助手（KFC）等。
• 合作伙伴和技术内容运营：合作伙伴、技术内容运营、硬件设备、3D资产、文字图像视频（长/短视频、直播）、XR（AR/MR/VR）、生态流量策略运营活动资源整合等。