TWeTalk Voice Agents for Hardware 研报总结
产品介绍
TWeTalk 是腾讯云面向智能硬件的 AI 对话软硬一体化产品方案，提供端侧、云端与通信能力，与主流嵌入式芯片及模组厂商合作，实现人与硬件的自然“对话”。产品特点包括：
- 语音端到端：快速接入，积木式组装，提供语音智能体。
- 情绪识别：独特的意图理解 ASR 引擎，精准捕捉用户情绪与意图。
- 音色定制：TTS 支持音色定制，结合实时交互与灵活打断。
- 对话集锦：智能生成与 AI 的精彩对话片段，留存暖心交流瞬间。
- 应用技能：支持微信通话、音乐播放等。
- 微信与设备双向音视频呼叫：支持 P2P/TRTC/WebSocket 通道云端通信。
应用场景
TWeTalk 适用于 AIoT 多个场景，包括：
- 消费电子：AI 陪伴玩具、智能耳机/手表/AI 眼镜、故事机/AI 拍学机等。
- 泛互/出海：智能点餐、导览、AI 面试等。
- 家居、工业制造：设备控制、AI 机器人等。
- 芯片原厂：嵌入式语音模组开发。
功能与特点
- 独特的意图理解 ASR 引擎：支持语音识别、情绪识别和意图理解。
- TTS 音色定制：支持输入情绪标签与音色克隆功能。
- 精调大模型：适配玩具、机器人等场景，提供准确执行 function call 的引擎。
- TWeTalk 方案架构：提供可扩展、可定制的灵活架构，适用于具体场景下的 AI 应用扩展。
- TWeCall（微信通话）：支持设备与微信双向音视频呼叫。
技术架构
TWeTalk 采用端云协同多模态引擎，包括：
- Hear-感知层：搭载 TWeTalk 场景精调大模型，优化玩具、机器人等场景。
- Think-大脑中枢层：独家自研的 TTS 引擎支持情绪标签与音色克隆功能。
- Talk-声音表现：整套对话系统支持实时交互与灵活打断。
标杆案例
- TWeTalk 透明屏：在 2025 年巴黎 Viva Tech 大展中亮相，应用于智能点餐和导览场景。
- 腾讯 QQ 公仔：在 WAIC（世界人工智能大会）亮相，展示智能硬件语音交互系统。
- 玩具大 IP：奥飞喜羊羊 3.0 和汤姆猫通过 TWeTalk 全球化产品方案实现出海。
- 飞利浦：为飞利浦 TAT5599 耳机提供智能摘要及耳机同传服务。
- AI 面试官：TWeTalk 实现了 24*7 AI 面试官，自动分析候选人语音情感波动，生成综合能力评估报告。
AIoT 行业趋势
- 智能硬件行业趋势：商业之外，核心是产品解决什么问题，新兴赛道预测 AI 玩具 + 具身智能 + 智能穿戴。
- 生态协同：覆盖客户+模组集成商+芯片原厂，验证场景深入场景，收敛行业方案。
- 方案按行业细分落地、出海、生态协同优化：智能体，以项目沉淀标品标杆客户服务好头部客户，持续拓展标杆行业。
产品演示
提供 TWeTalk 透明屏和鹅厂 Demo 的近距离围观体验。
RTC-IoT 芯片平台覆盖介绍
目前 RTC-IoT 设备端 SDK 可以全平台支持（Linux/RTOS/Android），并已覆盖 5 大场景的 26 个主流芯片平台的上百款芯片，特别针对一些低功耗、轻资源的芯片也能很好的支持，同时对于新出的芯片也会不断跟进适配。
