AI手机白皮书 AI手机白皮书 2024.02 目录 CONTENTS 01开启AI手机时代的驱动力 AI的发展给移动终端行业带来机会用户期待AI给生活带来更多便利技术变革推动手机功能形态演变AI手机的定义 02AI手机的特征 用户定义的开放服务生态随心和专属的智慧OS 支持生成式AI的智能终端硬件平台 03AI手机产业链展望 IDC对新一代AI手机的销量预测 新一代AI手机对全球手机产业带来变革 AI手机的生态产业链展望 AI已赋能千行百业,但移动终端用户的时间还没有从繁复操作中解放出来 AI已赋能千行百业 制造 •赋能智能生产管理、产线不良自动识别等 IT互联网 •代码辅助生成、数据分析、问题归因、系统辅助运维等 金融 •金融市场走势预测、智能客服、智能风控等 …… •交通智能调度、医学影像辅助诊断 交通/医疗 •电商素材生成、网页制作、商业文案生成、用户增长策略等 营销 移动终端行业的特点 覆盖广泛 全球54%的人口(约43亿人)拥有智能手机 来源:全球移动通信系统协会2023 交互紧密 手机已从通讯工具,变为用户的钱包、 音乐播放器、随身PC、钥匙等,深入到了用户生活的方方面面 使用时长 用户平均使用手机时长超6小时/天,手机已成为用户的贴身伙伴 来源:OPPO手机用户统计数据 思考:AI能为用户做什么,让人们把更多时间投入更有价值的事、更有趣的生活? 生活节奏加快,个人时间变得破碎且被侵占;用户期待技术来解放精力与创造力 用机旅途中有许多场景本应更高效 拍照本应一步完成 却需要在APP间切换修图 知识管理本应普惠 依赖信息过载的广告导致浪费时间受教育水平差异导致被欺诈信息欺骗 语言、文化差异 不该成为障碍 ? A 时间花在翻译和理解文化差异上 琐碎的整理 不应占用宝贵时间 整理纪要、跟踪遗留事项,费时费神易出错 AI手机的使命:解决用户痛点,从碎片、繁杂中解放用户,让用户回归自我,回归价值 技术驱动手机功能变革,不断释放人们的生产力和创造力 功能机 智能机 新一代AI手机 电容屏引起交互革命手机形态发生变化大模型技术将再次引发交互革命 2008 OPPOA103 第一款笑脸手机 音乐手机 OPPO在行业率先定义 2013 ColorOS诞生 开启软硬服三位一体 2013 OPPON1 开启照相手机 2023 OPPOFindX6 开启影像全主摄 2024 OPPOFindX7 期待与行业伙伴一起 开启新一代AI手机时代 AI为消费者新的体验带来无限可能,呼唤行业伙伴共同定义AI手机 AI手机定义 算力高效利用能力 真实世界感知能力 自学习能力 创作能力 硬件平台 真实世界感知|异构推理计算 AI手机带来手机全栈革新和生态重构 创Th能力 自学习能力 真实世界感知能力 算力高效利用能力 智慧OS 多模态交互 自学习|直觉化 内嵌专属智能体 高效|创Th|专属 生态 原生服务生态 智能体生态 大模型生态 算力生态 AI手机全栈革新及生态重构 AI手机的特征 用户定义的开放服务生态 随心和专属的智慧OS 多模态融合的全新交互 内嵌的专属智能体 支持生成式AI的智能终端硬件平台 原生化服务组件生态和用户定义的智能体构成开放服务生态 健康管理 生活服务 角色扮演 办公高效 游戏助手 …… 用户定义的智能体生态 智能体开发平台 内嵌专属智能体 AI文本|AI图像|AI语音|AI视频 大模型 原生化服务组件库(生态) 融合交互 原生化服务组件生态 用机 手机OS 内嵌 语音助手 打车外卖 天气新闻 育儿 用户定义的智能体生态 融合交互 少儿教育 健康咨询挂号 …… 原生化服务组件生态 智能终端厂商致力于构建服务AI手机开放服务生态的最大公约数 开放的算力和技术平台 共赢的商业合作模式 生态治理机制和行业联盟 AI手机时代,基于大语言模型构建的开放服务生态主要包括厂商的原生化服务组件生态和用户定义的智能体生态。例如,OPPO基于安第斯大模型AndesGPT内嵌小布个人智能体 行业共建标准,构建零门槛开发平台,让每个用户成为繁荣服务生态的推动者 零代码开发环境|让每个人都能定义自己的智能体 多场景 可视化 零代码开发 流程打通Prompt定义、数据源引入、 插件选择,应用生成简单快捷 私域数据 湖仓、数据库、本地文档快速接入,扩展模型知识库 丰富插件 问答、在线搜索、湖仓分析、数据库分析、文档分析等插件供灵活选择 灵活接入 支持JS嵌入、API接口接入,多重方式输出AI应用能力 随心专属的智慧OS OS+系统软件 应用生态 APP1 APP2 … ······ APP n 硬件 场景一 场景N 智能体生态 原生化服务组件 智慧OS 多模态融合的全新交互专属智能体 硬件 硬件、存储、传感器 新一代AI手机的智慧OS OS 硬件 功能机OS智能机OS 智慧OS打破平台垂直烟囱,每个人口袋里都有专属的AI助理,实现AI普惠 多模态融合的全新交互方式 人格化|自然交互 自学习的交互触点构建 基于自然语义的人机服务响应 全局入口集 手势 硬件AI入口 全局搜索 侧边栏 …… 系统控件 小布助手 应用内插件 流体云 泛在卡 语音提示 应用共生入口主动服务触点 嵌入式UI输入法……跨设备通知对话式UI…… 系统视窗 沉浸交互 应用伴生 暂态浮窗 …… AI手机全新的交互体验让手机成为个人的随身助理,而不仅是电子消费品 系统内嵌的专属智能体 主动高效 创造性 能力突破 成长性专属 高效 复杂与重复任务自动化 创作 启发创意、突破能力 专属 越用越懂你的个人助理 用户画像 能力组件(图像理解与生成、文本理解、信息理解与整理...) 工具使用 任务规划 记忆增强 大小脑协同 大规模CoT推理 AI手机内嵌专属智能体,通过机器学习不断理解用户习惯,自学习、直觉化 举例|个人助理:从千篇一律走向人格化,从单一模态走向多模态融合 AI个人助理可以理解复杂需求,提供更聪明、个性化、贴心的服务体验 内容生成 演讲稿|小红书文案|简历撰写 小布通话助手 |PPT大纲识别电话类型|AI代接|生成记录 小布连麦口语化唠嗑|倾吐心声|吐槽日常 教育风格扮演|辅导作业|询问历史知识 趋势 多模态自然对话自然对话|OS融合的多模态|语音、文字、图片、文档、视频全能聊|语音、手势全能控 可信、有用、个性化专属内容合规|幻觉消除|复杂推理|任务调度|服务生态支持|人设支持|个性化问答和推荐|用户专属记忆 内容生产AI文本|AI语音|AI图像|AI视频|轻松创作工具|高效生产力工具|趣味个性化工具 以OPPOFindX7为例 AI手机时代才刚刚开始,未来将本质上改变内容生产的效率 举例|系统应用:解决用户高频高感知复杂任务场景,向生态级AI体验演进 多模态的系统级AI体验将把用户从手机使用场景的复杂操作中解放出来 以OPPOFindX7为例 STEP1:单模态、单数据:功能级AI体验 AI通话摘要:一键实现从通话到纪要 通话记录|通话纪要|待办生成|便签同步 全局入口、控件、应用场景的AI化:电源键、语音、流体云、泛在卡、设置图像、文本、视频、音频单模态AI生成 STEP2:多模态、单主体归属/多数据联合处理:系统级AI体验 AI消除:拍照、擦除和背景还原一步完成 智能圈选|消除|背景生成 消除前 消除后 图像、文本、视频、音频跨模态组合,相互生成:如文本与音频相互生成实现通话摘要通过助理实现服务于信息的理解、生成和个人服务调度 STEP3:高维数据、多主体归属/多数据联合处理:生态级AI体验 全局入口、控件、应用场景的AI化:电源键、语音、流体云、泛在卡、设置图像、文本、视频、音频单模态AI生成 生态级AI体验会创造数字世界和物理世界相互完美转换 支持生成式AI的智能终端硬件平台 精准意图理解 低功耗、长续航的高效能算力底座 对环境场景的用户感知 大小模型推理 端侧个性化训练 端侧异构算力资源 器件智慧化 …… 控件|姿态|运动 视觉|听觉|触觉 存储 系统能力+AI …… 虚拟化 个人适应 场景适应 环境适应 目前硬件无法完全匹配,将出现新的AI移动芯片和全新的存算架构 AI手机的用户价值:自在交互、智能随心、专属陪伴、安全可信的个人化助理 自在交互:图文多模态的能力与全域知识 智能随心:即时意图理解和服务响应 智能机:提供信息供给 AI手机:提供知识和能力的供给 智能机:闲聊 AI手机:提供服务 用户价值:获得此时此刻唯一正确的答案,交互更自然、更直接用户价值:一键/一句话直达服务调度 安全可信:内容安全和隐私保护 专属陪伴:个性化的模型微调和知识增强 智能机:强调隐私安全 AI手机:除了隐私安全还强调 伦理价值观对齐、幻觉消除 智能机:基于搜索式AI的信息平台 AI手机:基于个人知识增强的生成 自在交互 安全可信 智能随心 一切皆可自然对话 专属陪伴 用户价值:个人数据被保护,回答贴切可信赖 用户价值:通过学习用户使用习惯、陪伴用户成长,是可成长的AI手机 价值观对齐 建立完备的校准机制,保障模型符合人类价值观 探索多智能场景下的 ConstitutionalAI 基于人类反馈 的强化学习 内容安全 保障生成内容安全合规 且满足用户预期 生成内容评价标准 生成信息有标识 生成信息可溯源 安全可信|用技术保障数据、算法、内容安全,价值观对齐 AI技术涉及的安全法规及伦理风险 影响用户隐私 用户个人隐私泄露 影响国家治理 敏感信息影响国家安全 不实信息破坏舆论环境 AI训练过程中的侵权问题AI普惠问题与知沟困境 影响用户体验 生成冒犯性信息 生成过时或不准确信息 生成不符合预期信息 数据安全 关注训练源数据的安全、合规及客观性 源数据客观 源数据合规 源数据安全 算法安全 建立防御攻击及模型校准方案 基于知识图谱的增强 攻防对抗与评测体系 AI防火墙 用技术构建安全可信赖、有温度的AI IDC对新一代AI手机的销量预测:全球市场 2024年全球新一代 AI智能手机出货量将高达 1.7亿台 IDC关于全球新一代AI手机的市场预测 亿台 2.0 1.7 1.5 1.0 0.5 0.51 0.0 2023 2024(F) IDC预计2024年全球新一代AI手机的出货量将达到1.7亿部,约占智能手机整体出货量的15%。 占全球手机市场 15% *新一代AI手机指Next-genAISmartphone,特征是NPU算力大于30TOPS,搭载了能够支持更快速高效端侧GenAI模型的SoC,支持包括StableDiffusion和各种大语言模型在内的GenAI模型在端侧运行 IDC对新一代AI手机的销量预测:中国市场 IDC中国新一代AI手机市场预测 亿台 2.0 1.5 1.5 1.3 1.0 0.8 0.5 0.4 0.1 0.0 IDC预计在中国市场,随着新的芯片和用户使用场景的快速迭代,新一代AI手机所占份额将在2024年后迅速攀升,2027年达到1.5亿台,市场份额超过50%。 2027年中国新一代 AI智能手机出货量将高达 1.5亿台 2023 2024 2025 2026 2027 手机市场占比 5.5% 13.2% 29.6% 45.3% 51.9% 占中国手机市场 51.9% *新一代AI手机指Next-genAISmartphone,特征是NPU算力大于30TOPS,搭载了能够支持更快速高效端侧GenAI模型的SoC,支持包括StableDiffusion和各种大语言模型在内的GenAI模型在端侧运行 新一代AI手机将为全球手机产业带来变革 •2024年起,新一代AI手机将大幅增长,带动新一轮换机潮。 •旗舰机型将成为新一代AI手机发展初期的重要增长动力。 •16