腾讯科技助力发展新质生产力，人工智能技术进展及能源落地场景
腾讯科技助力发展新质生产力 人工智能技术进展及能源落地场景 2023年全年总收入6090亿元增长10%净利润1576亿元增长36% 金融科技及企业服务业务同比增长15%至2038亿元 腾讯云模型即服务（MaaS）为合作伙伴提供模型库 微信月活用户数13.43亿微信生态衍生就业机会4618万个 研发投入641亿2018以来累计研发投入超2696亿 500亿元启动 “共同富裕专项计划” 500亿元启动 “可持续社会价值创新”战略 专利授权数量超过3.7万件，其中，发明专利占比超过 腾讯核心自研技术累 腾讯在全球主要国家和地区 计开源超过160个项目 专利申请公开总数超过7.5万 件90% 100000 全球互联网公司专利申请及授权数量排名第二截至2023年12月，腾讯在全球主要国家和地区专利 50000 0 Google 75000 3 7000 腾讯 申请授权 阿里巴巴百度AmazonMeta 申请公开总数超过7.5万件 专利授权数量超过3.7万件。 专利数： •2018年开始深耕产业互联网后，曲线更加陡峭 •之后3年，专利授权量年增长率超过45%研发投入： •2016年，首次突破百亿，涨至118.5亿元 •2023年，研发投入超过641亿 国家省部级科技奖励 国家级社会科技奖励 产品&解决方案行业成就 •面向大规模数据的Angel机器学习平台关键技术及应用 ---中国电子学会科技进步奖一等奖 •十亿级用户大规模弹性云网络 ---深圳市科技进步奖一等奖 •全国产化环境下基于异构容器云的大规模复杂政务平台 及应用---中国电子学会科技进步奖二等奖 •云网一体效能提升与安全治理研究与应用 ---中国通信学会科学技术奖二等奖 •超写实高等级视景系统关键技术及应用 ---中国航空学会科技进步奖一等奖 •群体行为时空计算关键技术及城市治理应用 ---地理信息科技进步奖一等奖 •超低时延实景远控技术创新与应用 ---中国数博会领先科技成果奖 •新一代城市轨道交通操作系统穗腾OS ---中国数博会优秀科技成果 •腾讯云数据库TDSQL ---《IDC中国分布式关系型数据库2023年厂商评估》市场份额第一，收入同比增速第一，入选领导者象限； 首批通过安全可靠测评、首家完成中国信通院向量产品测试 ---首家通过中国信通院“可信数字化服务”项目测评 •腾讯电子签 ---连续四年入选国家级双跨平台，装备制造领域市场份额行业第一 •WaMake工业互联网平台 •云智能工业AI •云网一体资源调度迁移平台关键技术研究与应 用---中国通信学会科学技术奖三等奖 •5G时间关键型通信使能远程操控 ---世界互联网大会领先科技成果奖 ---3C行业市场份额、收入规模第一 •计算机视觉应用 ---连续两年在《Gartner云AI开发这服务关键功能》“计 •…… •…… •…… 算机视觉应用”获中国厂商最高分 腾讯云智能在计算机视觉、智能语音、自然语言处理、机器学习等领域已取得多项技术突破，持续推动前沿技术的产业落地。下设多个人工智能实验室。腾讯优图实验室多次在人工智能国际权威比赛中创造世界纪录，腾讯AILAB、微信智聆等团队协同深耕AI语音及语义能力，多次在国际国内比赛中拔得头筹。共拥有5000+AI相关专利，发表顶会论文800+篇。 计算机 视觉 文字 识别 语音识别语音合成 自然语言处理 机器学习 5000+项 AI相关专利 800+篇 论文入选IJCA/CVPR/ICASSP/ACL 等全球顶会/期刊 双赛道冠亚军 图像匹配技术CVPR2021ImageMatchingWorkshop 全球第一 神农”多语言预训练模型获得国际权威榜单 XTREME总榜及全赛道全球第一 中英新闻翻译第一 WMT2021中英文新闻翻译评测 四项国际第一 国际顶级图学习榜单OGB上，获得图属性预测赛道 Ogbg-molhiv、Ogbg-molpcba等全部四项榜单第一 冠军及最佳创新奖 ICCV2021LVISChallengeWorkshop Text2SQL榜单第一 CoSQL、Sparc数据集荣登Text2SQL榜单第一 业务名称 业务场景 业务名称 业务场景 混元助手 对话聊天，灵感获取 腾讯云 平台内容/文档翻译纠错 腾讯文档 内容创作、润色、改写；表格公式生成、数据分析 腾讯视频 剧本审阅 腾讯会议腾讯广告 AI小助手：会议纪要、总结、待办及问答商业内容理解，广告推荐，特征挖掘，文生图 腾讯新闻QQ 内容制作、识别、审核聊天助手内容改写润色 搜一搜 内容理解、排序策略优化 腾讯地图 智能化服务 信安 内容安全审核 微信支付 智能问答助手 工蜂Copilot 代码补全&生成、软件开发智能辅助 帮小忙 文档理解、问答 企业微信 邮件创作、改写、润色 腾讯公益 公益项目合理性评估 腾讯客服 智能客服问答 腾讯乐享 AIGC场景探索 腾讯游戏 游戏NPC智能对话、剧情设计 订阅号 文章创作、润色 FiT金融 金融安全审核 成长守护 智能接入助手 在GPT3爆发前，腾讯集团就超20个领域大模型*服务于各个核心业务场景，超过百人实战经验丰富团队持续推进技术迭代 混元大模型 大模型SaaS服务 大模型定制服务 （7B，7B-MoE，13B，70B） 大模型工具增强服务SaaS （腾会助手） 大模型应用APaaS （AI助手/知识引擎） 大模型开发管理平台（Ti） 大模型基础设施服务工具 （对象存储/分布式云……） 腾讯会议AI小助手，会中问答、会议摘要、会议待办项尽在掌握 采纳率对比 混元大模型VS GPT-3.5 指令理解混元胜出：11%会中问答混元胜出：9%会议摘要混元胜出：18% 会议待办项混元胜出：11% 腾讯文档 基于表格内容生成图表 精通数百种Excel公式 一键生成标准格式文件 数十种文本创作场景 文档创作与编辑采纳 6x认为更好 混元 Excel公式生成正确率 82% 71% 8 混元GPT-3.5 •通过算力堆积，训练千亿规模模型，实现模型能力突破 •通过小规模大模型节约成本，实现模型普惠 2B 苹果7B Jasonweietcat2022《EmergentAbilitiesofLargelanguagemodels》 不同行业的数据有不同的特性，行业大模型精调，可以降低行业知识彼此之间的干扰，更能提升垂类任务的性能 L2 专注细分领域子任务 兼具客户个性化场景需求 单轮知识问答 上下文理解 文本归纳 Level-2专属大模型 多轮知识问答 对话摘要生成 …. 基础大模型（L0） 行业无监督数据 行业大模型（L1） 二次训练 问题答案知识 人工审核 用户问题 调优 专属大模型（L2） 答案回复 L1 注入海量行业数据，补充k-h欠缺客户个性化数据 客户数据+大模型精调 Level-1行业大模型 行业大模型 企业大模型 … L0 泛化性好 训练成本高，欠缺行业知识 行业通识+量化、蒸馏、剪枝 Level-0基础大模型 NLP大模型 CV大模型 多模态大模型 … 行业大模型精调流程行业大模型分级架构 多模态模型通过融合语言模态与图像模态，将语言模态包含的文本理解与思维链能力投射在图像模态上，赋予了模型图像理解与生成功能。从AI技术范式来看，多模态技术通过预训练+调参的方式颠覆了传统机器视觉小模型CNN高度定制化的业务模式，模型的泛用性大幅度提高。 •本图来自腾讯优图实验室于2024年2月份发表于顶级期刊论文《EnhancingVisualDocumentUnderstandingwithContrastiveLearninginLargeVisual-LanguageModels》 音视频处理文本处理反馈改进 音视频识别文档解析文本翻译文本切片用户反馈系统 音频合成向量化处理权限过滤混合向量检索标注纠错 知识处理层 私域知识 搜索引擎 解析/处理 知识切块 知识标签 多行业大模型 （政务、文旅、金融、教育、医疗…) 向量检索 模型服务层 训练推理平台（TI） 混元大模型 向量数据库 营销客服 •营业厅数智人 •大模型智能客服 •智能客服坐席辅助 •… 协同办公 •企业知识库 •会议AI智能助手 •员工办公写作助手 •行业智能输入法 •智能合同生成与审核 •… HR/财务/运营 •对话式报表查询 •员工企业文化问答 •财务制度助手 •党建助手 •辅助订票 •… 生产提效 •智能巡检 •煤炭下矿安全手册查询 •电网作业票生成 •勘察报告辅助编写 •设备运检知识问答 •无人机巡检CV大模型 •设备故障应急处置预案自动生成 •安全运营助手 •… 研发提效 •IT服务助手 •智能代码助手 •舆情分析 •… 类型 序号 设备 可视缺陷类型 识别准确率 油井巡检 1 抽油机 盘根刺漏 40.00% 2 固定不牢固（倾斜） 73.50% 3 机械故障 61.50% 4 管道 安全防护带破坏 73.00% 5 地貌 地貌变化 70.00% 设备巡检 6 制动阀门 阀门异常 84.00% 7 机械阀门 异常 81.00% 8 仪表 读数过高 66.80% 其他检测 9 甲烷气体检测 气体泄露 56.50% 10 安全评估 37.50% 11 表面破损 53.00% 12 偷油检测 偷油设备 82.60% 13 漏油监测 渗漏油 85.80% 1 2 3L0-L1-L2 在行业多模态大模型落地过程中，基于大模型的专家模型生产与精调思路，腾讯通过L0→L1→L2三个层次，提升新需求支持效率 以无人机巡检场景为例，一个L1大模型优于12个客户小模型，绝缘罩脱落(极小目标)功能经L1迭代出L2专家模型后指标进一步提升 设备监控 环境安全 设备检测 L2 专家模型 ... 定向优化 电力大模型 L1 行业大模型 L0 基础大模型 行业数据适配 LPMMLLM TIAI自动迭代训练平台 生产设备 现场传感器 OK 无人机+机器人+导轨相机 火警误报 数据上传AI算法判断 异物误报 其他 集控中心 OK总部 人工标注 指标要求 •漏检<0.02% •漏检<0.6% •过杀<20% 火灾 人工二次 标注异物 其他 实时推理数据上报 模型迭代 算法改进过杀区域屏蔽 AI平台 •基于分布式云计算和AI等先进技术，通过云边协同架构，实现总部与边缘场站两级资源协同互动，打造新一代智能场站。 •数字化能力下沉场站，提升巡检智能化，降低生产运营风险，推动新能源减员增效。 智能运检系统 AI创新中心 模 型 训 练 算法 模型库 第三方算法模型 任务调度 异常上报 分布式云 数算 据法 上下 传发 监视数据 推理结果 云边协同 任务管理子系统 数据采集 边缘推理系统 … 分布式云 标准化场站N 标准化场站2 部 总腾讯特色云边协同 运边缘侧与总部一致的数字化能力，实现巡检业 检务协同、算法协同、数据协同、管理协同 中心 云领先的AI算法模型 融合腾讯业界领先的视觉大模型、新能源行业 模型，同时支持第三方算法模型 智 能打造智能场站新标准 场标准化云边运行环境、数据接入、应用接入、 站API接口、身份认证、安全管理规范 边缘云 设备 服务对象与场景 运维人员入口运维常见问题 知识问题解决率 系统落地效果 知识服务构建 企业知识沉淀 数据管理系统模型开发与训练模型推理与服务 应用系统集成 设备说明书场站建设手册仪器仪表说明书运维手册其他资料日常运维日志 需求与方案积累 日常运维流程 设备运行数据 复杂表格文件 操作流程规范 说明书、规格文档 设备文档分析 无人机在多少风力环境下可以起飞？“智能巡检怎么使用？” “我想看看昨天的油量” “无人机和机器人巡检有什么区别？” 2.使用向量关键词混合检索策略、表格文字混合检索策略等，提升模型在多场景 下的应对能力和鲁棒性 推理比较 表格问答 操作步骤问答 数字问答 1 1、图文
