您的浏览器禁用了JavaScript(一种计算机语言,用以实现您与网页的交互),请解除该禁用,或者联系我们。[百度]:智能体有回响 Vol 7 :多维调优实战指南 - 发现报告
当前位置:首页/其他报告/报告详情/

智能体有回响 Vol 7 :多维调优实战指南

2024-11-13百度A***
智能体有回响 Vol 7 :多维调优实战指南

从原理到实操,教你学会智能体调优 智能体有回响商家经营有参谋第七期调优 弹幕互动 评论区发出指定口令,截屏抽取5位幸运儿 送出【度熊鼠标垫护腕垫套装】 全局调优地图 三维反馈调优,综合调教智能体 客户深度参与 平台 成长等级体系 内容、服务等多维度持续经营 经营权益 流量、C端品牌logo、营销权益 对话深度调优 客户 快速干预直接生效 Q&A库、澄清、无效过滤etc 强化学习反馈模型 归因、数据清洗,DPO强化学习 访客深度分析 用户 用户行为转化分析 诊断用户未满足项精准供给 用户行为体验分析 根据用户不满意建议精准调优会话 为什么要做智能体调优? 效果 更好•线索CVR+6.2% •用户满意度+5.4% 智能体调优 经营 •流量扶持,show 最高+30% •优质商家品牌权益权益 •更多营销权益 •解答力+110% 体验 •理解力+4.6% 更佳•经营力+27% 建议收藏 系统化科学经营 差异化等级权益牵引全链路经营,满足「推广效果提升、降本增效」的核心诉求 买词投放时 投放优惠券 检索排序时 流量奖优 广告展现时 优质商家logo 页面转化时 等级标识 优化分析时 用户洞察 投放优惠券:新户专享有, 新人成长值达80分,最高可领500元优惠券,先到先得! 流量奖优:账户下的页面投放搜索推广时,可享受额外的流量增益。智能体成长等 级越高,效果越优! 优质商家:在搜索结果 创意卡片展示优质商家等 级logo透标,助力提升品牌效应 等级标识:智能体落地页 头卡披露等级标识,通过 建立信任提升转化效果 用户洞察:诊断对话展现漏斗, 基于用户需求满足程度判断提供 优化建议 如何做智能体调优? 平台反馈:成长等级 【成长等级现状】 4.3万商家参与,整体分布呈纺锤形 (46.72%) (36.89%) (33.96%) (23.25%) (22.18%) 较差率 76% 优秀率 24% 商家等级 达标率,50.00% 较差 23% 优秀 33% 优秀 48% 良好 44% 较差 52% 配置达优 知识达优 根据平台引导进行精准优化 智能体成长等级,通过培训智能体“数字员工”在知识技能、数据技能、投放技能、配置技能四大纬度的能力完善,使智能体更加人性化、智能化的接待用户。同时,牵引商家在百度全域内进行内容、服务、经营、营销等多纬度持续经营,并获取经营权益,助力更长效的在百度获客。 C 配置技能 A 知识技能 R 数据技能 E投放技能 如何提升等级?第1步 提升“知识技能”,每周波动,每周更新 •知识技能,核心提升知识的丰富度以及覆盖度。完成全部建议的任务,可获得20分(知识技能完成度达100%) •知识技能任务,可实时完成优化,优化后任务分值实时更新,总分于每周五更新至成长值 如何提升等级?第2步 优化“配置技能”,前期配置,一劳永逸 •配置技能,核心优化智能体经营&理解能力。完成全部建议的任务,可获得10分(配置技能完成度达100%) •配置技能任务,优化后任务分值实时更新,总分于每周五更新至成长值 如何提升等级?第3步 优化“数据技能”,每周更新,天天调优 •数据技能,通过反馈及数据标记调优训练模型。完成全部建议的任务,可获得10分(数据技能完成度达100%) •数据技能任务,完成优化后任务分值不实时更新,任务分&总分于每周五更新至成长值 如何提升等级?第4步 优化“投放技能”,扩大投放,持续获客 •投放技能,优化智能体投放消费配比,持续提升获客能力。完成全部建议的任务,可获得10分(投放技能完成度达100%) •投放技能任务,完成优化后任务分值不实时更新,任务分&总分于每周五更新至成长值 有奖问答 得【运动休闲斜挎包】 1、成长等级达到几级后,可获得流量增益?(单选题) A.lv1B.lv2C.lv3D.lv4 2、成长等级根据哪四大维度计算(多选题) A.知识技能B.优化技能C.配置技能D.数据技能E.投放技能 3、成长等级是按什么维度进行数据测算?(单选题) A:账户维度B.公司维度C.主体维度 4、成长等级的等级刷新周期是什么样的?(单选题) A.实时刷新B.每天刷新C.每周刷新D.季度刷新 实操演示 上「巧舱」平台! https://aiagent.baidu.com/mbot/index 商家反馈:对话调优 对话调优原理 通过对话调优反馈消息正面和负面的评价样本,帮助模型训练及优化,提高智能体对话质量和可控性,使其逐渐趋于智能化和人性化。 反馈调优的预期是建立端到端的可感知效果,理想态:客户只要反馈(B端),对话就应该优化(C端)。实际建设目标:从商家反馈表达到模型应用,中间涉及到非常复杂的问题,拆分反馈分类应用到不同的策略模型中,最后得以调优。 建议收藏 1个例子弄懂【对话调优】模型调优逻辑 *针对该账号的真实网民咨询对话反馈中,分类进行应用 判断商家反馈分类 回答错误分类 文案待优化分类其他优化建议 用户:咨询海景阁商家评估智能体发言 新建项目问答信息: 后续用户再次咨询 智能体:项目在售户型有55平-110平的一居到三居 错误类型—— 回答错误,产品/项目信息错误 question":"海景阁在售户型""answer":"海景阁在售户型有79平-193平" 海景阁,智能体优先使用文案信息解答 用户:就业创业商家评估智能体发言错 优化文案;后续用户就业创业相关 智能体:可以的,咱们有长期的创业班 误类型—— 文案待优化,回答信息太绝对,增加“套路” 可以的,咱们有长期班和短期班,学完可以推荐就业,想创业的话,也有创业帮扶。 场景,智能体优先使用商家优化文案回复 如何进行对话调优? 1.回答错误-存在明显错误 Case对比示例 产品原理 优化逻辑:立足于配置项的调优>>修改直接同步至对应字段 生效时段:实时生效 ❌错误反馈:点向下大拇指后,内容原封不动再点提交,不改 �正确反馈:按问题说错内容选择所属类型,并填写正确的业务、优势、地址内容 1、业务说错的,勾选“回答错误-经营业务”; 示例模版:①我们是xx公司+②经营业务是xx+③目标群体是 x+ 2、优势说错的,勾选“回答错误-服务优势”; 示例模版:我们支持免费上门服务,免费10项检测 3、地址说错的,勾选“回答错误-地址信息” 如何进行对话调优? 1.回答错误-存在明显错误 Case对比示例 产品原理 优化逻辑:立足于对话语料的配置项调优>>修改直接同步至对应字段 生效时段:小时级生效 ❌错误反馈:问题描述的是错误产生的原因 �正确反馈: 示例模版:①触发回复内容+②回复话术 网民咨询:过敏原检查多少前? 问题描述:过敏原检查价格? 回复内容:我院过敏原检查价格是230元 如何进行对话调优? 2、文案待优化-调整客服话术文案 Case对比示例 ❌错误反馈:填写的是问题解释,而不是建议话术 产品原理 调优场景:智能体话术不当 反馈方式:话术调优后的完整文案(需客服视角话术) 优化逻辑:数据清洗->模型归类&数据溯源->策略优化 ->生效 生效时段:较长周期生效 �正确反馈:直接填写回复话术 智能体发言:推荐您一款入门级二胡就可以的 优化话术:琴友在我们家拿二胡,我们会免费送二胡教学视频和二胡纸质教材,还可以免费指导使用。 如何进行对话调优? 3、其他优化建议-给智能体的建议 Case对比示例 产品原理 调优场景:智能体发言时机不当,或存在明显逻辑问题 反馈方式:给出实际的建议内容(无需客服视角话术) 优化逻辑:数据清洗->模型训练->策略优化->生效 生效时段:较长周期 ❌错误反馈:问题描述的是网民发言内容 �正确反馈: 示例模版:文字描述建议内容 网民咨询:面部去皱项目 智能体发言:您之前了解过吗? 优化建议:这个不需要问顾客是否了解,不如问顾客是否医生面诊过 如何进行对话调优? 4、推荐类反馈-针对产品卡等调优 Case对比示例 产品原理 调优场景:智能体推荐内容错误 反馈方式:无需推荐,当前场景下不该推,并给出理由; 推荐内容错误,可给出应该正确表达的内容 优化逻辑:数据清洗->模型训练->策略优化->生效生效时段:较长周期 ❌错误反馈: 内容不该推——>无需推荐 内容推荐有问题——>推荐内容错误 �正确反馈:(无需客户视角)示例模版:文字描述问题原因 无需推荐:不知道顾客具体咨询内容,不应该推荐项目 推荐内容错误:除非网民搜索咨询医院家具,否则不应该推荐医生办公室 家具。 有奖问答 得【运动休闲斜挎包】 1、会话调优,可以反馈哪些问题?(多选题) A.回答错误B.文案待优化C.未设置联系方式D.其他优化建议 2、对话调优中,反馈状态包括哪些?(多选题) A.未标注B.已阅读C.反馈已生效D.已反馈模型训练 3、对话调优中的对话状态『反馈状态』为『已反馈模型训练』是指?(单选题)A.已产生标注,且数据被模型训练完成,会实际应用到后续对话策略中 B.对话消息已产生标注行为,且标注数据同步至模型侧训练,但尚未训练完成。 4、哪些反馈是立足于配置项生效?(多选题) A.文案待优化B.回答错误-经营业务 C.回答错误-价格信息D.其他优化建议 实操演示 上「巧舱」平台! https://aiagent.baidu.com/mbot/index 弹幕互动 评论区发出指定口令 截屏抽取5位幸运儿送出【度熊便携收纳袋】 用户反馈:用户洞察 1个例子弄懂【用户洞察】逻辑 判断用户是否强需求找供给信息判断供给信息是否满足 下周诊断任务推荐 ①看客户是否有私域信息(价格等) ②看用户需求是否被过滤 用户需求 否,则下周推荐 用户:种植牙价格是多少? 客户后台无具体内容,则基座模型根据历史训练数据发言 是私有知识相关推荐内容 Case1 Case2 客户后台有相关内容是私有知识相关不推荐内容 用户:种植牙有哪些推荐? 客户后台无具体内容,则基座 模型根据历史训练数据发言 是私有知识相关 推荐医美项目 客户后台有种植牙相关项目介绍 是私有知识相关 不推荐 建议收藏 利用巧舱【用户洞察】能力精准补充供给 从C端用户视角出发,基于智能体对话效果提供经营诊断建议 【提升解答力】未满足价格、地址、高频未解答问题 【提升经营力】 未满足业务点推荐 【提升用户满足】未满足联系方式,或用户需求被过滤 •举例:医美行业,用户咨询水光针多少钱未被解答,需新建水光针的价格(通过补足价格参数;或新建价格文答知识) 价格、 高频问题 全行业 地址 *待上线 教育、房产、法律、B2B •举例:教育行业,用户咨询上海是否有地址未被解答,需根据企业自身实体地址判断,补足上海地址or告知模型上海无地址 业务点 大健康、教育 •举例:医美行业,用户咨询水光针未被解答,需新建医美项目 联系方式 全行业 •举例:教育行业,用户希望主动获取商家的电话或微信,但是没有被满足;商家可在线索收集方式拓展【被动回答】电话或微信or明确拒绝不提供 无效过滤 全行业 •举例:房产行业,用户外墙翻新诉求被过滤;商家可check企业经营范围是否做该业务,可以明确表达不做;也可以根据用户诉求的影响反馈,拓展新业务 有奖问答 得【瞌睡熊U盘】 1、以下哪几项在用户洞察报告中?(多选题) A.价格问题B.地址问题C.无效过滤D.业务点 2、用户洞察定义是:对该账号进行网民预测,进行的网民咨询分析(判断题)A.是B.否 3、看到用户洞察中『无效过滤』数据,客户可以做什么?(多选题)A.核查是否有误过滤网民B.核查『配置-对话设置』的设置情况C.查看具体会话,排查原因D.不予理会 4、看到用户洞察中『业务点』数据,客户可以做哪些?(多选题) A.根据引导进行补充B.查看具体会话 C.核查是否有该业务D.核查买词情况 实操演示 上「巧舱」平台! https://aiagent.baidu.