“数据服务+自助”产品化实践

huya虎牙 :DataFun. 数据服务+自助”产品化实践 数据技术部-数据产品经理 虎牙公司是国内知名的直播平台，在直播游戏化、虚实融合技术方面积累了丰富经验，为用户和行业赋能 FINiMOTV 数据服务面临问题 目录 02怎样才是好的数据服务？ Content数据自助产品 04产品实践成果 1huya虎牙ataFun. 05后续演进 01数据服务面临问题 及时性灵活性一致性 数据需求难高效响应， 数据分析门槛高且分 相同指标指标名口径 数据获取周期长，业 析维度不灵活，一旦 不一，业务南甄别口 务无法快速获取数据 分析维度，指标发生 径对错，数据可信度 决策 变更，要重新提出需求 不高 huya牙ataFun. 数据服务面临问题 目录 怎样才是好的数据服务？ Content数据自助产品 04产品实践成果 1huya虎牙ataFun. 05后续演进 02怎样才是好的数据服务？ 自助式数据生产 规范化定义指标 内容灵活多变的数据需求是能被快速响应的，数据生产使用门槛是比较低的 指标口径是一致的，规范定义的，可被复用的 huya虎牙fDataFun. 自助服务多样化 数据服务方式是多样的，能满足不同类型数据服务需求比如报表、提数、数据对接等 数据服务面临问题 目录 怎样才是好的数据服务？ Content03数据自助产品 04产品实践成果 1huya虎牙ataFun. 05后续演进 03数据自助产品 MVP版本-数据自助LISEENS am 产品主流程(举例制作报表)-n Soe:BEx 第一步：新建看样 自定安标 白定义指标 指标订阅 制作报表 huya牙DataFun 标订间二- um 03数据自助产品 项目挑战 1.面向零代码能力的产品运营人群，如何才能降低数据使用门槛？ 维度指标服务 huya康牙fDataFun. 03数据自助产品 项目挑战 2.维度和指标的数据从哪里来？ 常规做法诉求结果 主题宽表 1.用户分析维度指标多变依赖人提供，交付周期长，人成为瓶颈 +2.跨主题宽表的数据需求 可视化工具 3.指标口径变更 用户能不能来定义维度指标，构建数据生产任务？ 1huya魔牙DataFun. 03数据自助产品 项目挑战 数据来源如：客户端理点 指标个性化程度高 50% 评估需求可荐盖率 应用场景 数据 如：功能分析解析总结 指标定义逻辑固定事件统计类需求 需求数据内容如：功能便用情况及留存 指标定义如：触发XXX的次效，人效 维度来源如：版本，事件公参 超200+需求 维度相对明确固定 1huya鼠牙ataFun. 10 03数据自助产品 项目挑战 3.我们该打造怎样的一款产品？ 流程拆解复杂数据需求提出需求维度指标定义定制数据ETL+个性故据服务 功能抽象维度指标定义定制数据ETL个性数据服务 元数据中心指标系统指标订阀自助服务 事管理订阅内容订阅类墅 维授营理晶H标定义 长期订网 白肽脉表 huya虎牙 fDataFun. 11 03数据自助产品 自助服务 自助报表可视化分析临时提数自上助摄口 指标订阅 提供生产数据 选择所器描标选择所密维度系绝理cube 数据自助 拾标系统提供规范定义指标 聚合指海定义雷存指标定义二次聚合定义指标四则运算 huya虎牙ataFun 元数据中心 提供指标定义原材料 事件管理雄度管理 12 03数据自助产品 明细数据 whenwhowherewhathow 个 26:1/11/2128:5TX261 用户1西面末泽丰件名产品 hexrtbeat 平台 robile 23031.11.0 Andrcid.:320,1C0:dfv_2,eaxsl.d-2326. 订汽的/正在自瑞/3单tobile19641.11,0 HATHEEALLVIPTAnrcide.:920,1C8I:dv_2-,gasid-:96% staztupLobilc47631.11.5MEEALLDI Iadrddt.:920,1C8(dtv_2=,ga32d=4769 21/11/21:t:531sbi 首五/王者荣路/8/2 startup obile23351.11.5 IDAA_TVVIPI Andrcid) :920.1CBdfv_2exid-2126 2//12 2Ci1/11/21:5:531sbi fr21_sthehoxrtbeat 我订氏的/正在自属/hexrtbea Lobilc obile OC.IER 1.t.0 19641.11.9 TL_indr(FDI Andrcide. VIBTandrcide. _920,1C8(dfs_25,ea32i.ds,su -296.72(:dfs_2-. g83#i.de.96± tobilc23351.6,3 320,1C8[ antrdidt. I:dfs_2,ea32i.d±2326, 我订低的/正在直瑞/4p Lobilc 32031.,3 adrdd. :920,1C8(:dts_2=, e23aLd=8213, 0:521sbi 91553961 订的证在/hsoarthcossbilc1.31.5ag.cBcx_ucowandrcide.:920,1C8idfv_-gaid,su :$:531sbiifra_etherhexrthe:tobile 1.11.0ST4VIPTAntreide :286.72(idfs_2, gside,tur 2c21/11/28-9:531sbi订区的/正在息瑞/1hearthesobilc17321.11.5Isg.cBcx_FFIsndrcid..920.1C8(.dfx_2=, heurthesrobils23331.11.5IEIAALYIQIGandrcid:920.1CB(:dis_2=, eaxal.d=;732 面五/金铲护之战//1hexrtbes rtobilc71851.11.5LTALSEOTEsndrcidt. :920.1C8(:dfs_2=,ea3zids*185. X1/11/2#:531sbi 首五/王奢荣席/1/1hexrthe tobilt23331.11,0AOSPan_gVLPI Antrcidi, :320,1C8(:dfs_,8axsid-232h S:531shi <汀区的/正弃直瑞/2_hthe S1/11/2#=9:531sb Bfr_eths? heirthes totile OEHER 1.E.3 AOSPanrVIPT indrcidE. kfr_ethezXfr2_sthes hearthcehexrtbea Lobilc Trabile OEHERER 1.11.0 1.11.5 ZIDAA_TVVI Anrcldy Andrcide, tobllc 23321.10.9 XO_rcPIantrcld9. :920,.1c8(:dts_2,c32.d2326, 21/11/31=e:58156 hesrthea tsbilt 23331.11,0 Antrcidi. .286,72I:dfs_, g11s.d2326 2C21/11/28_9:53156 Ifr_ethesheartbest tobilc CEHER 1.11.0 TCLAnd(FIindrcide. .920.1C8(Ldfv_2=, gasa.d=,cu 我订的/证在自据/2购obile196±1.11.0TCLindr<VPIandrcide._920,1C8(dft_2*,c83si.d*,964 9:53156百/和=指英/1/3 hoxrtbest Lobilc 32031.11.5 QEAICCREPLFI sndrcid7. :286,72I:dfs_2-,ga32id-8209 2621/11/21.:t:531:bi 我订汽的/正在直届/24hexrtbeat tobile 17321.11,0 Antrcidh. .286,72(:dfs_2,_g83#.de:712 196ES5:6-EZ/T/T33S fr_ether heartbest obile CEHER 1.36.0 3S56_E2CVI31 andreide. :230.72(:dfv_2s,_gaalds,cu ci1/11/31:#:551abi: frat_sther hertheat ohile 1.11.5 ZIBs6_TVVDPI andrcid. :120,1C0Idfs_2gs3si.d-,cur 2c21/11/21:9:533obl. fra_αthez haartbest obils 1.21.0 iatrdde. -920,1CBI:dtv_25,eaaLds,cu 1(营五/王五营莱/路全/1/4 hexrtbes wtohile 4851.11,0 inrcide. 388,72'dfs_2s, :920.1C8(:dfs_2, -920,3c8I.dfs_2=,ea2d,cu g3ai.d=485, aids,_tur Thuya扇牙ataFun. 13 03数据自助产品 标准化指标定义 1.客户端事件 平件平实表 事件 客户端埋点上报事实表 2.业务事件衍生事件标准化指标定义 用户充值 用户打赏 用户订阅 聚合指标定义 主播摇开播留存指标定义 二次聚合指标定义 主体维表1主体维表2更多措标四则运算 统一维度 用户维表主摇维表 产品维表衍生维度 IP维表 国家维表 huya虎牙DataFun 14 03数据自助产品 指标定义过程 使用事件：启动应用 累合指标定义量合对款：没备ID移动滤DAU SQL组装示剂： Selectcount(distinct设通D) 累合方式：去需计款FROMevent 业务限定：产品端=多成装WHERE事件名称=应动应用 AND产最增=移动销 起始事件：用充值 留存捐标定义晶存事件：启动应用品存MK：7日 7日用户充值留存率 代通辑对等，不做示例 指标定义模块 使用cube：主滑每分特在能人 二次聚合定义累合对象：在线人款 最高同时在线人数（PCU) SQL组链示例： 聚合方式：取量大值Selectmax(在战人数) FROM huya假牙ataFun 搭标四则运算 使用猫标：点击人数，课光人数计算公式：点击人数/限光人数量示格式：0.00% 曙光点击率 Select分钟,count(distinct设雷ID)FROMevent WHERE事件名称=观看直插 groupby分钟) 代码还提封费，不缴示例 15 03数据自助产品 统一维度、指标，元数据驱动数据生产任务构建 DimensionList Cube元数据由四部分组成：基础信息、维度信息组合、指标信息组合、全局过波条件限定组合，并支持数据访问权限控制 ●Cube元数据校验通过后，会生成实体表、例行构建任务作业、查问数据集等 MeasureListCubeMetadataMetadataVerifyCreateStorage Table GlobalFilterListSparkThriftServer CreateSchedule Task BasicInfoUpdateMetadata CreateBoard Dataset huya康牙ataFun 16 数据服务面临问题 目录 怎样才是好的数据服务？ Content数据自助产品 04产品实践成果 1huya虎牙ataFun. 05后续演进 17 产品实践成果 业务层面 1.48%需求自助满足，平均需求耗时16分钟，缩短业务获取数据决策时间 2.累计服务76个用户，90%为产品运营人员，产品上手使用门槛低 这个真的旺好用的 3.用户累计自定义创建2400+指标，818个数据集，117个报表，无需数据开发介入业务需求屋实是给你们玩透了 确实从到到1给不具备数据开发人员，开肤一个自己已确出报表的能力我已经大声再工位说了三遍这玩意还好用的用户线下说的，补充下~ 这个价值确实非常大的推带给照