腾讯视频云音视频技术 完善“新质传播覆盖力” 主讲人: jinjieli(李进杰) 传媒音视频应用场景的多样化发展驱动音视频技术不断创新 随着科技的持续发展,实时音视频、空间视频等新型视频技术层出不穷。未来,视频将不仅承载超内容和新交互体验,还能实现全时空链接。音视频 技术的不断进步正推动着传媒行业的创新与转型,并预示着未来将涌现出更多全新的应用场景和体验。 01 02 03 04 音频 语音通话 卡顿、时延 理解 点、直播视频 画质、音质 卡顿 时延 实时音视频 画质、音质同步 音视频交互 清晰度 空间视频 沉浸式 空间交互 操作延时 …..…..…..….. 新场景及新体验驱动音视频技术持续升维 超高清 视频画质的要求更高分辨率、更高帧率、更广色域、更优压缩质量 低延时 提升编解码效率,改进网络传输协议稳定,超低低延时 多智能 智能编解码、智能审核、智能封面智能拆条、高光时刻等 强互动 实时互动强化,互动形式多样化,包括语音、视频、虚拟现实等多方面互动 01超高清、多智能 全链路支持超高清编解码,大小屏互动,为用户打造极致视觉盛宴 超清智能转码 内容安全 大小屏互动 软件交付 关键词: 采集/上传 超高清制作 超高清播控 超高清播放 采集/上传 文件上传SDK 直播流推流 智能处理 ……. 超高清引擎/转码 三维声 分辨率/帧率增强 SDR/HDR 老片修复 ……. 色彩增强 细节增强 画质修复 播放安全 ……. CDN(防盗链) 内容加密 播出控制 内容安全 智能审核 端播放 ……. 播放器SDK播放 内容解密 用户鉴权 超高清编解码,音视频增强专注于提供卓越的超高清视听品质 效率提升30%以上成本节省50%以上纯软编码 行业认证 落地生根 创新点一: 智能场景识别提升超高清编码压缩率 模型匹配精确度:98%,时域空域分析准确度: 85% 创新点二: 编码算法优化实现超强编码加速能力,编码效率提升30% 创新点三: 图像质量保持的超高清画质增强技术;创新点四: 分布式的超高清直播编码技术,精细化线程 调度算法,优化多路编码,通过分布式调度 优化,实现业界首先支持实时软编8K 色彩增强降噪处理超分处理细节增强 直播接入 编解码 信号输出 媒体处理 直播录制 画质增强 直播截图 画质修复 视频AI 智能识别 智能审核 精彩打点 场景识别 广告插入 SCTE-35 自定义SEI 媒体信号接入 总控/外场/第三方渠道等 SRT/QUIC高清、超清信号 超高清转码 最高支持8k高分辨率 120FPS高帧率HDR(10bit) 信号分发 监看/导播/CDN/第三方等 支持2K/4K/8K多码率信号输出 切片转码/切片合并 ….. 媒体文件输入 媒资、内容库、上传等 2K/4K/8K多格式文件 文件输入 文件输出 制作平台/源站/第三方等 支持2K/4K/8K多格式文件输出 文件输出 信号切换 极速高清转码集群 领先的超高清转码技术,助力媒体降本增效 4K/8K实时、离线转码 同质量编码增益提升 20%+ 码率降低 50% 支持所有主流编解码标准 私有化部署 4K/8K实时编码 全部评分第一 专利技术强 支持全面 CCTV4K/8K频道 120FPS实时编码 近四年持续全项最佳 MSU世界云端视频转码⼤赛 拥有100+项 H.266/VCC编解码专利 ⽀持所有主流 视频编解码标准 深度参与国际标准研究制定 超过100+项技术提案获得标准采纳 H.264/AVC H.265/HEVC 120FPS 4K/8K120FPS实时编解码 20%+ 同质量比第二名的编码增益 50%↓ 比上一代标准H.265码率降低 H.266/VVC AV1 智能审核、视频加密、防盗链技术三重保护机制,保障内容播出安全 遵循国内加密标准 独有的增强型防盗链机制 支持大小屏互动 加密支持私有化部署 行业落地生根 增强型防盗链机制 媒体文件 内容加密 智能审核 加密媒体文件 加密工具 内容加密秘钥 秘钥管理 秘钥同步 数字内容版权保护 加密媒体文件 秘钥网关 视频储存 秘钥查询 增强型防盗链 内容授权 视频CDN 内容许可证 证书管理 客户端证书 1.限制使用时长:支持在URL中指定过期时间, 他人获取后无法长期使用; 2.加强访问权限:支持在URL中将客户端IP纳入 ChinaDRM 客户端 签名计算; 3.实现试看功能:支持在URL中指定试看时长; 4.自定义黑白名单:支持在URL中指定Referer黑白名单; 5.实现伪直播功能:支持在URL中指定从某个 Unix时间戳开始播放视频; 6.防止伪造URL:开发者使用密钥KEY对URL签名,并在URL中带上签名结果。 7.控制访问请求:节点检查加密URL中的参数和 签名,对访问请求进行控制,如果请求检查不通过, 则返回403响应码。 AI技术正在融入媒体视频业务,重塑媒体的业务生产流程 智能字幕 AIGC智能生产 高光时刻 智能拆条 智能弹幕 精彩瞬间 智能封面 游戏打点 内容审核 视频质检 检测到人物 智能识别内容 检测取水印 横屏转竖屏 人物识别语音识别文字识别物体识别 02低延时、稳传输 电竞选手 PC、手机客户端集成SDK,低延时推流 …….. 异地解说/导 PC、手机客户端集成SDK,低延时推流 播 云直播CSS 标准直播、快直播 云点播VOD 录制文件存储、回放 云/本地导播台 信号输入、输出、信号切换 用户 PC、手机客户端集成SDK,低延时推流 CDN内容分发 全球内容 加速分发平台 优势点一:低延时 自研多重最优寻址算法,具有全网调度能力,全球节点布局,保证国际链路端到端平均时延<300ms 优势点二:低卡顿 智能网络质量调控和编码优化降低卡顿率,实测抗丢包率超过80%、抗网络抖动超过1000ms 优势三:高品质 智能编解码支持720P、1080P、2K及2K+高清画质,3A处理算法,杜绝回声和啸叫 创新点四:多组件 提供视频通话、多人会议、在线直播、语音聊天室等丰富….的.场景化UI组件 综艺互动直播 APP、小程序、Web端 播放 电竞赛事直播 APP、小程序、Web端播放 AI语聊 APP、小程序、Web端 播放 …….. TRTCAI服务 ASR、智能打断、LLM、TTS 实时音视频TRTC 多人音视频通话、低延时互动直播 超低延时实时音视频,多场景联动释放业务增长新空间 平均延时<300ms 扛丢包率超过80% 3A音频、高清画质 实时音视频、AI语音 行业落地生根 连线嘉宾1 PC、手机客户端集成SDK,低延时推流 …….. 连线嘉宾N PC、手机客户端集成SDK,低延时推流 即时通信IM 消息收发、用户资料管理、群组管理 业务平台 集成分发平台、源站 连线采访 互动社交(对话式AI、虚拟互动) 协同通信 赛事直播 全球流媒体矩阵 客户 ….. 北京站 流矩阵控制器 北美站 流矩阵控制器 欧洲站 流矩阵控制器 StreamLink 安全、可靠的极速低延迟 流媒体传输能力 StreamLive 广电级转码、转封装、DRM 全面音视频处理能力 StreamPackage 高并发、视频封装、源站服 务、广告插入、安全防护等 跨域媒体流媒体加速传输服务,助力媒体信号跨域传输讲好中国故事 信号跨域、安全、稳定传输 低成本、毫米级延时 一路多出分发 北京区域 亚太区域 欧洲区域 北美区域 ….. 亚太站 流矩阵控制器 ….. 03强互动、多场景 XR技术拓展多元化的数字场景,呈现出空间延伸,创造节目制作新形态 数字智能技术的创新迭代,推动形成虚实互融、沉浸交互的新技术美学与沉浸式审美经验范式,腾讯基于多媒体实验室自研的虚实融合技术,结合软件算法的系统化创新,打造低成本、无硬件依赖的“臻彩云境”虚实融合视频制作平台,支持将真实拍摄的人或物体,与虚拟场景实时融合,满足业务方在节目制作、直播、发布会等多种场景下的视频采集制作需求。 融媒产品制作 创意视频拍摄 文旅推荐 直播带货 臻彩云境XR演播室 一台工作站 虚实融合SDK+渲染客户端+模板库+采集卡 输出场景包装后的视频 实时处理,支持输出抠图、运镜、防抖、渲染的虚实融合效果 一台摄像机 摄像机 镜头、灯光、三脚架 一块绿幕 通过二维码固定最终的位置 优势点一:无硬件跟踪 自研算法,实时进行相机快速跟踪和标定,无需采购跟焦器、标定设备 优势点二:人物跟踪 无穿戴式人体骨骼识别,且可智能跟踪人体或人体局部位置,不依赖动捕服设备 优势三:纯软件防抖 消除手持运镜拍摄导致画面的晃动,并提供6轴防抖功能,无需采购任何稳定器 创新点四:虚实互动 实现真人与虚拟空间互动(碰撞、手势 交互等),辅助内容生产创新 ….. 云渲染打通线上线下,推动业务创新,增强互动体验 利用云端强大的计算能力,将应用程序搬上云端实时渲染并串流,用户无需下载应用包体,即可通过APP、小程序、H5等轻量化终端体验云上应用,在传媒行业中可应用于数字孪生、虚拟会展、文旅文博、在线营销、云游戏等多个等多个领域,打通线上、线下,在丰富实现业务创新的同时,增强互动与体验。 延时60-80ms 支持8K分辨率 就近部署全球调度 全端支持 云端渲染平台 客户应用 云应用 APK应用、exe应用部署 低延时 音视频流 操作指令 音视频串流 云渲染 智能码率控制、音视频编解码、串流 业务前端 JS、Android、iOS客户端SDK 后台服务 应用上传、请求并发、建立连接等 调度服务 全球就近调度,自动分发 终端用户 小程序 Web 手柄 App 访问终端 网页、小程序、H5、APP、VR 创新优势 优势点一:低延时 边缘节点就近接入,延时60-80ms优势二:高品质 720P/1080P/2K/4K/8K多级别分辨率, 支持自适应分辨率优势三:快速部署 并发与应用分离管理,实现应用一次更新或部署,全球并发均可调度 优势四:全终端支持 App,浏览器,小程序,1天内实现快 速接入 ….. 应用案例 腾讯云音视频领先的产品及技术能力,推动传媒场景数字化创新和全智能升级 腾讯云音视频构建了业界最全面的音视频PaaS产品矩阵,国际数据公司(IDC)发布《中国视频云市场跟踪(2023下半年)》报告,腾讯云音视频的解决方案份额连续七次获得市场冠军,国际数据公司(IDC)发布《中国视频云市场跟踪研究-传媒行业,2023H2》报告,腾讯云在传媒行业视频云整体市场份额排名第一,腾讯云成为中国首家且唯一入选的代表厂商入选Gartner《MarketGuideforVideoPlatformServices》。 超高清 超高清转码 音视频画质增强 安全播出 ….. 低延时 编码优化高效网络全球设施 ….. 强互动 音视频连麦 VR/XR 云渲染 …. 多智能 智能编码智能生产智能审核 ….. 通过推动音视频技术的不断发展,推动传媒业务场景的创新与升级,提升用户体验,不断完善新质传播覆盖力 THANKS