您的浏览器禁用了JavaScript(一种计算机语言,用以实现您与网页的交互),请解除该禁用,或者联系我们。[腾讯]:大模型存储基础设施——数据湖存储GooseFS - 发现报告

大模型存储基础设施——数据湖存储GooseFS

2024-09-12腾讯王***
大模型存储基础设施——数据湖存储GooseFS

数据湖存储GooseFS 腾讯云高级产品经理主讲人:林楠 统一的数据湖存储服务是企业存储的未来形态 ✓降本增效:更大、更快、更全能、更低成本的存储服务 ••• •• 协议•• 对象存储为数据湖提供经济、可靠的海量存储能力 海量 成本 大模型重塑存储基础设施 从GPU到存储:如何跨越基础设施之间的性能鸿沟? •,数据规模决定模型精度,存储性能影响算力效率。 •规模、性能、稳定。 •海量数据需求和极致性能需求。 数据湖存储GooseFS:打通数据从存到用的最后一公里 更高的元数据性能 •• 高性能元数据引擎实现,大幅提升元数据性能 元数据规模平行扩展 元数据性能平行扩展 ✓✓✓可达百万级亚毫秒级 ✓挑战 ✓方案 ✓收益平行扩展至百亿级 数据亲和性调度,大幅缩短数据IO距离 ✓利用数据本地性,大幅度减少IO距离和访问延迟 ⚫数据吞吐 •• ⚫多协议支持 •• ⚫统一腾讯云生态服务 ••• 云原生管控能力,助力提升业务连续性 ✓提供多种托管部署模式,提升集群稳定性和运维效率。 ⚫业务需求 ✓✓ ⚫技术收益 ✓✓✓✓ 客户案例:某客户大模型集群 方案说明 业务诉求 ✓✓ 客户价值:作业性能数倍提升