SelectDB实时数仓在智慧港口中的应用实践

哪吒科技数仓发展经历了三个阶段，从最初支持智慧港口全生命周期与全解决方案，到数据驱动码头作业，再到港口运营数据枢纽数仓，架构也从 V1.0 到 V2.0 不断演进，以应对复杂场景、查询效率等挑战。哪吒科技实时数仓选型 SelectDB，主要基于其数据导入秒级、查询性能支持高并发、弹性架构、开放生态、安全合规和自主可控等关键指标。哪吒科技实时数仓架构包括 ODS、DWD、DWS 和数据服务平台，通过 FlinkCDC 实时采集数据源数据到 SelectDB 实时数仓。SelectDB 在实时场景中应用广泛，如日志收集分析，通过合理建表和导入语句设计，实现高效查询。在智慧港口实战应用中，SelectDB 支持指标计算实践，如统计钢材大规模作业数据、全场货物短期作业量和钢材特殊高效作业数据，并通过物化视图实践显著提升查询性能，如查询响应时间减少约 10 倍，吞吐量提升约 9.5 倍，CPU 使用率降低约 1.53 倍。哪吒科技业务发展迅速，客户数量超过 100 座，TOS 产品支撑国内箱量超过 30%，客户覆盖码头数量超过 9000 万 TEU。SelectDB 带来的收益包括服务成本降低，如平台运维成本降低、存储成本降低 70%、人员开发成本降低，以及业务效果提升，如核心报表数据实时性提升至 5s 内，80% 即席分析可在 2s 内返回结果。未来展望包括 SelectDB 存算分离实践、增强多表物化视图业务运用和集群管理工具运用，以进一步提升查询性能和运维效率。