2025年数据趋势
巨量知识管道将走向主流: RAG(检索增强生成)将实现工业化,将可信知识大规模地输入到LLM的上下文窗口中。到2025年底,至少10%甚至20%的客户咨询将与LLM互动,这是一个巨大的飞跃。
多引擎计算将成为趋势: 组织将越来越多地使用多个计算引擎来处理数据。虽然倾向于整合,但拥有两个或多个系统是可行的,因为许多开发人员使用不同的系统。所有这些引擎都需要连接到单一存储层,这将推动统一存储的采用,例如开源Iceberg表。
数据解决方案将通过整合而增强: 数据领域将出现整合趋势,这将使行业受益。过多的风险投资资金导致了市场上的解决方案过多,而整合将为客户提供更少但功能更全面的解决方案,并提供更大的稳定性。
行业将迎来健康重置: 许多风险投资支持的公司将很快耗尽资金,这将导致数据领域的供应商整合。这将使行业受益,因为过多的供应商和工具可能会让买家感到不知所措。
AI代理将弥补行业健忘症: AI将弥补行业健忘症,例如语义层等概念并非新事物。AI辅助数据工程将兴起,AI代理将填补这一空白。
平衡AI野心与能源网格需求: AI所需的电力将非常巨大,这将推动对替代能源的使用。数据质量和数据文化之间的融合将成为AI成功的关键。
AI助手将得到广泛应用: AI助手将在工作和生活中得到广泛应用,例如Microsoft Copilot和Google Gemini。
数据湖将成为AI的基础: 数据湖将越来越多地作为AI的基础,因为它们可以提供对各种数据(包括非结构化和半结构化数据)的快速、可靠和安全的访问。
AI部署将走向规模化: 我们将看到更多公司战略性地利用生成式AI技术,以自动化现有的工作流程或增强客户体验和服务。这将引入许多挑战,例如需要加强MLOps和AIOps。
IT与业务之间的差距将缩小: 随着AI的加速,缩小IT与业务之间的差距将变得越来越重要。数据网格仍然相关,因为它可以防止影子IT的出现。
问题解决的实用主义将战胜数据教条: 将重点放在解决实际问题,而不是数据教条上。我们需要灵活的技术和不受僵化观点约束的IT,以便解决方案具有更长的寿命。
数据互操作性将取得进展: 我们将看到数据互操作性方面取得进展,这将帮助人们以安全的方式访问有意义的数据,从而帮助他们做出更好的决策。
从数据重力到平台重力: 数据重力将演变为“平台重力”,这意味着决策、应用程序、AI等将被带到数据云中运行。
非结构化数据将带来新见解: 添加结构化数据将成为数据团队赚钱的途径。分析人员将更加关注如何利用AI将数据质量管理提升到新的水平。
半结构化数据将颠覆现有的数据管理实践: 半结构化数据将颠覆现有的数据管理实践,例如文本、语音、图像、幻灯片和文档。企业必须调整其数据管理实践,以包括各种存储格式以及相应的安全和治理策略。