中国企业发展研究中心的新华社国家高端智库分中心人工智能大模型体验报告3.0版本显示,大模型市场竞争激烈,技术不断进步。从1.0版本到3.0版本的测评过程中,参与厂商的分数变化反映了大模型产品竞争的激烈和技术的进步。厂商A、B、C、D、E、F、G、H、I、J、K等厂商在测评中表现出色,其中科大讯飞星火和商汤商量在2.0版本中取得了优异的成绩,到了3.0版本,科大讯飞星火依旧保持领先,商汤商量紧随其后,稳定发挥。此外,澜舟科技孟子取得了显著进步,字节跳动豆包作为新面孔,在这次评估中崭露头角。报告还指出,虽然大模型的性能不断提升,但是大模型在快速发展的同时也面临着一些问题,如不稳定、幻觉和安全等。同时,市场需求也在发生变化,ChatGPT上线之初更多的人还是把它当成对话工具,但是不久ChatGPT的功能就得到深度挖掘,如今各个领域的内容创作,以及和行业细分领域深度结合的应用越来越多,市场对于大模型的需求也随着用户所在行业的变化而不断发生变化。因此,大模型测评体系需要不断升级,以助力持续发展之路。