AI幻觉是指人工智能模型生成的看似合理但实际错误的内容,这种现象在大型语言模型(LLM)中尤为突出。虽然头部商业模型通过技术优化已将幻觉率控制在较低水平,但幻觉现象的根源在于LLM的技术架构和训练方法,使其难以完全避免。
AI幻觉已引发多起风险事件,例如错误信息传播、法律领域职业风险以及医疗行业的系统性风险。这些事件表明,AI幻觉可能导致企业的多维度治理风险,包括技术失控、法律与合规的灰色地带危机、多主体声誉的系统性冲击以及伦理风险与社会信任危机。
为应对AI幻觉带来的挑战,完善AI治理是实现人工智能可持续发展的必然选择。中国已初步构建起覆盖人工智能全生命周期的治理法律框架,并通过全链条监管机制构建技术风险防火墙。同时,中国正推动人工智能向“可信、可靠、可控”的方向发展,塑造负责任AI生态。
为应对AI幻觉,需构建“技术-管理-制度”三维防御体系。技术层面,可通过检索增强生成(RAG)框架将模型与企业内部知识库实时联动,同时采用对抗训练和置信度校准提升逻辑一致性。管理层面,需建立人机协同决策流程,并在金融领域引入动态风险阈值机制。制度层面,应制定针对幻觉的评估标准与合规要求,并探索“可解释AI”(XAI)工具,通过可视化决策路径增强技术透明度。
此外,需重构训练数据基础,建立合规化数据治理体系,开发多模态侵权检测系统,强化生成过程控制,构建透明化创作生态,完善责任分配机制,并重塑全球版权治理框架,平衡创新激励与权利保护。