技术进展

ReCBM:不确定性门控关系推理新框架

Heooo 08月12日12时31分 31 阅读

「ReCBM针对概念瓶颈模型在不可靠概念状态下的鲁棒推理问题,提出不确定性门控的关系推理框架。该框架引入共现、蕴含、排斥三类语义关系,并利用不确定性动态调节概念贡献。实验表明,ReCBM在概念缺失和翻转时显著提升概念与任务恢复,支持不确定性感知干预,且能提取紧凑概念子集而不降低性能。」

概念瓶颈模型近年来成为可解释人工智能的重要方向,它通过将预测过程映射到人类能够理解的概念上,使得模型决策可以被语义化解释,并允许用户在推理阶段进行干预。然而,当概念本身存在不确定性或错误时,例如概念缺失或被翻转,这些不可靠的语义证据会在瓶颈层中传播,进而影响最终任务预测。

为了应对这一挑战,学术界已提出多种改进方案,包括更丰富的概念表示、不确定性估计以及概念间依赖关系的建模。但目前的模型在不可靠概念状态下,仍然缺乏稳健的推理机制。如果模型无法判断哪些概念证据是可信的,解释和预测都可能被误导。

针对上述问题,最新研究提出了一种名为ReCBM的框架,全称为不确定性门控的关系推理框架,用于概念瓶颈模型。ReCBM的核心思想是在瓶颈层中引入语义定义的概念关系,并利用不确定性作为门控信号,对关系的细化进行引导。这种做法让概念之间的证据交换变得有序可控,从而避免错误或模糊的概念对推理造成过度干扰。

具体而言,ReCBM建模了三种基本的关系类型:共现关系、蕴含关系和排斥关系。共现关系描述的是概念之间通常同时出现的模式,蕴含关系表达一个概念的出现隐含另一概念的出现,排斥关系则用于刻画概念之间的互斥性。在这些关系的基础上,模型能够明确不同概念之间的证据传递路径。同时,不确定性信息充当调节器,每个概念在关系推理过程中的贡献权重重由其不确定性动态调整,确保高不确定性的概念不会主导整体推理。

实验部分,研究团队在多个基准数据集上测试了ReCBM的性能。结果表明,在概念缺失和概念翻转的困难场景下,ReCBM都能显著提升概念恢复和任务恢复的水平。此外,ReCBM还支持不确定性感知的干预行为,当用户对某个概念标记进行调整时,模型能够更合理地重新组织概念证据。更值得注意的是,模型还能自动提取紧凑的任务相关概念子集,同时不降低下游预测性能,说明它在精简语义空间与保持识别精度之间取得了良好的平衡。

ReCBM的提出为概念瓶颈模型在真实场景下的部署提供了更强的保障。现实应用中,概念标注常常会存在噪声或不完整,而具有不确定性门控的关系推理机制,使模型在面对不完美概念信息时,仍能维持可靠的解释和预测。未来,这项研究有望与多模态学习、大语言模型等结合,进一步提升可解释人工智能的鲁棒性和适用性。

# 概念瓶颈模型 # 不确定性推理 # 可解释人工智能

来源:Heooo AI工具导航