ITBear旗下自媒体矩阵:

东北大学与麻省理工学院新研究:为AI“大脑”绘制“关系图”探秘内部运作

   时间:2026-04-18 05:17:38 来源:互联网编辑:快讯 IP:北京 发表评论无障碍通道
 

美国东北大学与麻省理工学院联合团队在计算机视觉与多模态人工智能领域取得突破性进展,其研究成果已发布于预印本平台arXiv。该研究提出一种名为“神经拓扑”的新方法,通过构建视觉-语言模型(VLM)内部神经元协作关系网络,为理解AI如何融合图像与文本信息提供了全新视角。这项技术不仅能预测模型行为,还能精准识别AI“幻觉”现象,甚至通过干预关键神经元直接影响输出结果。

传统研究多聚焦于单个神经元或注意力机制,如同通过显微镜观察零件却难以把握整机运作。新方法则采用“系统级”分析,将每层处理单元视为动态协作网络。研究团队通过计算神经元间的协同强度,绘制出以神经元为节点、以相关性为边的拓扑图。这种可视化手段首次揭示了AI处理多模态信息时的整体组织模式——浅层网络中视觉与语言信息独立处理,随着层数加深,两类信息通过特定枢纽神经元实现深度融合。

实验验证环节,研究团队在三个主流VLM模型上测试了神经拓扑的有效性。针对基础任务如物体计数,基于图卷积网络(GCN)的预测探针准确率较传统线性模型提升最高达7.7个百分点;在复杂推理任务中,虽然优势有所缩小,但仍展现出对感知融合类任务的显著敏感性。更引人注目的是幻觉检测实验,通过分析神经元协作模式,系统能以超过90%的准确率识别AI虚构内容,远超仅依赖文本特征的基线模型。

枢纽神经元的发现成为理解AI决策机制的关键突破。这些稳定存在于中间层的核心节点,承担着跨模态信息整合的重任。干预实验显示,强制关闭枢纽神经元会导致模型性能骤降,部分任务准确率损失超过80%;而扰动最强协作边则引发特定功能失效,如颜色识别错误率激增。这些发现表明,AI的可靠性与特定神经元群体的协作模式密切相关,而非单纯取决于个别神经元的激活强度。

与现有可解释性方法相比,神经拓扑实现了三个维度的突破:在预测层面,通过结构指纹捕捉细粒度决策信号;在分析层面,揭示了多模态融合的动态演化过程;在干预层面,建立了从观察理解到主动调控的完整链条。研究团队开发的开源工具包已包含拓扑图构建、GCN探针训练及可视化分析模块,为后续研究提供了标准化平台。

该成果对高风险AI应用具有重要启示。在医疗影像分析等场景中,神经拓扑技术可帮助开发者定位模型决策的关键路径,通过强化枢纽神经元的鲁棒性训练减少误诊风险。对于大语言模型常见的“幻觉”问题,基于协作模式异常的检测机制为构建可信AI提供了新思路。目前,研究团队正探索将该方法扩展至视频理解等更复杂的多模态任务,并研究如何通过微调枢纽神经元实现模型行为的精准修正。

这项研究通过重构AI的“社交网络图”,首次将群体动力学理论引入深度学习解释领域。其提出的中间尺度分析框架,既避免了局部归因的片面性,又克服了全电路分析的计算壁垒,为理解复杂AI系统的运作机制开辟了新路径。相关代码与数据集已在GitHub公开,学术界可在此基础上进一步探索人工智能的内在工作原理。

 
 
更多>同类资讯
全站最新
热门内容
网站首页  |  关于我们  |  联系方式  |  版权声明  |  争议稿件处理  |  English Version