ITBear旗下自媒体矩阵:

全球首款类脑脉冲大模型“瞬悉1.0”诞生,全流程国产化引领类脑计算新突破

   时间:2025-09-09 02:10:44 来源:ITBEAR编辑:快讯团队 IP:北京 发表评论无障碍通道
 

中国科学院自动化研究所李国齐、徐波团队联合沐曦metaX公司,成功研发出全球首款全流程国产化的类脑脉冲大模型——“瞬悉1.0”(SpikingBrain-1.0)。该模型基于团队提出的原创内生复杂性理论,在国产千卡GPU算力平台上完成从训练到推理的全流程开发,显著提升了超长序列推理的效率与速度,为构建自主可控的新型非Transformer架构大模型生态奠定了基础。

研发团队从大脑神经元的工作机制中汲取灵感,提出了“基于内生复杂性”的大模型架构方法。通过理论创新,团队建立了脉冲神经元内生动力学与线性注意力模型之间的关联,指出传统线性注意力机制本质上是树突计算的简化形式。这一发现为提升模型复杂度与性能提供了新方向。基于此,团队开发了两种规模的类脑基础模型:7B参数的线性复杂度模型和76B参数的混合线性复杂度模型(激活参数量达12B),并同步开源了代码与测试平台,同时发布了中英文技术报告。

为适配国产硬件环境,团队针对沐曦metaX曦云C550 GPU集群,开发了高效训练与推理框架,涵盖Triton算子库优化、模型并行策略设计以及集群通信协议定制。这一系列技术突破使模型在国产算力平台上实现了性能与效率的双重提升。

团队负责人李国齐指出,该成果不仅标志着我国在类脑计算与大模型融合领域取得关键进展,更为法律、医疗、科学模拟等需要处理超长序列数据的领域提供了高效建模工具。这一研究或为下一代神经形态计算理论与芯片设计提供新的理论支撑。

举报 0 收藏 0 打赏 0评论 0
 
 
更多>同类资讯
全站最新
热门内容
网站首页  |  关于我们  |  联系方式  |  版权声明  |  争议稿件处理  |  English Version