行业资讯
当前位置:化工资讯 > 行业资讯 > 首款全流程国产化类脑脉冲大模型问世
首款全流程国产化类脑脉冲大模型问世
  • www.chemmade.com
  • 2025-09-09 10:55:47
  • 科技日报
  • 记者8日从中国科学院自动化研究所获悉,来自该所等单位的科研人员,首次在国产GPU算力平台上,完成原生类脑脉冲大模型“瞬悉”1.0的全流程训练和推理,并正式开源了70亿参数版本大模型,同时开放了760亿参数版本大模型的测试网址。这是全球首款类脑脉冲大模型,实现了全流程国产化,标志着我国在类脑计算与大模型融合创新方面取得重要突破。


    当前,基于Transformer架构的大模型主要依赖简单“点神经元”与大规模算力提升智能,但其训练和推理成本随文本长度急剧增加,严重制约超长文本处理能力的提升。


    在这项研究中,研究团队另辟蹊径,借鉴大脑神经元的工作机制,提出了一种新的“基于内生复杂性”的具有线性复杂度的类脑脉冲大模型架构,成功打造出“瞬悉”1.0。“这个模型不仅在理论上揭示了新型计算路径,还构建了适配国产算力的训练推理框架,为构建更高效、更复杂且性能更强的新型大模型开辟了新路径。”中国科学院自动化研究所研究员李国齐说。


    相比传统模型,“瞬悉”1.0展现出四大核心优势:首先,在极低数据量下实现了高效训练,显著提升了长序列训练效率;其次,推理效率得到数量级提升,特别是在超长序列处理上展现出显著优势;再次,构建了国产自主可控的类脑大模型生态,支持将现有Transformer模型高效转换为类脑脉冲架构;最后,设计了多尺度稀疏机制,为低功耗的类脑大模型运行提供了有力支撑。


    李国齐表示,这项成果不仅是我国在类脑脉冲大模型架构和国产算力全流程建设上的重大突破,更为法律、医疗、科学模拟等超长序列应用场景提供了更高效的建模工具,也将启迪下一代神经形态计算理论和芯片设计。


  • 文章关键词: 脑脉冲大模型
  • 化工制造网 信息客服热线: 025-86816800
  • 版权与免责声明:
    »     本网转载并注明自其它来源(非化工制造网)的作品,目的在于传递更多信息,并不代表本网赞同其观点或和对其真实性负责, 不承担此类作品侵权行为的直接责任及连带责任。其他媒体、网站或个人从本网转载时,必须保留本网注明的作品第一来源, 并自负版权等法律责任。
    »     如涉及作品内容、版权等问题,请在作品发表之日起一周内与本网联系,否则视为放弃相关权利。