
美团正式开源万亿参数大模型 LongCat-2.0,国产算力全流程适配
摘要
美团今日正式宣布将自研万亿参数大模型 LongCat-2.0 全面开源,并同步公开针对国产算力芯片(NPU)深度适配的推理代码,成为业界首个在五万卡国产算力集群上完成预训练到推理全流程的万亿参数开源模型。
LongCat-2.0 采用 MoE(混合专家)架构,总参数量达 1.6 万亿,每 Token 平均激活约 48B(动态 33B~56B),原生支持 100 万 Token 超长上下文,专为 Agentic Coding(智能体编程)与代码执行场景设计。架构上创新引入 LongCat 稀疏注意力(LSA)与 N-gram Embedding 模块,在保持 MoE 稀疏度近 97% 的同时提升长上下文处理效率和参数利用率。
模型权重与代码已上线 HuggingFace、GitHub 及 ModelScope,采用 MIT 协议。美团方面表示,此次开源意在为行业提供可复现的国产算力大模型技术路径,推动存量国产 AI 芯片在真实生产力场景中落地应用。
原文链接
标签
#大模型 #开源 #MoE #国产算力 #LongCat
物界前沿