美团发布LongCat-2.0:总参数规模1.6万亿 全程由国产算力训练

快科技6月30日消息,今日,美团发布新一代万亿参数大模型LongCat-2.0,并将对外开源。QtB热门主流游戏攻略_实用技巧_经验分享

据介绍,LongCat-2.0是业界首个依靠国产算力完成训练、推理全流程的万亿参数大模型,总参数规模1.6万亿,从零开始预训练,原生支持1M超长上下文。QtB热门主流游戏攻略_实用技巧_经验分享

此前,该大模型的测试版本在OpenRouter上的总调用量已跻身全球前三。QtB热门主流游戏攻略_实用技巧_经验分享

其中在Hermes的月调用量位列全球第一,在Claude Code的月调用量位列全球第二,仅次于Claude Opus 4.8。QtB热门主流游戏攻略_实用技巧_经验分享

LongCat官方宣布,将于近期开源Infra框架、推理引擎、模型参数等核心技术,以回馈全球开发者社区。QtB热门主流游戏攻略_实用技巧_经验分享

业界首个!美团发布LongCat-2.0:总参数规模1.6万亿 全程由国产算力训练QtB热门主流游戏攻略_实用技巧_经验分享

据悉,LongCat-2.0预训练数据规模超过30T tokens,覆盖中文、英文、多语言和代码等多类数据。QtB热门主流游戏攻略_实用技巧_经验分享

面对万卡级训练中的硬件故障、通信异常、显存压力与数值波动,LongCat团队从稳定性、正确性和效率三方面攻克国产算力训练难题。QtB热门主流游戏攻略_实用技巧_经验分享

在稳定性上,通过HCCL异常处理、弹性扩缩卡和自动故障恢复,将月均日故障率降低70%以上。QtB热门主流游戏攻略_实用技巧_经验分享

在正确性上,通过自研设计确定性算子、Bitwise一致性验证和参数检测,保障训练结果的可靠,同时基于实践提升关键模块计算精度、优化Reduce逻辑。QtB热门主流游戏攻略_实用技巧_经验分享

在效率上,通过流水线调度、显存优化和算子级控核,训练MFU提升1.5倍。QtB热门主流游戏攻略_实用技巧_经验分享

最终,LongCat实现稳态日吞吐超过1T tokens/day,完成万亿参数MoE模型在国产算力上的稳定训练。QtB热门主流游戏攻略_实用技巧_经验分享

也许你还喜欢

神奇海洋1月23日答案2025-人们俗称

神奇海洋1月23日答案2025:今天的神奇海洋问题已经更新,大家

英雄联盟复仇之矛怎么玩 英雄联盟

英雄联盟复仇之矛怎么玩?复仇之矛强度如何?在近期的MSI比赛中G

《Sword of the Sea》游戏下载网址

《Sword of the Sea》是由Giant Squid制作发

迷你世界岩石怎么获得 迷你世界岩

迷你世界岩石怎么获得?岩石怎么找?在游戏中采集岩石需要使用到镐子

《崩坏:星穹铁道》动画短片:「那安息

今日(3月31日),米哈游官方公布《崩坏:星穹铁道》动画短片:「那安息的

月之暗面严正声明:未授权任何第三方

针对近期市场上出现的多起假借月之暗面名义发布不实融资及股权交

特斯拉第一季度营收有望同比增长

4月21日消息,据外媒报道,由于贡献近80%营收的电动汽车的

《真江湖HD》VIP大礼包等你来战 新

》真江湖HD最新版下载《《真江湖HD》是一款由3733推出的具有鲜明

漫天花剑雨新服火热来袭 官方最新

》漫天花剑雨最新版下载《《漫天花剑雨》是一款由巴兔推出的具有鲜明高爆

《火影忍者:忍者新世代》巅峰试炼玩

玩法介绍:巅峰试炼玩法是《火影忍者:忍者新世代》中不定期返场的一种玩