RecodeX 重构消息,字节跳动已开始预训练一款最高10万亿参数的大模型,项目仍处早期阶段,最终规模未定。若按上限训练,该模型参数规模将超过Kimi K3三倍,成为中国团队已知最大模型,并逼近Anthropic旗舰水平(行业估算Mythos 5约8万亿参数、Fable 5约5万亿参数)。预训练通常需3至6个月,后续还需后训练。张一鸣近期在Seed内部反对蒸馏竞争对手模型,要求自研冲击第一梯队。这是字节目前最激进的规模下注。
字节跳动开训10万亿参数模型 逼近Anthropic旗舰规模
AI 辅助判断积极仅供信息参考,不构成投资建议
原始信息来源区块律动theblockbeats.info
查看原文 ↗