RecodeX 重构消息,Hugging Face发布新指南,解读DeepSeek于1月提出的架构创新:用哈希N-gram嵌入替代部分MoE专家。该设计旨在提升模型效率,通过查找表减少计算开销。指南由Blackroot撰写,详细说明了这一架构调整的原理与潜在影响。