标签: 模型架构

从 GPT、BERT、T5 到 MoE、Mamba、Qwen2.5 与 DeepSeek，系统梳理大语言模型的架构、扩展规律、分布式训练和对齐方法。