MoE

记录 Fate 论文对 LLM Offloading 的观察，以及 MoE 卸载领域的几个主流方向。

按版本整理 DeepSeek V2—V4 的架构与训练变化，比较 MLA、MoE、多 Token 预测等方法解决的问题与取舍。