https://www.caulif.com/tags/llm%E8%AE%AD%E7%BB%83/Recent content in LLM训练 on caulif的个人博客Hugo -- 0.154.5zh-cnThu, 09 Jul 2026 00:00:00 +0800https://www.caulif.com/posts/ai%E6%97%B6%E4%BB%A3%E7%9A%84%E6%80%9D%E7%BB%B4%E6%A1%86%E6%9E%B6%E8%AF%BB%E5%90%8E%E5%B0%8F%E8%AE%B0/Thu, 09 Jul 2026 00:00:00 +0800https://www.caulif.com/posts/ai%E6%97%B6%E4%BB%A3%E7%9A%84%E6%80%9D%E7%BB%B4%E6%A1%86%E6%9E%B6%E8%AF%BB%E5%90%8E%E5%B0%8F%E8%AE%B0/记录一个关于推理与训练的地形类比：模型参数像初始地形，prompt 影响局部路径，训练则在长期上塑造地貌与变化规则。https://www.caulif.com/posts/%E5%8F%8D%E5%90%91%E4%BC%A0%E6%92%AD%E5%AD%A6%E4%B9%A0%E7%AC%94%E8%AE%B0/Fri, 26 Jun 2026 00:00:00 +0800https://www.caulif.com/posts/%E5%8F%8D%E5%90%91%E4%BC%A0%E6%92%AD%E5%AD%A6%E4%B9%A0%E7%AC%94%E8%AE%B0/整理反向传播的 Loss、梯度、链式法则、优化器更新，以及 LLM 训练中常见的显存优化方法。https://www.caulif.com/posts/%E4%B8%8A%E4%B8%8B%E6%96%87%E9%80%80%E5%8C%96/Fri, 26 Jun 2026 00:00:00 +0800https://www.caulif.com/posts/%E4%B8%8A%E4%B8%8B%E6%96%87%E9%80%80%E5%8C%96/整理长上下文退化的含义、位置偏置、长距离泛化、训练分布、检索与推理差异，以及 Agent 场景中的 context rot。