原文地址：First Look at Reasoning From Scratch: Chapter 1，by Sebastian Raschka, on 2025-04-29
从零初探推理：第1章
当代大语言模型的推理入门
大家好：
如各位所知，我近期撰写了大量关于大语言模型推理前沿研究的内容。在下一篇聚焦研究的博客文章发布前，我想为付费订阅者准备一份特别内容，感谢大家一直以来的支持。
目前我正在撰写一本关于大语言模型推理原理的新书，今天先和大家分享全书的第 1 章。这一章约 15 页，是大语言模型领域的推理入门内容，概述了推理时算力扩展、强化学习等核心方法。
感谢各位的支持！希望大家喜欢这一章节，也敬请期待我下一篇关于推理研究的博客文章。
祝阅读愉快
塞巴斯蒂安
第 1 章 引言
欢迎来到大语言模型（LLM）发展的下一阶段：推理。大语言模型已经彻底改变了我们处理与生成文本的方式，但此前其能力的核心驱动力主要是统计模式识别。如今，推理方法的新进展让大语言模型能够应对更复杂的任务，比如解答逻辑谜题、完成多步算术运算。理解这些方法，正是本书的核心主题。
在这一入门章节中，你将学习：
-
“推理” 在大语言模型语境下的具体定义
-
推理与模式匹配的本质区别
-
大语言模型常规的预训练与后训练阶段
-
提升大语言模型推理能力的核心方法
-
为什么从零搭建推理模型，能帮助我们更深入地理解其优势、局限与实际权衡
在本章搭建完基础概念之后，后续章节将转向实操代码案例，带你直接实现大语言模型的推理技术。
1.1 对大语言模型而言，“推理” 意味着什么？