从经典出发,读懂大模型

AI 的每一步,
都有论文可循。

理解一个新想法,先找到它的来路。
沿着经典论文读懂大模型的发展,
再带着问题,读你自己的那一篇。

2017 — 202313 篇经典论文中文深度解读
THE IDEAS THAT SHAPED LLMs01 / 13
2017起点
ARCHITECTURE
Attention Is
All You Need

让注意力成为架构的中心。

2020规模SCALING
Language Models
are Few-Shot Learners
GPT-3 · 从训练走向上下文学习
2023偏好优化,还有另一种解法。
每篇论文,都放回它的历史坐标。PAPER LOOP / FIELD NOTES
两种读法,一个起点

经典路线,把零散的论文连接成知识。论文工作台,把看不懂的地方变成问题。

01 / THE CLASSICS

沿着时间,理解思想的演进。

查看全部 13 篇
02 / YOUR READING DESK

下一篇,读你关心的。

带上一份 PDF 或一个 arXiv 地址。
从重要论点开始,用原文核对每一次理解。

打开论文工作台
你的下一篇论文.pdfREAD · ASK · UNDERSTAND
ABSTRACT
关键方法 · 值得停下来读

它解决了什么问题?
证据在哪一段?
还有哪些局限?

让问题,回到原文。