Cue Learn CueTubeEN

[1hr Talk] Intro to Large Language Models · Andrej Karpathy

Karpathy 的《Intro to Large Language Models》,现在还值得看吗?

Andrej Karpathy 在 2023 年 11 月发布的这场一小时讲座,至今仍是 Hacker News 上最常被推荐的大语言模型入门之一。本页帮你判断要不要看、看的时候留意什么、看完之后做什么。本页不是逐字稿,也不能代替视频本身。

主讲: Andrej Karpathy讲座59 分 48 秒2023 年 11 月英语

在 CueTube 观看YouTube 原视频 ↗

只有在你按下播放后,CueTube 才会加载 YouTube 官方播放器。

简短回答

为什么有人推荐它

在 Hacker News 的 HackerTube 快照(2026 年 10 月 31 日导出)中,这场讲座在 2023 年 11 月至 2026 年 6 月间被提到 20 次,其中 9 次是推荐。Hacker News 上的原始帖子(2023 年 11 月 23 日)获得 291 分、32 条评论。 Hacker News ↗

据观众所说,它讲了什么

以下依据 HackerTube 摘要和上面的评论整理,并非我们完整看完讲座后的总结:

哪些内容已经过时

这场讲座录制于 2023 年 11 月。此后模型、产品和价格已多次变化,所以其中具体的模型名称、排名和能力,只能看作当时的快照。人们持续推荐它,是因为其中的思路:训练怎样进行、模型为什么会被操纵、更慢的推理需要什么。

想看更长、更新的讲解,Karpathy 本人的后续视频也收录在 CueTube:

Deep Dive into LLMs like ChatGPT · Andrej Karpathy

带着三个问题看

观看时记住这三个问题,看完再对照讲座核对自己的答案。这里不打分,也不保存任何内容。

  1. 模型在预训练中学到什么?进一步训练成助手后,又改变了什么?
  2. 为什么一段精心写的提示,能让模型无视它原本的指令?
  3. 要让模型对一个难题“想得更久”,它需要什么?

然后去练习

这场讲座是 Cue Learn 路线第 1 阶段“从一个可核对的结果开始”的选看背景。练习本身在 Cue 的正式指南里:

开始第一个 Agent 任务 ↗
返回 Cue Learn 学习路线

来源、权利与更新