推荐斯坦福数学硕士关于交叉熵的免费讲座，强调语言模型压缩语言而非预测单词

转推 @_yusufknl：作为自GPT-2时代就一直在部署LLM的人，这位斯坦福数学硕士关于交叉熵的讲座是我见过的公开免费发布的最接近ML博士资格考试的内容。每个人都认为语言模型预测下一个词。其实不是。它们压缩语言。一旦你看到背后的数学，就再也无法忽视。33分钟。收藏并今天观看。