术语
语言模型处理文字的基本单位:文字先被切成词元,模型一次预测一个。
别名 · token
一个词元常常比一个词短,可能是一个字、半个词或一个标点。第 1 讲说的“预测下一个词”,严格说是预测下一个词元。怎么切、怎么预测,第 3 讲细讲。
AI 一年长大了多少?