Transformer 是现代大模型的基础,但只看公式容易一头雾水。本文用一个小语料,手算一遍从词向量到注意力的关键步骤,帮你真正理解内部计算。 1. 准备一个小语料 假设我们只有两个句子: "猫 追 老鼠" "狗 追 猫" 先构建词表:{…