嵌入是对语言中含义与模式的数值化表示。这些数字帮助系统找到与问题或主题高度相关的信息。这些嵌入由嵌入模型生成。嵌入模型可以将词、图像、文档，甚至声音，转换为一串称为向量的数字。你可能在大语言模型语境下了解过嵌入，但嵌入的历史其实更悠久。目前，大多数嵌入都由语言模型创建。与给每个 token 或词分配静态向量不同，语言模型会创建上下文化的词向量，让词/句子/片段在不同上下文下拥有不同表示。这些向量随