在大模型（尤其是大语言模型、大视觉模型、大多模态模型等）领域中，有许多常见术语。

一个单词（比如 "apple"）、半个单词（比如 "un-" 或 "-happy"），甚至标点符号。下次你看到大模型限制"输入不能超过XXX字"，其实就是token数量的限制哦！：模型一次能处理的token数有限（比如GPT-4最多约32k个token）：通常是一个字（比如 "苹"、"果"），或者常见的词语（比如 "苹果"）1️⃣ 给每个token编号（比如“苹果”=12345）2️⃣ 分析碎片之