训练方式|Masked Language Model (MLM)、Next Sentence Prediction (NSP)|自回归语言模型训练 (Autoregressive Language Modeling)||适用任务|文本理解任务（如文本分类、问答、NER等）|文本生成任务（如文章生成、对话生成、编程等）||模型规模|相对较小（如BERT-base，110M参数）|超大规模（如GPT-