标签: 预训练任务 - 文档

BERT的Masked Language Model损失函数与NSP任务理解BERT的核心在于弄懂它预训练时的两个核心任务及其对应的损失函数。这相当于弄清楚模型在学习过程中如何“

# BERT # MaskedLanguageModel # NSP任务

标签：预训练任务