首页
文章列表
标签墙
返回找工具啦
BERT
共 1 篇文章
BERT的Masked Language Model损失函数与NSP任务
2026-07-07 12:43:03
BERT的Masked Language Model损失函数与NSP任务 理解BERT的核心在于弄懂它预训练时的两个核心任务及其对应的损失函数。这相当于弄清楚模型在学习过程中如何“做题”和“对答案”。 1. 理解并实现 Masked Language Model MLM 任务 MLM是BERT的灵魂
BERT
MaskedLanguageModel
NSP任务
66
0