首页 > 试题广场 >

在大语言模型的训练中,什么是"退火"(Annealing)学

[单选题]
在大语言模型的训练中,什么是"退火"(Annealing)学习率调度策略?
  • 随着训练进行逐渐增加学习率
  • 在训练开始时使用高学习率,然后逐渐降低
  • 在训练过程中随机变化学习率
  • 根据验证损失自动调整学习率

这道题你会答吗?花几分钟告诉大家答案吧!