Adam优化器

ICLR 2025时间检验奖揭晓，Adam优化器和注意力机制分别由Jimmy Ba、Yoshua Bengio领衔的两篇2015年论文摘得冠军与亚军。Adam让大模型训练更快更稳；注意力机制为Transformer奠定基础并广泛应用于各类AI模型。