参数设置
计划方式
三种经典的学习率衰减方式
初始学习率 η₀
训练开始时的学习率（步幅的基准）
总epoch数 T
ep
整个训练的epoch数
衰减参数
步长：衰减系数γ／指数：衰减常数k／余弦：曲线形状参数
当前epoch t
ep
显示此时刻的学习率和进度
计算结果
—
当前学习率 η(t)
—
初始学习率 η₀
—
最终学习率 η(T)
—
平均学习率
—
当前/初始 比值
—
计划种类
—
损失谷下降的球 — 步幅与学习率成正比
当epoch从0→T推进时，学习率逐渐降低，球的步幅也随之缩小。前期大跨步弹跳，后期在谷底小心谨慎地收敛。上部曲线显示学习率推移。
学习率 vs epoch
三种方式对比（步长·指数·余弦）
理论·主要公式
$$\text{步长: }\eta=\eta_0\,\gamma^{\lfloor t/s\rfloor}\qquad \text{指数: }\eta=\eta_0\,e^{-kt}$$
步长衰减：每s个epoch将学习率乘以γ，形成阶梯状。指数衰减：用衰减系数k连续平滑地减小学习率。t：当前epoch，η₀：初始学习率。
$$\text{余弦: }\eta=\eta_{min}+\tfrac{1}{2}(\eta_0-\eta_{min})\!\left(1+\cos\frac{\pi t}{T}\right)$$
余弦退火：按半周期余弦曲线从η₀平滑下降到最小值，后期逐渐接近最小值。T：总epoch数。所有计划都体现了"前期速度"与"后期精度"的平衡。