学习笔记(19):从零开始学习机器学习视频教程-梯度下降前提及步骤(新)

tech2025-03-24  5

立即学习:https://edu.csdn.net/course/play/6601/129671?utm_source=blogtoedu

求w

最优化算法,沿梯度下降的方法求解最小值

 

2:50min 是 

前提条件:1:目标函数  求最小值

分母比最小二乘法多m

2:训练集

 

最终目标:目标函数最小值

 

最快的速度下山

 

起始位置:随机 5:14min

对最终结果有影响

不同起始点,不同min

~:只是"局部"min: 缺点

 

每一步:学习率有关 

对结果造成影响

太大  不收敛

太小,速度慢

合理的值:  达到min

 

让学习率适应模型  根据经验

 

最新回复(0)