值不值得学：先弄清它解决什么问题

很多做机器学习或算法实现的人，能熟练调用现成框架，却常卡在模型不收敛、损失函数震荡或梯度爆炸这类底层问题上。这门最优化数学课解决的就是这个断层：它不教你怎么调库，而是带你拆解“为什么这么更新参数”背后的数学逻辑。课程围绕无约束优化、一维搜索、梯度下降、牛顿法以及共轭梯度法展开，直接对应算法工作中模型求解的核心环节。如果你的日常只是写业务接口、做普通后端增删改查，这门课短期内很难转化为生产力；但如果你正准备往算法建模、机器学习底层研发或量化策略方向转，这属于必须啃下来的硬骨头。它不适合零基础，默认你已经掌握线性代数和微积分，最好对多元函数求导有一定熟练度，否则在推导二阶必要条件时会非常吃力。

建议先看哪几块，资料怎么配合练习

拿到资料后，不建议按顺序从头硬啃。建议先看“迭代思想”与“梯度下降法”这两节，这是整套优化理论的认知地基。理解迭代框架后，再切入“一维搜索”和“牛顿法”，这部分涉及大量公式推导，光看视频很容易走神。正确的使用方式是：看一节视频，暂停，自己拿纸笔把推导过程完整写一遍，尤其是共轭方向法和收敛率的证明。资料里的板书推导是核心价值所在，不要只听结论。遇到卡壳的地方，先回去复习微积分里的泰勒展开和海森矩阵，不要试图跳过数学直接背算法流程。对于转行的人来说，这部分内容可能要反复看两三遍才能建立直觉，不要指望一遍过。

学完能独立做什么

完整学下来，你能脱离现成框架，独立实现基础的优化求解器。比如面对一个非标准损失函数，你能自己写出梯度更新逻辑，判断该用一维搜索还是直接用共轭梯度法；当模型训练出现收敛极慢的情况，你能通过分析收敛率，判断是学习率设置问题还是算法本身选错了。此外，看懂这些底层逻辑后，再去读主流机器学习框架的源码或算法论文，基本不会有数学上的阅读障碍。这不再是停留在跑通别人代码的层面，而是具备了根据具体业务场景定制和调整优化算法的能力。


学会常见优化、凸优化、智能优化和线性规划算法。

课程目录

*   01 最优化理论/

  *   01 集合约束和无约束优化基础.mp4 (51.36 MB), 12:35

  *   02 一阶和二阶必要条件-集合约束和无约束优化问题.mp4 (26.42 MB), 06:49

  *   03 无约束一维极小化问题.mp4 (55.88 MB), 13:21

  *   04 迭代思想.mp4 (24.84 MB), 07:20

  *   05 梯度下降法.mp4 (74.10 MB), 18:29

  *   06 迭代停止规则.mp4 (19.73 MB), 04:45

  *   07 收敛率.mp4 (51.55 MB), 12:38

  *   08 一维搜索.mp4 (90.41 MB), 19:03

  *   09 牛顿法.mp4 (80.59 MB), 18:03

  *   10 共轭方向法.mp4 (31.95 MB), 08:39

  *   11 共轭梯度法.mp4 (65.73 MB), 14:17

  *   12 拟牛顿法.mp4 (66.31 MB), 15:29

  *   13 切线空间和法线空间.mp4 (43.94 MB), 09:46

  *   14 仅含等式约束的优化问题.mp4 (74.45 MB), 17:38

  *   15 含等式和不等式约束的优化问题（KKT条件）.mp4 (81.60 MB), 19:24

  *   16 最xiao二乘法.mp4 (31.80 MB), 07:23

  *   17 凸函数.mp4 (100.45 MB), 23:02

  *   18 凸优化问题.mp4 (39.56 MB), 08:16

  *   19 拉格朗日对偶性.mp4 (77.70 MB), 17:06

  *   20 神经网络和反向传播算法.mp4 (92.40 MB), 20:09

  *   21 投影法和拉格朗日乘子法.mp4 (59.45 MB), 13:03

  *   22 罚函数法.mp4 (46.62 MB), 10:38

  *   23 随机梯度下降法.mp4 (37.77 MB), 08:28

  *   24 Nelder-Mead单纯形法.mp4 (60.96 MB), 13:56

  *   25 模拟退火法.mp4 (95.78 MB), 18:03

  *   26 粒子群优化算法.mp4 (86.97 MB), 19:10

  *   27 粒子群优化算法的变种.mp4 (35.17 MB), 07:37

  *   28 遗传算法(上).mp4 (100.40 MB), 21:56

  *   29 遗传算法(下).mp4 (55.07 MB), 12:34

  *   30 线性规划概述.mp4 (79.67 MB), 18:58

  *   31 单纯形法.mp4 (107.75 MB), 23:15

*   02 数学基础（按需看即可）/

  *   01 无穷小量和无穷大量.mp4 (76.49 MB), 17:25

  *   02 泰勒定理.mp4 (64.20 MB), 15:04

  *   03 线段.mp4 (32.53 MB), 09:03

  *   04 仿射集.mp4 (50.13 MB), 10:56

  *   05 邻域.mp4 (27.12 MB), 05:46

  *   06 超平面和线性簇.mp4 (69.30 MB), 18:51

  *   07 凸集.mp4 (32.71 MB), 09:08

  *   08 叉积.mp4 (37.46 MB), 09:18

  *   09 笛卡尔积.mp4 (29.72 MB), 06:35

  *   10 水平集(level sets).mp4 (33.06 MB), 07:34

  *   11 映射.mp4 (29.19 MB), 07:08

  *   12 空间中的曲线与导数.mp4 (27.45 MB), 06:25

  *   13 锥.mp4 (28.13 MB), 06:39

  *   14 多面体.mp4 (51.75 MB), 10:11

  *   15 单纯形.mp4 (13.97 MB), 03:30

  *   16 正交投影.mp4 (53.15 MB), 11:33