这门课解决什么工作场景
这套资料聚焦大语言模型背后的底层逻辑,主要解决“知其然不知其所以然”的问题。日常工作里,很多开发者和数据科学家能熟练调用模型接口,但在遇到输出不可控、幻觉严重或需要微调时,往往只能盲人摸象。产品经理规划功能时,也常因为不懂技术边界而提出脱离实际的交互需求。这门课把生成式 AI 拆解为具体的数学和工程问题,帮你弄清模型是怎样通过概率统计预测下一个词,以及优化算法在其中扮演的角色。学透这些原理,开发者在做模型微调和接口对接时能少走弯路,产品经理也能更准确地评估技术可行性与研发周期。
适合什么基础与资料怎么配合练习
这套资料不适合零基础转行者,它默认你具备一定的编程经验或机器学习常识。如果你写过代码、接触过基础的数据结构,或者在日常工作中频繁使用大模型接口并好奇其内部机制,这套内容会很对口。建议学习时不要只用眼睛看,先从先导课入手建立整体认知框架,再按阶段推进。看微积分和概率统计部分时,务必配合纸笔把梯度下降和概率分布的推导过程手写一遍,不要死记硬背公式。进入强化学习阶段前,建议先自己用 Python 写一个简单的多臂老虎机小游戏,带着“如何让机器自动找到最优策略”这个问题去看视频,理解会透彻得多。
建议先看哪几块以及学完能独立做什么
拿到资料不要按顺序死磕,建议先花一小时看先导课,建立对整体技术链路的宏观认知。接着直接跳到“优化方法”这一块,这是理解大模型训练的核心,搞懂优化逻辑比死抠微积分公式更实用。最后再进入强化学习部分,弄清模型如何对齐人类意图。学完这套内容,你不会立刻成为一个能从头训练千亿参数大模型的算法专家,但能独立看懂主流技术论文的核心推导,能在白板上向团队讲清模型微调的数学原理。更重要的是,在下次遇到模型输出异常时,你能从底层机制出发排查问题,而不是仅仅停留在换提示词的表层操作上。
AI爱好者:对大语言模型和生成式AI充满兴趣,想深入了解其技术原理的学习者 开发者:有一定编程基础,希望学习自然语言处理技术的软件工程师 数据科学家:从事机器学习相关工作,想了解大型语言模型技术细节的专业人士 产品经理:希望掌握AI技术趋势,规划相关产品的互联网从业者
课程目录
* 01 第一阶段 打通ChatGPT背后的数学基础:微积分概率统计优化/
* 01 先导课 如何快速整体理解ChatGPT背后的技术原理 (250.22 MB), 01:08:47
* 02 第一课 微积分、概率统计快速梳理回顾 (262.11 MB), 01:09:07
* 03 第二课 优化方法的轻松掌握,不再死记硬背 (361.91 MB), 01:39:03
* 02 第二阶段 总结10来本RL教材的经验:强化学习极简入门/
* 01 第三课 RL极简入门(上):RL基本概念与三大表格求解法 (318.62 MB), 01:53:24
* 02 第四课 RL极简入门(下):从策略梯度、Actor-Criti到TRPO、PPO算法 (321.52 MB), 02:00:58
* 03 第三阶段 ChatGPT底层强大的语言模型:GPT系列/
* 01 第五课 通俗理解Transformer:从Word2Vec、Seq2Seq逐步理解到GPT、BERT (383.60 MB), 01:41:37
* 02 第五课 补充之1 BERT原理及实现 (224.09 MB), 01:37:34
* 03 第六课 从GPTGPT2GPT3:微调到prompt学习的过渡 (551.12 MB), 02:13:13
* 04 第七课 GPT3到GPT3.5:指令微调、思维链、代码训练 (424.46 MB), 01:45:25
* 04 第四阶段 探讨ChatGPT背后的训练方式与GPT4的多模态技术解密/
* 01 第八课 InstructGPTChatGPT训练三阶段及多轮对话能力 (292.15 MB), 02:04:30
* 02 第九课 GPT4背后多模态的能力起源与发展历史(上) (338.44 MB), 01:27:31
* 03 第十课 GPT4背后多模态的能力起源与发展历史(下) (251.77 MB), 01:04:27
* 05 第五阶段 类ChatGPT开源项目的训练实现与部署微调/
* 01 第十一课 LLaMA的解读与其微调:Alpaca-LoRAVicunaBELLE中文LLaMA姜子牙LLaMA 2 (365.24 MB), 01:41:58
* 02 第十二课 ChatGLM-6B的基座部署微调实现:从GLM到6B的LoRAP-Tuning微调、及6B源码解读 (330.03 MB), 01:17:35






