贪心科技大模型微调实战营(应用篇)专为希望将大模型微调技术转化为实际应用的开发者设计。课程摆脱纯理论讲解,以 “技术微调→应用开发→场景落地” 为核心链路,通过贪心科技独家的 “微调 - 应用” 联动案例,帮助学员掌握不同场景下大模型微调的适配方案,让微调后的模型能真正解决企业级业务问题,成为既懂微调技术又能落地应用的复合型人才。

*   01 第一周/

  *   01 第一节 2024年1月21日/

    *   01 开营+大模型介绍、Transformer/

      *   01 开营 (382.85 MB), 27:57

      *   02 大模型爆发式发展 (483.15 MB), 38:03

      *   03 大模型是如何炼成的 (324.46 MB), 30:25

      *   04 Transformer的应用 (377.57 MB), 40:40

      *   05 Self-Attention (591.41 MB), 59:41

*   02 第二周/

  *   01 第二节 2024年1月28日/

    *   01 Transformer、Encoder、Advanced/

      *   01 Transformer Part1 (1.06 GB), 01:18:18

      *   02 Transformer Part2 (765.97 MB), 56:06

      *   03 Encoder-based and Decoder Based LLMs (330.68 MB), 25:07

      *   04 Advanced Topics (454.03 MB), 38:04

*   03 第三周/

  *   01 第三节 2024年2月25日/

    *   01 大模型微调概览 Lora微调/

      *   01 大模型微调概览 (1.06 GB), 01:15:45

      *   02 Lora微调-Lora算法 (1011.39 MB), 01:18:34

      *   03 Lora微调-从零实现Lora到Roberta (660.97 MB), 59:39

*   04 第四周/

  *   01 第四节 2024年3月3日/

    *   01 Alpaca、AdaLoRA、QLoRA/

      *   01 Alpaca (1.67 GB), 02:15:37

      *   02 AdaLoRA (1002.96 MB), 01:32:50

      *   03 QLoRA (748.53 MB), 01:08:02

*   05 第五周/

  *   01 第五节 2024年3月17日/

    *   01 Prefix Tuning、Quantization/

      *   01 Prefix Tuning (1012.21 MB), 01:23:44

      *   02 Quantization01 (562.24 MB), 48:56

      *   03 Quantization02 (638.75 MB), 01:00:34

      *   04 Quantization Methos for LLM (214.23 MB), 22:52

*   06 第六周/

  *   01 助教补充课 2024年3月24日/

    *   01 llama介绍&运行&量化&部署&微调/

      *   01 llama介绍&运行&量化&部署&微调01 (569.74 MB), 40:45

      *   02 llama介绍&运行&量化&部署&微调02 (700.91 MB), 50:24

*   07 第七周/

  *   01 第六节 2024年3月31日/

    *   01 Distributed Computing、Flash Attention/

      *   01 GPU时间计算 (574.12 MB), 01:00:06

      *   02 Distributed Computing (449.33 MB), 46:19

      *   03 ZeRO-123 and FSDP (730.53 MB), 01:11:30

      *   04 Flash Attention (442.01 MB), 52:04

*   08 第八周/

  *   01 第六节补充课/

    *   01 Flash Attention cont、微调Mistral 7B/

      *   01 Flash Attention cont (544.96 MB), 54:25

      *   02 Self-Attention的分块计算 (931.89 MB), 01:20:02

      *   03 分块模式中计算O (502.05 MB), 40:17

      *   04 Mixture of Expert Model (142.44 MB), 12:15

      *   05 微调Mistral 7B (697.91 MB), 44:41

*   09 第九周/

  *   01 第七节 2024年4月14日/

    *   01 强化学习/

      *   01 RLHF介绍 (918.79 MB), 01:01:09

      *   02 强化学习 (284.35 MB), 30:23

      *   03 Multi-armed Bandit (619.22 MB), 57:20

      *   04 The goal of Agent (930.31 MB), 01:21:43

*   10 第十周/

  *   01 第七节补充课 2024年4月17日/

    *   01 Optimal Policy、Intro to Monte Carlo/

      *   01 Optimal Policy (716.75 MB), 01:02:24

      *   02 Intro to Monte Carlo (397.81 MB), 32:27

*   课件资料/

  *   课件资料.zip (1.40 GB)