人工精选尚硅谷大数据项目之快餐数仓
这是一套围绕离线数仓搭建的大数据项目课,主题是快餐行业的业务数据仓库。它不讲分布式底层原理,也不带你读框架源码,而是把一套真实业务场景从数据采集到分层建模的链路完整走一遍。如果你之前零散学过 Hadoop、Hive、Kafka,却不知道这些组件在同一个项目里怎么串起来,这门课的价值主要就在这里。 它
会员可免费下载本篇月会员可免费领取。
开通会员 ›会员 · 按档位
游客按标价购买,不享受上表折扣。
支付成功后自动发放网盘链接,链接失效可找客服免费补
这是一套围绕离线数仓搭建的大数据项目课,主题是快餐行业的业务数据仓库。它不讲分布式底层原理,也不带你读框架源码,而是把一套真实业务场景从数据采集到分层建模的链路完整走一遍。如果你之前零散学过 Hadoop、Hive、Kafka,却不知道这些组件在同一个项目里怎么串起来,这门课的价值主要就在这里。
它解决的是"组件都会、项目不会"的问题
很多人学大数据的卡点不在单个工具,而在于拿到一个业务需求时,不知道数据该从哪来、落到哪一层、用什么方式同步、指标怎么算。这套资料以快餐门店的经营数据为背景,覆盖了从业务库抽取、日志采集、消息缓冲,到数仓分层建模、指标汇总的完整过程。你跟着做完,能理解 ODS、DWD、DWS、ADS 各层分别承担什么职责,以及为什么不能把所有表都堆在一层里。这比单独看某个组件的教程更接近实际工作,因为真实岗位要的正是这种把链路打通的能力。
适合什么基础,先看哪几块
建议至少已经能独立写出 Hive SQL,知道分区表和分桶表的基本概念,对 Hadoop 的 HDFS 和 YARN 有大致印象。如果连 SQL 的窗口函数都不熟,先补这块再回来,否则建模部分会跟得很吃力。上手顺序上,建议先看采集与同步这一段,理解数据是怎么从业务系统进入数仓的;再看分层建模,这是全课的核心,重点体会每层表的设计理由;最后看指标计算与结果输出。环境搭建部分可以快速过,遇到报错再回头查,不必逐条死磕。
学完能独立做什么,资料怎么配合练
完整跟下来之后,你应该能独立完成一个中小规模离线数仓的搭建:自己设计分层结构,写同步任务把数据抽过来,用 Hive 完成清洗和聚合,最后产出可供报表使用的指标表。这在转行面试里是可以讲清楚的实操经历。练习上不要只看视频,每看完一个模块就自己重跑一遍,把表结构、字段含义、任务依赖画成图。建议在采集和建模两段各做一次脱稿复现,脱离视频自己写 SQL 和配置,卡住的地方才是真正需要补的点。资料里的笔记适合当速查手册,不必从头背。
需要提醒的是,这套内容偏工程实现,对实时计算、数据治理、调度平台的深入讲解有限。如果你的目标岗位明确要求 Flink 实时链路或云上数仓,它只能算基础铺垫。但作为第一个完整的离线数仓项目,用来把零散知识拼成体系,是够用的。
课程目录
课程目录184 集
- 视频 01-课程内容介绍与数仓概念.mp4
- 02-数据仓库架构.mp4
- 03-技术选型.mp4
- 04-系统数据流程设计.mp4
- 05-项目需求分析.mp4
- 06-服务器选型.mp4
- 07-集群规模.mp4
- 08-资源规划设计.mp4
- 09-安装虚拟机.mp4
- 10-ssh免密.mp4
- 100-dim层每日数据加载脚本.mp4
- 101-dwd层设计要点.mp4
- 102-下单事务型事实表建表.mp4
- 103-下单事实表首日数据加载.mp4
- 104-下单事实表每日数据加载.mp4
- 105-支付成功事实表首日数据加载.mp4
- 106-支付成功事实表每日数据加载.mp4
- 107-退单事实表首日数据加载.mp4
- 108-退单事实表每日数据加载.mp4
- 109-退款成功事实表首日数据加载.mp4
- 11-分发脚本.mp4
- 110-退款成功每日数据加载.mp4
- 111-评价事实表首日数据加载.mp4
- 112-评价事实表每日数据加载.mp4
- 113-dwd首日数据加载脚本.mp4
- 114-dwd每日数据加载脚本.mp4
- 115-dws设计要点.mp4
- 116-交易域店铺粒度用户下单最近 1 日汇总表.mp4
- 117-交易域店铺粒度用户支付成功最近 1 日汇总表.mp4
- 118-交易域店铺粒度退款成功最近 1 日汇总表.mp4
- 119-交易域营销活动粒度用户下单最近 1 日汇总表.mp4
- 12-安装jdk.mp4
- 120-交易域菜品规格粒度用户下单最近 1 日汇总表.mp4
- 121-交易域套餐粒度用户下单最近 1 日汇总表.mp4
- 122-互动域菜品粒度用户评价最近 1 日汇总表.mp4
- 123-互动域套餐粒度用户评价最近 1 日汇总表.mp4
- 124-互动域店铺粒度用户评价最近 1 日汇总表.mp4
- 125-dws 1d表首日数据加载脚本.mp4
- 126-dws 1d表每日数据加载脚本.mp4
- 127-交易域店铺粒度用户下单最近 n 日汇总表.mp4
- 128-交易域店铺粒度用户支付成功最近 n 日汇总表.mp4
- 129-交易域店铺粒度退款成功最近 n 日汇总表.mp4
- 13-环境变量配置说明.mp4
- 130-交易域营销活动粒度用户下单最近 n 日汇总表.mp4
- 131-交易域菜品规格粒度用户下单最近 n 日汇总表.mp4
- 132-易域套餐粒度用户下单最近 n 日汇总表.mp4
- 133-互动域菜品粒度用户评价最近 n 日汇总表.mp4
- 134-互动域套餐粒度用户评价最近 n 日汇总表.mp4
- 135-互动域店铺粒度用户评价最近 n 日汇总表.mp4
- 136-dws nd数据加载脚本.mp4
- 137-各店铺交易统计.mp4
- 138-各经营模式交易统计.mp4
- 139-各省份交易统计.mp4
- 14-餐饮业务简介.mp4
- 140-各城市交易统计.mp4
- 141-各时段交易统计.mp4
- 142-订单减免统计.mp4
- 143-各店铺订单减免统计.mp4
- 144-优惠分摊统计.mp4
- 145-营销活动优惠统计.mp4
- 146-菜品规格交易统计.mp4
- 147-菜品交易统计.mp4
- 148-菜品分类交易统计.mp4
- 149-菜品交易分时统计.mp4
- 15-餐饮系统表结构说明.mp4
- 150-套餐交易统计.mp4
- 151-套餐交易分时统计.mp4
- 152-最近 1 日菜品规格活动减免(下单)金额Top10.mp4
- 153-最近 1 日菜品规格活动参与订单数Top10.mp4
- 154-最近 1 日店铺活动减免(下单)金额Top10.mp4
- 155-最近 1 日店铺活动参与订单数Top10.mp4
- 156-最近 1 日店铺下单金额Top10.mp4
- 157-最近 1 日加盟店与直营店下单金额Top10.mp4
- 158-菜品评价统计.mp4
- 159-套餐评价统计.mp4
- 16-安装mysql以及模拟生成数据.mp4
- 160-店铺评价统计.mp4
- 161-ads数据加载脚本.mp4
- 162-建库建表.mp4
- 163-hdfs数据导入mysql案例演示.mp4
- 164-ads数据同步脚本.mp4
- 165-dolphinscheduler简介.mp4
- 166-部署模式.mp4
- 167-dolphinscheduler安装.mp4
- 168-安全中心配置.mp4
- 169-工作流的定义与执行.mp4
- 17-模拟生成数据脚本.mp4
- 170-定时调度执行.mp4
- 171-局部参数.mp4
- 172-全局参数.mp4
- 173-传递参数.mp4
- 174-参数优先级.mp4
- 175-内置参数.mp4
- 176-引用依赖资源.mp4
- 177-工作流告警.mp4
- 178-重跑和恢复失败.mp4
- 179-生成新数据.mp4
- 18-建模工具使用.mp4
- 180-数仓工作流调度.mp4
- 181-finebi安装与数据源的配置.mp4
- 182-finebi启动脚本.mp4
- 183-finebi数据可视化.mp4
- 184-数仓总结.mp4
- 19-集群批量命令执行脚本.mp4
- 20-安装hadoop.mp4
- 21-hadoop启动脚本.mp4
- 22-hadoop项目经验之存储多目录.mp4
- 23-hadoop项目经验之数据均衡.mp4
- 24-hadoop项目经验之参数调优.mp4
- 25-安装zookeeper.mp4
- 26-zk启动脚本.mp4
- 27-zk客户端常用指令.mp4
- 28-安装kafka.mp4
- 29-kafka启动脚本.mp4
- 30-kafka常用指令之topic相关.mp4
- 31-kafka常用指令之生产者和消费者相关.mp4
- 32-flume安装和项目经验.mp4
- 33-maxwell简介.mp4
- 34-maxwell原理.mp4
- 35-安装maxwell.mp4
- 36-maxwell启动脚本.mp4
- 37-maxwell使用.mp4
- 38-同步策略介绍与选择.mp4
- 39-同步工具介绍.mp4
- 40-datax简介.mp4
- 41-datax架构原理.mp4
- 42-datax安装.mp4
- 43-datax任务提交和配置文件格式说明.mp4
- 44-同步mysql数据到hdfs案例之tableMode模式.mp4
- 45-同步mysql数据到hdfs案例之querysql模式.mp4
- 46-同步hdfs数据到mysql案例.mp4
- 47-datax传参.mp4
- 48-datax优化之速度控制.mp4
- 49-datax优化之内存调整.mp4
- 50-datax配置文件生成.mp4
- 51-全量表数据同步脚本.mp4
- 52-增量数据flume配置.mp4
- 53-增量数据拦截器与采集.mp4
- 54-增量同步时间问题.mp4
- 55-增量首日同步脚本.mp4
- 56-增量数据flume启动脚本.mp4
- 57-安装hive.mp4
- 58-hive中文乱码问题.mp4
- 59-快餐数仓项目简介.mp4
- 60-数仓的概念.mp4
- 61-数仓架构.mp4
- 62-数仓建模的意义.mp4
- 63-ER模型.mp4
- 64-维度模型.mp4
- 65-事务型事实表设计与不足.mp4
- 66-周期型快照事实表.mp4
- 67-累积型快照事实表.mp4
- 68-维度表设计.mp4
- 69-规范化和反规范化.mp4
- 70-维度变化.mp4
- 71-多值维度和多值属性.mp4
- 72-数据仓库的分层.mp4
- 73-数仓的构建流程.mp4
- 74-数据调研.mp4
- 75-明确数据域.mp4
- 76-构建业务总线矩阵.mp4
- 77-明确统计指标.mp4
- 78-维度模型和汇总模型设计.mp4
- 79-hive引擎介绍和兼容性说明.mp4
- 80-hive on spark搭建.mp4
- 81-ApplicationMaster资源比例调整.mp4
- 82-datagrip工具使用.mp4
- 83-模拟生成数据.mp4
- 84-hive常用问题.mp4
- 85-ods层设计要点.mp4
- 86-ods全量数据建表演示.mp4
- 87-hive复杂数据类型回顾.mp4
- 88-json数据建表示范.mp4
- 89-ods层增量表字段显示异常问题.mp4
- 90-ods层数据加载脚本.mp4
- 91-dim层设计要点.mp4
- 92-顾客维度表首日数据加载.mp4
- 93-顾客维度表每日数据加载.mp4
- 94-菜品维度表数据加载.mp4
- 95-套餐维度表数据加载.mp4
- 96-优惠活动维度表数据加载.mp4
- 97-行政区划维度表数据加载.mp4
- 98-店铺维度表数据加载.mp4
- 99-dim层首日数据加载脚本.mp4
- 资料 1.jdk.exe 10.mock.exe 11.datax配置生成器.exe 12.spark.exe 13.DolphinScheduler.exe 14.FineBI.exe 14.SuperSet.exe 15.SQL语句及脚本.exe 16.业务总线矩阵 等.exe 2.hadoop.exe 3.flume.exe 4.kafka.exe 5.zookeeper.exe 6.mysql.exe 7.hive.exe 8.datax.exe 9.maxwell.exe 代码.exe 笔记.exe 🎯 学习目标 ✅ 系统掌握核心知识点 ✅ 提升实际应用能力 ✅ 完成完整学习体系 🎉 祝您学习愉快! 学有所成,前程似锦!


![大疆维修,无人机维修教程[66.30GB]](/api/uploads/b6a69810-862f-479c-a529-d66880073ebc.jpg)


