**Hadoop 2.x 基础架构入门：从零搭建分布式集群的实战指南**

在大数据技术栈中，Hadoop 无疑是基石般的存在。对于初学者而言，如何快速掌握 Hadoop 2.x 的核心架构并独立完成集群搭建，往往是踏入大数据领域的第一道难关。本课程《10天大数据基础架构Hadoop2.x教程》体系完整、实操性强，旨在帮助学员从零开始，系统掌握 Hadoop 的环境部署、核心组件配置以及日常运维管理技能。

课程开篇并未直接陷入复杂的代码讲解，而是从基础环境入手。第一天重点在于理解 Hadoop 的整体架构与部署模式。讲师详细演示了如何通过虚拟机克隆技术快速构建多节点环境，这是搭建分布式集群的前提。随后，课程由浅入深，依次讲解了 Hadoop 的本地模式、伪分布式模式以及完全分布式集群的搭建过程。特别值得称道的是，课程并未止步于静态的配置，还引入了自动化运维工具的开发，如编写 xcall 和 xsync 脚本，以及介绍重格系统的标准流程，这些“隐形技能”能极大提升后续学习和工作的效率。

第二天深入到了 HDFS（Hadoop Distributed File System）的底层原理与高级配置。除了巩固伪分布式模式的搭建，讲师还详细拆解了第二名称节点（2NN）的独立部署及其临时目录修改，帮助学员理解 HDFS Namenode 的高可用机制。此外，课程结合了 Linux 常用命令如 sed 的实际应用，以及防火墙的管理、进程监控等系统级操作，使学员不仅懂 Hadoop，更懂其运行的操作系统环境。在 HDFS API 访问、多目录配置、块最小值设置及副本数调整等章节中，学员将通过具体的参数调优实验，深刻理解分布式文件系统的存储策略与性能优化逻辑。同时，关于编辑日志、安全模式、名字空间保存及滚动日志的讲解，则为后续处理生产环境中的故障排查打下了坚实基础。

第三天则进入了功能管理阶段。在回顾前几日知识点的基础上，课程重点讲解了 HDFS 的配额管理（包括目录配额与空间配额）和快照管理。这两个功能是实际生产环境中进行资源隔离和数据保护的关键手段。最后关于 2NN 检查的内容，进一步巩固了学员对元数据管理机制的理解。

总体而言，这门课程适合没有任何大数据基础的初学者，也适合希望夯实 Hadoop 本地部署技能的开发者。通过这三天的高强度训练，学员将能够独立搭建起一个标准的 Hadoop 完全分布式集群，并具备基础的运维与故障处理能力，为后续学习 MapReduce、YARN 乃至 Spark 等上层生态组件打下坚实的底层基础。

课程目录

1-1 [Hadoop教程day01] 01.hadoop介绍-虚拟机克隆 (38:44).mp4
 1-2 [Hadoop教程day01] 02.hadoop本地模式搭建 (19:38).mp4
 1-3 [Hadoop教程day01] 03.hadoop完全分布式集群搭建 (01:07:31).mp4
 1-4 [Hadoop教程day01] 04.编写xcall-xsync脚本 (38:26).mp4
 1-5 [Hadoop教程day01] 05.重格系统标准过程 (11:07).mp4
 2-1 [Hadoop教程day02] 01.伪分布模式搭建 (22:35).mp4
 2-2 [Hadoop教程day02] 02.克隆新机-作为2nn (16:51).mp4
 2-3 [Hadoop教程day02] 03.sed命令 (16:46).mp4
 2-4 [Hadoop教程day02] 04.2nn拆分-临时目录修改 (20:41).mp4
 2-5 [Hadoop教程day02] 05.防火墙开机关闭 (20:02).mp4
 2-6 [Hadoop教程day02] 06.进程管理命令-hdfs操纵-文件切割 (47:26).mp4
 2-7 [Hadoop教程day02] 07.hdfs API访问 (12:31).mp4
 2-8 [Hadoop教程day02] 08.多目录配置 (49:51).mp4
 2-9 [Hadoop教程day02] 09.块最小值设置-副本数 (18:25).mp4
 2-10 [Hadoop教程day02] 10.编辑日志-安全模式-保存名字空间-滚动日志 (42:57).mp4
 3-1 [Hadoop教程day03] 01.第3天回顾 (25:24).mp4
 3-2 [Hadoop教程day03] 02.配额管理-目录配额-空间配额 (18:52).mp4
 3-3 [Hadoop教程day03] 03.快照管理 (14:27).mp4
 3-4 [Hadoop教程day03] 04.2NN检查NN做镜像融合原理 (15:26).mp4
 3-5 [Hadoop教程day03] 05.回收站控制 (33:59).mp4
 3-6 [Hadoop教程day03] 06.提取镜像文件fetchimage-元数据保存 (08:07).mp4
 3-7 [Hadoop教程day03] 07.hahoop串行化 (28:17).mp4
 3-8 [Hadoop教程day03] 08.hahoop自定义writable实现类 (18:31).mp4
 3-9 [Hadoop教程day03] 09.hahoop 串行化-反串评测-map (15:42).mp4
 3-10 [Hadoop教程day03] 10.hahoop归档 (19:51).mp4
 3-11 [Hadoop教程day03] 11.hadoop压缩 (32:36).mp4
 3-12 [Hadoop教程day03] 12.win下winutils.exe找不到错误 (05:01) 3-13 [Hadoop教程day03] 13.hadoop压缩-centos下的使用 (34:07).mp4
 3-14 [Hadoop教程day03] 14.hadoop解压缩 (08:18).mp4
 3-15 [Hadoop教程day03] 15.sequenceFile-写读-同步点 (35:15).mp4
 4-1 [Hadoop教程day04] 01.序列文件压缩方士 (14:01).mp4
 4-2 [Hadoop教程day04] 02.mapfile文件-结构 (17:39).mp4
 4-3 [Hadoop教程day04] 03.新节点上线 (33:12).mp4
 4-4 [Hadoop教程day04] 04.旧节点退役 (11:53).mp4
 4-5 [Hadoop教程day04] 05.机架感知 (46:17).mp4
 4-6 [Hadoop教程day04] 06.mapreduce实现wordcount (41:28).mp4
 4-7 [Hadoop教程day04] 07.集群上运行mr job (19:17).mp4
 4-8 [Hadoop教程day04] 08.2nn恢复nn节点数据 (21:57).mp4
 4-9 [Hadoop教程day04] 09.mr基础-combiner过程 (44:29).mp4
 5-1 [Hadoop教程day05] 01.job提交流程Rose图分析 (01:05:57).mp4
 5-2 [Hadoop教程day05] 02.job提交流程Rose图分析2 (01:00:46).mp4
 5-3 [Hadoop教程day05] 03.切片设置与考察切片过程 (20:57).mp4
 5-4 [Hadoop教程day05] 04.输入格式考察 (18:17).mp4
 5-5 [Hadoop教程day05] 05.线程池分析 (02:05:56).mp4
 5-6 [Hadoop教程day05] 06.分布式调试代码-nc考察集群运行job (01:09:58).mp4
 6-1 [Hadoop教程day06] 01.第6天回顾 (20:07).mp4
 6-2 [Hadoop教程day06] 02.数据倾斜手段-重新设计key (52:36).mp4
 6-3 [Hadoop教程day06] 03.数据倾斜手段-随机分区 (29:45).mp4
 6-4 [Hadoop教程day06] 04.排序-部分排序-全排序-自定义分区实现 (22:18).mp4
 6-5 [Hadoop教程day06] 05.排序-部分排序-全排序-随机采样器 (50:52).mp4
 6-6 [Hadoop教程day06] 06.排序-二次排序 (59:26).mp4
 6-7 [Hadoop教程day06] 07.json解析-fastjson (14:42) 7-1 [Hadoop教程day07] 01.taggen-1-商家内评论排序 (01:33:21).mp4
 7-2 [Hadoop教程day07] 02.taggen-商品评论全排序 (23:50).mp4
 7-3 [Hadoop教程day07] 03.map端连接 (26:48).mp4
 7-4 [Hadoop教程day07] 04.reduce端连接 (41:46).mp4
 7-5 [Hadoop教程day07] 05.作业-组合应用 (04:00).mp4
 7-6 [Hadoop教程day07] 06.输入格式-NLine (45:30).mp4
 7-7 [Hadoop教程day07] 07.输入格式-数据库DBInputFormat (01:17:30).mp4
 8-1 [Hadoop教程day08] 01.第8天回顾 (36:05).mp4
 8-2 [Hadoop教程day08] 02.两次reduce端连接 (58:40).mp4
 8-3 [Hadoop教程day08] 03.chain式mr编程 (30:46).mp4
 8-4 [Hadoop教程day08] 04.输出格式-压缩-编解码器设置-分隔符设定 (19:38).mp4
 8-5 [Hadoop教程day08] 05.输出格式 (10:23).mp4
 8-6 [Hadoop教程day08] 06.输出格式-DBOutputFormat (33:21).mp4
 8-7 [Hadoop教程day08] 07.计数器 (11:58).mp4
 8-8 [Hadoop教程day08] 08.集群模式下提交作业win7端 (39:12).mp4
 8-9 [Hadoop教程day08] 09.idea下的远程调试 (15:49).mp4
 8-10 [Hadoop教程day08] 10.集群模式下作业提交-client端行为 (48:47).mp4
 9-1 [Hadoop教程day09] 01.HA架构 (01:08:01).mp4
 9-2 [Hadoop教程day09] 02.HA部署配置 (22:11).mp4
 9-3 [Hadoop教程day09] 03.HA部署实操 (43:58).mp4
 9-4 [Hadoop教程day09] 04.编写脚本实现hadoop集群模式一键切换 (25:17).mp4
 10-1 [Hadoop教程day10] 01.使用zk实现自动容灾 (32:48).mp4
 10-2 [Hadoop教程day10] 02.使用zk自动容灾-增加配置shell保护 (05:18).mp4
 10-3 [Hadoop教程day10] 03.RM的HA-容灾过程 (14:46).mp4
 10-4 [Hadoop教程day10] 04.HDFS联邦模式介绍-ssh准备 (23:44).mp4
 10-5 [Hadoop教程day10] 05.HDFS联邦与HA模式零基础搭建 (01:25:32).mp4
 10-6 [Hadoop教程day10] 06.HA-自动容灾-clientAPI访问 (17:57).mp4