适合人群：

有 Linux 基础和 Java SE 基础的同学

你将会学到：

掌握大数据核心技术中的分布式存储和分布式计算

课程简介：

课程从下面的四个方向讲解大数据技术 Hadoop :

大数据技术思想入门
分布式存储之 HDFS
分布式计算之 MapReduce 和 Yarn
Hadoop 2

老汤大数据课程之Hadoop3├──第10章分布式计算 – DistributedCount程序
| ├──1.DistributedCount 流程_ev.mp4 12.04M
| ├──2.Map 任务实现_ev.mp4 14.84M
| ├──3.Reduce 任务实现_ev.mp4 13.86M
| ├──4.Driver 实现_ev.mp4 29.50M
| ├──5.Map 端合并_ev.mp4 7.19M
| ├──6.代码优化_ev.mp4 15.72M
| ├──7.在集群上运行程序_ev.mp4 22.93M
| ├──8.集群状态的变化_ev.mp4 18.32M
| └──9.Map Task 的数量和文件大小的关系_ev.mp4 21.24M
├──第11章分布式计算 – 移动计算而非移动数据
| ├──1.Yarn Web UI 查看日志_ev.mp4 28.71M
| ├──10.Container 分配规则二：整数倍规则_ev.mp4 25.98M
| ├──11.Container 分配规则总结_ev.mp4 3.55M
| ├──12.数据块移动的原因_ev.mp4 42.12M
| ├──13.移动计算而尽可能少的移动数据_ev.mp4 29.03M
| ├──14.设置 reduce task 的数量_ev.mp4 12.93M
| ├──15.代码优化-1678427776_ev.mp4 8.23M
| ├──2.问题：为什么移动了数据块？_ev.mp4 6.90M
| ├──3.打开History Server 服务_ev.mp4 53.32M
| ├──4.MRAppMaster 计算资源的配置_ev.mp4 16.06M
| ├──5.YarnChild 计算资源的配置_ev.mp4 22.07M
| ├──6.代码中设置 MR 进程需要的资源_ev.mp4 19.89M
| ├──7.Yarn 中的 Container 概念_ev.mp4 10.45M
| ├──8.Yarn 应用启动流程_ev.mp4 9.19M
| └──9.Container 分配规则一：最小最大规则_ev.mp4 31.39M
├──第12章分布式计算 – WordCount
| ├──1.WordCount 计算流程_ev.mp4 11.17M
| ├──10.Shuffle 和 Sort_ev.mp4 12.90M
| ├──11.MapReduce On Yarn 运行原理_ev.mp4 14.17M
| ├──2.WordCount Map Task 实现_ev.mp4 14.00M
| ├──3.Reduce Task 实现_ev.mp4 11.79M
| ├──4.WordCount Driver 实现_ev.mp4 15.47M
| ├──5.集群运行 WordCount_ev.mp4 21.49M
| ├──6.MapReduce 默认的分区规则_ev.mp4 11.75M
| ├──7.Input 和 Output Format_ev.mp4 26.62M
| ├──8.MapReduce 执行流程_ev.mp4 5.81M
| └──9.WordCount 执行流程_ev.mp4 13.19M
├──第13章Hadoop 2 之 HDFS 安装
| ├──1.Hadoop 2 学习前说明_ev.mp4 9.61M
| ├──2.HDFS的安装(一)_ev.mp4 128.87M
| ├──3.WebUI看不了怎么办_ev.mp4 9.57M
| └──4.HDFS的安装(二)_ev.mp4 25.78M
├──第14章Hadoop 2 之 HDFS 运维相关
| ├──1.Federation配置_ev.mp4 58.08M
| ├──2.ViewFS的配置_ev.mp4 39.91M
| ├──3.回退到一个NameNode的状态_ev.mp4 19.42M
| ├──4.告诉你怎么使用Snapshots_ev.mp4 85.81M
| ├──5.平衡数据_ev.mp4 7.99M
| └──6.SafeMode_ev.mp4 12.25M
├──第15章Hadoop 2 之 MapReduce 和 Yarn
| ├──1.Yarn的安装_ev.mp4 30.75M
| ├──2.MapReduce安装_ev.mp4 61.74M
| ├──3.MapReduce应用(了解即可)_ev.mp4 55.31M
| └──4.Hadoop压缩机制(了解即可)_ev.mp4 26.28M
├──第16章Hadoop 2 之文件格式(这章能理解代码即可)
| ├──1.text文件格式的读写_ev.mp4 77.96M
| ├──2.avro文件和parquet文件的讲解_ev.mp4 18.25M
| ├──3.avro文件的读写(能看懂代码即可)_ev.mp4 77.36M
| ├──4.parquet文件的读写(必须掌握)_ev.mp4 60.87M
| ├──5.sequenceFile文件(看懂代码即可)_ev.mp4 33.53M
| ├──6.sequenceFile合并小文件_ev.mp4 63.69M
| └──7.CombineTextInputFormat_ev.mp4 43.47M
├──第17章Hadoop 2 之 Yarn 资源调度机制
| ├──1.Yarn的三种资源调度机制_ev.mp4 14.30M
| ├──2.Capacity Scheduler_ev.mp4 56.55M
| └──3.Yarn Fair Scheduler配置_ev.mp4 26.28M
├──第18章阶段项目实战 – NCDC 气候数据分析实战(跟着操作一遍)
| ├──1.NCDC数据源的获取_ev.mp4 64.90M
| ├──2.NCDC数据字段的详解_ev.mp4 49.88M
| ├──3.NCDC数据的预处理_ev.mp4 73.43M
| ├──4.数据处理逻辑以及实现方案讲解_ev.mp4 36.18M
| ├──5.MapReduce代码实现讲解_ev.mp4 101.03M
| ├──6.Hadoop的本地安装_ev.mp4 11.70M
| ├──7.单元测试、集成测试以及验证_ev.mp4 81.28M
| └──8.求每一年highest的温度_ev.mp4 38.24M
├──第1章课程答疑
| └──老汤大数据课程体系介绍_ev.mp4 42.55M
├──第2章大数据技术思想入门
| ├──1.分布式存储的特点_ev.mp4 21.30M
| ├──2.分布式存储集群特点_ev.mp4 21.45M
| ├──3.分布式文件存储的流程_ev.mp4 16.94M
| ├──4.主节点中的元数据是怎么存储的_ev.mp4 19.97M
| └──5.分布式计算的特点_ev.mp4 17.12M
├──第3章分布式存储 – HDFS 集群配置安装
| ├──1.HDFS 课程内容介绍_ev.mp4 4.25M
| ├──10.HDFS 相关配置值的设置_ev.mp4 11.36M
| ├──11.配置 Java Home以及从节点_ev.mp4 19.31M
| ├──12.配置 HADOOP_HOME_ev.mp4 11.06M
| ├──13.HDFS 集群启动_ev.mp4 12.09M
| ├──14.验证 HDFS 集群是否正常_ev.mp4 11.20M
| ├──15.怎么样查看 HDFS 的日志信息_ev.mp4 17.21M
| ├──16.HDFS 集群正确停止的方式_ev.mp4 6.04M
| ├──2.HDFS 集群介绍_ev.mp4 9.37M
| ├──3.安装前准备：准备 3 台虚拟机_ev.mp4 5.75M
| ├──4.安装前准备：配置无密钥登录_ev.mp4 17.94M
| ├──5.安装前准备：配置 JAVA_HOME_ev.mp4 12.29M
| ├──6.安装前准备：关闭防火墙_ev.mp4 2.66M
| ├──7.安装包的下载和解压_ev.mp4 23.99M
| ├──8.配置 HDFS 的基本路径_ev.mp4 7.33M
| └──9.创建名字节点和数据节点存储数据的文件目录_ev.mp4 7.93M
├──第4章分布式存储 – HDFS 集群的使用
| ├──1.HDFS Web UI 的讲解_ev.mp4 20.72M
| ├──10.HDFS 分布式文件读的过程_ev.mp4 6.70M
| ├──2.HDFS shell 命令介绍_ev.mp4 15.46M
| ├──3.本地文件上传到 HDFS 集群_ev.mp4 17.35M
| ├──4.文件操作命令_ev.mp4 12.30M
| ├──5.修改文件的权限_ev.mp4 7.63M
| ├──6.df 和 du_ev.mp4 6.32M
| ├──7.文件恢复机制_ev.mp4 33.59M
| ├──8.准备一个大文件_ev.mp4 10.98M
| └──9.HDFS 分布式文件写的过程_ev.mp4 10.61M
├──第5章分布式存储 – 数据块
| ├──1.数据块元数据_ev.mp4 9.10M
| ├──2.设置数据块的备份数_ev.mp4 10.75M
| ├──3.设置数据块的大小_ev.mp4 15.78M
| ├──4.数据块真正存储的地方_ev.mp4 15.37M
| ├──5.DataNode 和 NameNode 交互_ev.mp4 10.16M
| └──6.HDFS 分布式文件删除的流程_ev.mp4 5.02M
├──第6章分布式存储 – EditsLog 和 FsImage
| ├──1.回顾 NameNode 元数据是怎么存储的_ev.mp4 7.35M
| ├──2.EditsLog 存储目录和内容_ev.mp4 21.14M
| ├──3.EditsLog 记录每次元数据操作信息_ev.mp4 38.79M
| ├──4.EditsLog恢复NameNode元数据_ev.mp4 8.04M
| ├──5.EditsLog 合并的条件_ev.mp4 7.93M
| ├──6.FsImage 文件内容_ev.mp4 24.98M
| ├──7.为什么还要 EditsLog 呢？_ev.mp4 6.52M
| └──8.EditsLog 合并的流程_ev.mp4 12.82M
├──第7章分布式存储 – Java 操作 HDFS
| ├──1.Java 操作 HDFS 准备_ev.mp4 10.05M
| ├──2.Java 写 HDFS 文件_ev.mp4 19.76M
| ├──3.Java 读 HDFS 文件_ev.mp4 10.53M
| ├──4.Java 查询 HDFS 文件元数据_ev.mp4 11.04M
| ├──5.Java 删除 HDFS 文件_ev.mp4 5.43M
| ├──6.在 Java 代码中设置参数_ev.mp4 8.16M
| ├──7.在 classpath 中设置参数_ev.mp4 16.34M
| ├──8.两种设置参数的优先级_ev.mp4 5.66M
| └──9.HDFS 文件系统的两个特点_ev.mp4 7.99M
├──第8章分布式计算 – 内容介绍
| └──1.分布式计算内容介绍_ev.mp4 6.63M
├──第9章分布式计算 – 基础
| ├──1.数据准备_ev.mp4 15.71M
| ├──10.Hadoop 序列化机制_ev.mp4 33.33M
| ├──2.回顾分布式计算的特点_ev.mp4 7.20M
| ├──3.Yarn 的作用_ev.mp4 10.40M
| ├──4.Yarn 的安装配置_ev.mp4 25.23M
| ├──5.Yarn 的 Web UI 简介_ev.mp4 8.83M
| ├──6.有了 Yarn 后的分布式计算_ev.mp4 6.42M
| ├──7.MapReduce 配置_ev.mp4 37.03M
| ├──8.创建项目_ev.mp4 8.14M
| └──9.序列化的作用_ev.mp4 28.37M
└──资料.rar 868.25M