课程章节
课程/大数据/云计算&大数据
快速入门Hadoop3.0大数据处理
介绍
章节
问答
笔记
第1章 课程介绍
课程介绍
项目效果预览
开发技术栈介绍
如何学习本课程
第2章 Hadoop整体概述
Hadoop简介
分布式存储介绍
分布式计算介绍
Hadoop三大核心组件分析
Hadoop核心架构发展历史
大数据生态圈介绍
第3章 Hadoop集群部署
Hadoop常见发行版介绍
Hadoop伪分布集群安装部署(上)
Hadoop伪分布集群安装部署(下)
Hadoop分布式集群安装部署
Hadoop客户端节点安装介绍
第4章 分布式存储(HDFS)详解
HDFS简介
HDFS的Shell介绍
HDFS的Shell操作
HDFS体系结构详解
第5章 分布式计算(MapReduce)详解
MapReduce原理分析
WordCount案例分析
Shuffle过程分析
WordCount代码开发
MapReduce任务日志查看
停止hadoop集群中的任务
Hadoop序列化机制介绍
第6章 资源调度器(Yarn)详解
Yarn资源调度器介绍
第7章 案例:直播平台开播数据统计分析
案例需求分析
原始数据清洗代码实现
数据指标统计---基于主播维度指标
数据指标统计---基于主播的TOPN计算
任务定时脚本封装
任务执行结果监控
使用Sqoop将计算结果导出到Mysql
web项目展示结果
第8章 课程回顾与总结
课程内容回顾
课程重难点回顾
项目完善