快速入门Hadoop3.0大数据处理-慕课网-快速入门Hadoop3.0大数据处理章节介绍问答技术笔记

首页课程实战体系课手记专栏慕课教程

第1章课程介绍: 课程介绍; 项目效果预览; 开发技术栈介绍; 如何学习本课程

第2章 Hadoop整体概述: Hadoop简介; 分布式存储介绍; 分布式计算介绍; Hadoop三大核心组件分析; Hadoop核心架构发展历史; 大数据生态圈介绍

第3章 Hadoop集群部署: Hadoop常见发行版介绍; Hadoop伪分布集群安装部署（上）; Hadoop伪分布集群安装部署（下）; Hadoop分布式集群安装部署; Hadoop客户端节点安装介绍

第4章分布式存储(HDFS)详解: HDFS简介; HDFS的Shell介绍; HDFS的Shell操作; HDFS体系结构详解

第5章分布式计算(MapReduce)详解: MapReduce原理分析; WordCount案例分析; Shuffle过程分析; WordCount代码开发; MapReduce任务日志查看; 停止hadoop集群中的任务; Hadoop序列化机制介绍

第6章资源调度器(Yarn)详解: Yarn资源调度器介绍

第7章案例：直播平台开播数据统计分析: 案例需求分析; 原始数据清洗代码实现; 数据指标统计---基于主播维度指标; 数据指标统计---基于主播的TOPN计算; 任务定时脚本封装; 任务执行结果监控; 使用Sqoop将计算结果导出到Mysql; web项目展示结果

第8章课程回顾与总结: 课程内容回顾; 课程重难点回顾; 项目完善