华为HCIA-Big Data大数据培训（零基础入门）

课程大纲

• 第1章大数据发展趋势与鲲鹏大数据
•     第1节 大数据时代 试听
  视频名称:大数据时代1.mp4
  视频名称:大数据时代2.mp4
•     第2节 大数据的应用领域
•     第3节 企业所面临的挑战和机遇
•     第4节 华为鲲鹏解决方案

• 第2章HDFS分布式文件系统和ZooKeeper
•     第1节 第二章前言
•     第2节 HDFS概述
•     第3节 HDFS相关概念
•     第4节 HDFS体系架构
•     第5节 HDFS关键特性
•     第6节 HDFS数据读写流程
•     第7节 ZooKeeper概述
•     第8节 ZooKeeper体系架构

• 第3章HBase分布式数据库和Hive分布式数据仓库
•     第1节 第三章前言
•     第2节 HBase概述
•     第3节 HBase数据模型
•     第4节 HBase体系架构
•     第5节 HBase性能优化
•     第6节 HBase常用Shell命令
•     第7节 Hive概述
•     第8节 Hive功能与架构
•     第9节 Hive基本操作
•     第10节 第三章小结

• 第4章ClickHouse联机分析数据库管理系统
•     第1节 第四章前言
•     第2节 ClickHouse概述
•     第3节 ClickHouse系统架构及基本特性
•     第4节 ClickHouse增强特性
•     第5节 第四章小结

• 第5章MapReduce和Yarn技术原理
•     第1节 MapReduce和Yarn基本介绍
•     第2节 MapReduce和Yarn功能与架构
•     第3节 Yarn的资源管理和任务调度
•     第4节 Yarn的增强特性

• 第6章Spark基于内存的分布式计算和Flink流批一体分布式实时处理引擎
•     第1节 Spark概述
•     第2节 Spark数据结构
•     第3节 Spark原理与架构
•     第4节 Flink原理与架构
•     第5节 Flink的Time与Window
•     第6节 Flink的Watermark
•     第7节 Flink的容错机制
•     第8节 第六章小结

• 第7章Flume海量日志聚合和Kafka分布式消息订阅系统
•     第1节 第七章前言
•     第2节 Flume简介及架构
•     第3节 Flume关键特性介绍
•     第4节 Flume应用举例
•     第5节 Kafka简介
•     第6节 Kafka架构与功能
•     第7节 Kafka数据管理
•     第8节 第七章小结

• 第8章ElasticSearch分布式全文检索服务
•     第1节 ElasticSearch简介
•     第2节 ElasticSearch系统架构
•     第3节 ElasticSearch关键特性
•     第4节 第八章小结

• 第9章华为大数据平台MRS
•     第1节 华为大数据平台MRS概述
•     第2节 组件介绍
•     第3节 MRS云原生数据湖基线方案

• 第10章华为数据治理中心DataArts Studio
•     第1节 数据治理概述
•     第2节 华为数据治理中心DataArts Studio概述

实验列表

• 实验名称HDFS常用操作
• 实验描述在本练习中，您将练习使用HDFS、Hadoop分布式文件系统。您将使用HDFS命令行工具来操纵HDFS中的文件

• 实验名称Zookeeper基础命令
• 实验描述在本练习中，您将练习使用Zookeeper基础命令

• 实验名称Hbase的命令操作
• 实验描述在本练习中，您将练习使用Hbase命令行操作Hbase

• 实验名称Hive创建表
• 实验描述Hive是重要的数据仓库工具，在数据挖掘、数据汇总、统计分析等领域有重要作用。特别是在电信业务中，Hive扮演相当重要的角色，可以利用Hive统计用户的流量、话费、资费等信息，也可挖掘出用户的消费模型以帮助运营商更好的规划套餐内容。

• 实验名称Hive数据库操作
• 实验描述在本练习中，您将练习使用Hive操作数据库

• 实验名称Hive表操作
• 实验描述在本练习中，您将练习使用Hive操作Hive表

• 实验名称ClickHouse联机分析数据库实战
• 实验描述ClickHouse是一款开源的面向联机分析处理的列式数据库，其独立于Hadoop大数据体系，最核心的特点是极致压缩率和极速查询性能。同时，ClickHouse支持SQL查询，且查询性能好，特别是基于大宽表的聚合分析查询性能非常优异，比其他分析型数据库速度快一个数量级。

• 实验名称MapReduce词频统计
• 实验描述在本练习中，您将练习使用MapReduce执行单词统计。

• 实验名称Spark运行环境搭建
• 实验描述Hadoop、Spark伪分布式环境的安装和配置。

• 实验名称Spark RDD常用操作
• 实验描述在本练习中，您将练习Spark RDD常用操作

• 实验名称Flink操作
• 实验描述在本练习中，您将练习使用flink

• 实验名称Flume采集目录数据
• 实验描述在本练习中，您将练习使用Flume采集目录数据，数据保存到hdfs

• 实验名称Kafka命令操作
• 实验描述在本练习中，您将练习使用Kafka命令

• 实验名称实验14 14_从Flume发送消息给Kafka
• 实验描述在本练习中，您将在网关节点上运行Flume代理，它将从本地spool目录中获取web日志，并将每一行作为消息发送给Kafka主题。 Flume代理被配置为向前面创建的weblog主题发送消息。