二维码已过期

请重新获取

使用微信扫一扫

登录博睿谷

大数据实时分析项目实践
大数据实时分析项目实践
¥0.00
¥0.00
总课时
48课时
先修知识
授课模式
录播
学习人数
1838人
介绍
讲师
大纲
课件
实验
推荐

本课程主要运用Spark计算框架的核心组件对电商数据进行分析,以项目形式呈现,其内容涵盖环境搭建、数据分析、数据持久化和数据可视化, 涉及JavaEE、ECharts、Hadoop、HBase、Spark、Kafka等技术点的综合应用。针对项目开发过程的每个环节都进行了深入讲解,使读者由浅入深的了解每个知识点

课程概览
数据可视化是借助于图形化手段,将数据库中的每一条数据以图像的形式展示在前端页面中,可以清晰有效地传达沟通信息。利用实时数据构建动态看板平台,可以使决策人员快速理解并处理相应的信息数据,还能够通过观察看板平台展示的动态数据,发现大数据集的市场变化和趋势动向。 在看板平台系统中,动态数据的展示就需要流式计算系统每时每刻接收数据、分析数据以及转发数据,通过学习的Spark实时计算框架Spark Streamingi和kafka就可以完成这一技术需求。
熟悉Hadoop,Spark,Redis,Zookeeper,Kafka,ElasticSearch,Sqoop,Flume,Flink等大数据组件;熟悉Mysql,Hbase等数据库编程;熟悉使用Hive 数据仓库;熟悉使用maven,spring,springmvc,hibernate,struts,mybatis等开源框架; 并能熟练运用各级框架的组合开发。 教学特色:良好课堂组织能力,时刻关注每一位学生,充分调动注意力,通过设计新颖有趣方式来激发学习欲望,教学过程注重基础知识掌握,以及对学生解决问题的能力培养,教学环节层层递进,实现课堂高效。
  • 第1章安装Hadoop
  •     第1节 Hadoop安装前准备 试听
    视频名称:Hadoop安装前准备.mp4
  •     第2节 Hadoop安装 试听
    视频名称:02-Hadoop安装.mp4
  • 第2章Hadoop的操作
  •     第1节 Hadoop的shell操作
  •     第2节 HDFS的工作机制
  •     第3节 HDFS的API操作
  •     第4节 MapReduce
  • 第3章Scala入门
  •     第1节 Scala基础语法
  •     第2节 Scala面向对象
  • 第4章Spark
  •     第1节 Spark入门级安装
  •     第2节 Spark词频统计
  •     第3节 SparkRDD
  •     第4节 SparkSQL
  •     第5节 SparkSQL案例
  • 第5章Hbase
  •     第1节 Hbase入门及安装
  •     第2节 Hbase Shell操作
  •     第3节 HbaseAPI操作
  •     第4节 Hbase原理进阶
  • 第6章Kafka
  •     第1节 Kafka的基本原理
  •     第2节 Kafka的命令操作
  •     第3节 KafkaAPI操作
  •     第4节 KafkaStream
  •     第5节 SparkStream和DStream转换操作
  •     第6节 DStream窗口和输出
  •     第7节 Redis入门
  • 第7章Spark实时计算案例
  •     第1节 项目搭建及生成订单
  •     第2节 Redis连接操作
  •     第3节 搭建SpringMVC
  •     第4节 数据展示
  • pdf

    10.Spark实时计算案例

    大小:834.58KB

    2023-08-17

  • pdf

    9.Spark Streaming实时计算框架

    大小:1.24MB

    2023-08-17

  • pdf

    8.Kafka分布式发布订阅消息系统

    大小:1.33MB

    2023-08-17

  • pdf

    7.HBASE

    大小:2.05MB

    2023-08-17

  • pdf

    6.Spark SQL结构化数据文件处理

    大小:850.13KB

    2023-08-17

  • pdf

    5.Spark RDD弹性分布式数据集

    大小:1.17MB

    2023-08-17

    • 实验名称
      Hadoop的shell操作
    • 实验描述
      Hadoop 提供了一个交互式的命令行界面,称为 Hadoop Shell,用于管理和操作 HDFS 文件系统。
    • 实验名称
      MapReduce执行单词统计
    • 实验描述
      在本练习中,您将练习使用MapReduce执行单词统计。
    • 实验名称
      Java程序操作HDFS
    • 实验描述
      在本练习中,您将练习使用Java程序操作HDFS
    • 实验名称
      Scala
    • 实验描述
      进一步的掌握Scala的用法
    • 实验名称
      Spark词频统计编程开发
    • 实验描述
      在本练习中,您将练习使用Spark词频统计编程开发
    • 实验名称
      Spark RDD常用操作
    • 实验描述
      在本练习中,您将练习Spark RDD常用操作
    • 实验名称
      Spark读写Mysql操作
    • 实验描述
      在本练习中,您将练习使用Spark读写Mysql操作
    • 实验名称
      Hbase的命令操作
    • 实验描述
      在本练习中,您将练习使用Hbase命令行操作Hbase
    • 实验名称
      Hbase_api操作
    • 实验描述
      增强对Hbase的认识
    • 实验名称
      Kafka命令操作
    • 实验描述
      在本练习中,您将练习使用Kafka命令
    • 实验名称
      SparkStreaming操作
    • 实验描述
      本练习中,您将练习使用idea操作SparkStreaming
    • 实验名称
      Redis操作
    • 实验描述
      本练习中,您将练习使用Redis操作
    • 实验名称
      spark实时计算
    • 实验描述
      增强对前面的学习内容的巩固、整合。
    课程名称:
    大数据实时分析项目实践
    课程现价:
    0
    支付方式:
    支付宝支付
    微信支付
    确认支付
    支付剩余时间: 15:00
    视频试听
    购买课程
    当前课程仅限高级会员学习!
    成为会员
    取消