大数据实时分析项目实践

课程大纲

• 第1章安装Hadoop
•     第1节 Hadoop安装前准备
  视频名称:Hadoop安装前准备.mp4
•     第2节 Hadoop安装
  视频名称:02-Hadoop安装.mp4

• 第2章Hadoop的操作
•     第1节 Hadoop的shell操作
•     第2节 HDFS的工作机制
•     第3节 HDFS的API操作
•     第4节 MapReduce

• 第3章Scala入门
•     第1节 Scala基础语法
•     第2节 Scala面向对象

• 第4章Spark
•     第1节 Spark入门级安装
•     第2节 Spark词频统计
•     第3节 SparkRDD
•     第4节 SparkSQL
•     第5节 SparkSQL案例

• 第5章Hbase
•     第1节 Hbase入门及安装
•     第2节 Hbase Shell操作
•     第3节 HbaseAPI操作
•     第4节 Hbase原理进阶

• 第6章Kafka
•     第1节 Kafka的基本原理
•     第2节 Kafka的命令操作
•     第3节 KafkaAPI操作
•     第4节 KafkaStream
•     第5节 SparkStream和DStream转换操作
•     第6节 DStream窗口和输出
•     第7节 Redis入门

• 第7章Spark实时计算案例
•     第1节 项目搭建及生成订单
•     第2节 Redis连接操作
•     第3节 搭建SpringMVC
•     第4节 数据展示

实验列表

• 实验名称Hadoop的shell操作
• 实验描述Hadoop 提供了一个交互式的命令行界面，称为 Hadoop Shell，用于管理和操作 HDFS 文件系统。

• 实验名称MapReduce执行单词统计
• 实验描述在本练习中，您将练习使用MapReduce执行单词统计。

• 实验名称Java程序操作HDFS
• 实验描述在本练习中，您将练习使用Java程序操作HDFS

• 实验名称Scala
• 实验描述进一步的掌握Scala的用法

• 实验名称Spark词频统计编程开发
• 实验描述在本练习中，您将练习使用Spark词频统计编程开发

• 实验名称Spark RDD常用操作
• 实验描述在本练习中，您将练习Spark RDD常用操作

• 实验名称 Spark读写Mysql操作
• 实验描述在本练习中，您将练习使用Spark读写Mysql操作

• 实验名称Hbase的命令操作
• 实验描述在本练习中，您将练习使用Hbase命令行操作Hbase

• 实验名称Hbase_api操作
• 实验描述增强对Hbase的认识

• 实验名称Kafka命令操作
• 实验描述在本练习中，您将练习使用Kafka命令

• 实验名称SparkStreaming操作
• 实验描述本练习中，您将练习使用idea操作SparkStreaming

• 实验名称Redis操作
• 实验描述本练习中，您将练习使用Redis操作

• 实验名称spark实时计算
• 实验描述增强对前面的学习内容的巩固、整合。