大数据工程师
售前/售后工程师
对大数据感兴趣的人员
希望通过HCIA认证的人员
- 课程概览
- 授课讲师
- 课程大纲
- 实验列表
- 课程概览
- 授课讲师
- 课程大纲
- 实验列表
该课程适用于HCIA-Big Data V3.0,本课程主要介绍了大数据行业的发展趋势,鲲鹏大数据、常用且重要的大数据组件基础技术原理及华为大数据解决方案、功能特性和华为在大数据行业的成功案例。
课程概览
目标学员
班级目标
掌握大数据组件技术原理与架构
掌握华为大数据平台MRS的使用方法
具备基于华为MRS服务的操作和开发的能力
能够胜任大数据开发工程师等岗位
授课讲师
伍老师有10年的Java开发、大数据开发工作经验,精通Java、Scala、js、Python、sql等编程语言。熟练运用Java,运用各级框架的组合开发。并能熟悉基于Oracle、MySQL等多种数据库编程,有千万级的电信大数据处理经验;曾带领团队主导研发CRM大型项目。熟悉linux/unix平台;熟悉redis、solr、nginx、apache集群、负载均衡等等技术解决系统多并发的问题。精通Hadoop、hive、Spark等大数据组件,及华为大数据平台与数据挖掘知识体系。 项目经验: 1、广东电信营业厅效能评估子系统 2、广东电信渠道绩效业务支撑系统 3、某银行定期存款业务预测项目 4、某电商日志数据消费行为分析项目 5、AFC地铁售票机管理系统 6、广东移动销售绩效评估系统
课程大纲
- 第1章大数据发展趋势与鲲鹏大数据
-
    第1节 第01章 大数据发展趋势与鲲鹏大数据
- 第2章HDFS分布式文件系统和ZooKeeper
-
    第1节 HDFS分布式文件系统和ZooKeeper
- 第3章Hive分布式数据仓库
-
    第1节 Hive分布式数据仓库
- 第4章HBase技术原理
-
    第1节 HBase技术原理
- 第5章MapReduce和Yarn技术原理
-
    第1节 MapReduce和Yarn技术原理
- 第6章Spark基于内存的分布式计算
-
    第1节 Spark基于内存的分布式计算
- 第7章Flink流批一体分布式实时处理引擎
-
    第1节 Flink流批一体分布式实时处理引擎
- 第8章Flume海量日志聚合
-
    第1节 Flume海量日志聚合
- 第9章Loader数据转换
-
    第1节 Loader数据转换
- 第10章Kafka分布式消息订阅系统
-
    第1节 Kafka分布式消息订阅系统
- 第11章Hadoop基础技术-LDAP+Kerberos安全认证
-
    第1节 Hadoop基础技术-LDAP+Kerberos安全认证
- 第12章ElasticSearch分布式全文检索服务
-
    第1节 ElasticSearch分布式全文检索服务
- 第13章Redis内存数据库
-
    第1节 Redis内存数据库
实验列表
- 实验名称HDFS基本命令
- 实验描述在本练习中,您将练习使用HDFS、Hadoop分布式文件系统。您将使用HDFS命令行工具来操纵HDFS中的文件
- 实验名称Zookeeper基础命令
- 实验描述在本练习中,您将练习使用Zookeeper基础命令
- 实验名称Zookeeper客户端编程
- 实验描述在本练习中,您将练习使用idea操作zookeeper
- 实验名称Hive表操作
- 实验描述在本练习中,您将练习使用Hive操作Hive表
- 实验名称Hive数据库操作
- 实验描述在本练习中,您将练习使用Hive操作数据库
- 实验名称Hive案例
- 实验描述在本练习中,您将练习使用idea操作hive
- 实验名称Hbase的命令操作
- 实验描述在本练习中,您将练习使用Hbase命令行操作Hbase
- 实验名称MapReduce执行单词统计
- 实验描述在本练习中,您将练习使用MapReduce执行单词统计。
- 实验名称SparkSql案例
- 实验描述本练习中,您将练习使用idea操作SparkSql
- 实验名称Flink操作
- 实验描述在本练习中,您将练习使用flink
- 实验名称Flume采集目录数据
- 实验描述在本练习中,您将练习使用Flume采集目录数据,数据保存到hdfs
- 实验名称Kafka命令操作
- 实验描述在本练习中,您将练习使用Kafka命令
- 实验名称Redis操作
- 实验描述本练习中,您将练习使用Redis操作
节数 | 上课时间 | 星期一 | 星期二 | 星期三 | 星期四 | 星期五 | 星期六 | 星期天 |
---|---|---|---|---|---|---|---|---|
第1节 | 08:00 - 08:40 | |||||||
第2节 | 09:00 - 09:40 | |||||||
第3节 | 10:00 - 10:40 | |||||||
第4节 | 11:00 - 11:40 | |||||||
第5节 | 14:00 - 14:40 | |||||||
第6节 | 15:00 - 15:40 | |||||||
第7节 | 16:00 - 16:40 | |||||||
第8节 | 17:00 - 17:40 |
天数 | 上课日期 | 上课时间 | 内容 |
---|
相关课件 更多
-
pptx
第01章 大数据发展趋势与鲲鹏大数据
大小:10.81MB
2023-05-15
-
pptx
第02章 HDFS分布式文件系统和ZooKeeper
大小:1.82MB
2023-05-15
-
pptx
第03章 Hive分布式数据仓库
大小:1.29MB
2023-05-15
-
pptx
第04章 HBase技术原理
大小:1.43MB
2023-05-15
-
pptx
第05章 MapReduce和Yarn技术原理
大小:1.67MB
2023-05-15
-
pptx
第06章 Spark基于内存的分布式计算
大小:1.13MB
2023-05-15