学员须知

学员完成学习后，参加工信部教育与考试中心组织的统一考试，合格者将获得由工信部教育与考试中心颁发的“职业技术证书”，纳入到“工业和信息化技术技能人才数据库”，可在官网查询。优秀学员将有机会参加教育考试中心或课程项目方组织的主题会议、课程沙龙等活动，并享受就业服务指导及相关优秀企业推荐就业等服务。

——工业和信息化部教育与考试中心

课程定位

本项目课程是《高级大数据应用工程师》职业技术培训课程。课程适合对大数据感兴趣的零基础学员、转行人员，互联网从业人员、应往届毕业生。

学习完本课程，并通过考试，将会获得由工业和信息化部教育与考试中心颁发的《高级大数据应用工程师》职业技术证书。

学员对象

1、政府及企、事业单位相关岗位的在职人员；

2、职高职专院校相关专业在读学生；

3、对大数据技术感兴趣的其他人员。

课程内容

45 课时（线上课）+ 配套习题

学习资料（电子版）

1）、学习视频

2）、配套习题

学习收获

1、《高级大数据应用工程师》知识及技能

2、《高级大数据应用工程师》职业技术证书（考试通过）

3、进入工业和信息化专业人才库（考试通过）

课程大纲

大数据应用工程师课程目录

1、大数据概述

2、Hadoop来源与作用

3、Hadoop伪分布式搭建-1

4、Hadoop伪分布式搭建-2

5、Hadoop完全分布式集群搭建-1

6、Hadoop完全分布式集群搭建-2

7、HDFS原理与体系架构

8、HDFS的shell操作命令格式及文件操作

9、HDFS的跨文件系统的操作命令-1

10、HDFS的跨文件系统的操作命令-2

11、HDFS的Java API开发环境的配置

12、HDFS的Java API实现读取文件内容

13、HDFS的Java API实现目录的创建,遍历和删除

14、HDFS的Java API实现文件上传和下载操作

15、MapReduce的原理与体系结构

16、单词计数WordCount执行过程分析与演示

17、应用Java API编码实现WordCount演示

18、编写MapReduce驱动类并打包运行WordCount

19、应用MapReduce实现气温统计

20、自定义MapReduce分区及实验演示

21、自定义数据类型及案例演示

22、MapReduce统计用户上网流量实验

23、Hive的原理与体系架构

24、Hive的安装部署-1

25、Hive的安装部署-2

26、HiveQL操作：创建数据库、表和视图

27、HiveQL操作：向表中装载数据

28、Hive的内部表、外部表的创建和操作

29、Hive的分区表、桶表的创建和操作

30、HiveQL实现单词计数WordCount

31、Hive的JDBC操作

32、Zookeeper的原理与架构

33、ZooKeeper集群的搭建

34、Zookeeper的shell操作

35、HBase的原理与数据模型

36、HBase的物理存储与体系架构

37、HBase集群的搭建

38、HBase表的操作

39、HBase表中数据的操作

40、HBase Java API编程环境的配置

41、HBase编程实现表的创建、删除操作

42、HBase编程数据数据的插入、查询操作

43、通过Web UI查看HBase的状态

44、MapReduce编程实现HBase数据的批量导入-1

45、MapReduce编程实现HBase数据的批量导入-2

证书样本