一、课程介绍

● HCIP-BigDataDeveloper认证定位于对大数据平台和核心组件开发应用的场景理解，流程和开发方法等能力构建，考核和认证。包括但不仅限于：FusionInsight应用开发流程，HDFS，HBase，Hive，Solr，Kafka，MR，YARN，Spark，Flume，Loader，Oozie，Redis，Storm等组件开发应用场景、流程、接口/方法和开发样例讲解，开发实践。

● 通过HCNP-BigDataDeveloper认证，将证明您深入理解大数据平台与技术及应用，掌握大数据平台和关键组件的开发流程、接口，掌握典型场景的开发方法，胜任大数据开发者工作岗位。意味着企业掌握了运用大数据平台和组件实现大数据解决方案规划、实施、开发等综合能力。

二、课程目标

● 掌握大数据开发流程

● 掌握HDFS应用场景及其业务流程、常用接口以及环境搭建、程序运行方法、组件的开发应用

● 掌握HBase应用场景及其业务流程、常用接口以及环境搭建、程序运行方法、组件的开发应用

● 掌握MR和YARN应用场景及其业务流程、常用接口以及环境搭建、程序运行方法、组件的开发应用

● 掌握Hive应用场景及其业务流程、常用接口以及环境搭建、程序运行方法、组件的开发应用

● 掌握Solr应用场景及其业务流程、常用接口以及环境搭建、程序运行方法、组件的开发应用

● 掌握Kafka应用场景及其业务流程、常用接口以及环境搭建、程序运行方法、组件的开发应用

● 掌握Spark应用场景及其业务流程、常用接口以及环境搭建、程序运行方法、组件的开发应用

● 掌握Redis应用场景及其业务流程、环境搭建和程序运行方法、组件的开发应用

● 掌握Streaming应用场景及其业务流程、环境搭建和程序运行方法、组件的开发应用

● 掌握Flume应用场景及其业务流程、环境搭建、程序运行方法、组件的开发应用

● 掌握Oozie应用场景及其业务流程、环境搭建和程序运行方法、组件的开发应用

三、课程大纲

HCIP-BigData-Developer技能班课程表
上课周期	上课时间	课程模块	课程内容	重点项目案例
第1天	上午	大数据应用开发总指导	1、大数据主流技术 2、大数据场景化解决方案 3、大数据应用开发	实战案例01：Maven环境搭建与开发工具Idea的使用 实战案例02：使用Java操作HDFS分布式文件系统 实战案例03：Hive数据分析操作 实战案例04：数据ETL抽取 实战案例05：如何使用SparkSQL解析结构化数据 实战案例06：如何使用Spark开发日志分析系统
	下午	Java基础	1、Java 开发环境配置 2、Maven 环境配置 3、开发工具介绍、集成maven 4、Java 基础语法、对象和类 5、Java 循环结构、Java 条件语句 6、Java集合List,Set,Map
第2天	上午	大数据离线处理场景化解决方案	1、离线批处理方案 2、离线批处理组件的介绍、技术原理、参数属性、重要配置等，包括数据存储HDFS
	下午		1、Java连接操作HDFS 2、数据仓库Hive 3、java连接操作Hive
第3天	上午		1、离线批处理方案 2、离线批处理组件的介绍、技术原理、参数属性、重要配置等，包括数据存储HDFS，数据仓库Hive
	下午		1、离线分析SparkSQL 2、数据集成工具Loader、Sqoop、Kettle等 3、离线批处理实际案例
第4天	上午	大数据实时检索场景化解决方案	1、实时检索场景方案 2、分布式数据库介绍、技术原理、参数属性、重要配置等，包括Hbase、ElasticSearch、GraphBase等 3、实时检索实际案例	实战案例07：如何使用Java操作HBase数据库 实战案例08：如何使用Java操作ElasticSearch数据库
	下午
第5天	上午	大数据实时流计算场景化解决方案	1、实时流计算应用方案 2、实时流计算组件的介绍、技术原理、参数属性、重要配置等，包括Flume、Kafka、Flink、SparkStre上午ing、Redis等	实战案例09：开发Spark应用程序 实战案例10：如何使用spark收集flume日志数据 实战案例11：如何使用Spark与kafka开发实时流统计分析系统 实战案例12：如何使用Spark对接Redis内存数据库 实战案例13：如何使用Spark对接Mysql数据库 实战案例14：如何使用Stre上午ing进行数据加工生产 实战案例15：Flink实时流开发实战
	下午
第6天	上午		1、实时流处理配置方案及成功案例
	下午		1、实时流计算场景化解决方案项目实战
第7天	上午
	下午
第8天	上午	大数据融合数仓场景化解决方案	1、数据仓库背景介绍 2、GaussDB 200介绍 3、融合数仓案例	实战案例16：数据仓库安装 实战案例17：数据仓库调优
	下午		融合数仓场景化解决方案项目实战