课程重点培养学员基于Hadoop架构的大数据分析实操能力，从零开始学习Scala编程，掌握Spark，手把手带练，3个月成为行业急需的大数据开发人才。讲解案例包括但不限于金融大数据分析、气象大数据分析、Web海量日志大数据分析、智慧高速大数据分析等。

　　第一章：大数据培训前沿应用与Hadoop环境搭建

　　01、大数据行业前沿应用与知识介绍；02、大数据分析师课程安排；03、Linux入门基础；04、Hadoop入门介绍；

　　05、Hadoop单机环境搭建；06、Hadoop伪分布式集群搭建；07、Hadoop完全分布式集群搭建

　　第二章：Hadoop核心组建使用方法

　　01、分布式文件系统HDFS架构原理及常用指令；02、HDFS编程入门；03、Hbase编程入门；04、分布式数据仓库Hive架构原理及HQL语法介绍；

　　05、分布式计算引擎MapReduce架构原理及基本使用方法；06、资源调度器YARN基本原理；07、ETL工具Sqoop使用方法

　　第三章：分布式计算引擎Spark入门

　　01、Scala语法知识介绍 ；02、Spark架构特点及基本原理；03、Spark入门及安装部署方法；04、Spark Core介绍；

　　05、Spark SQL介绍与数据读取、保存方法；06、Spark GraphX入门及基本使用方法 ；07、Spark GraphX图计算算法案例。

　　第四章：Spark核心组件的使用方法

　　01、日志采集系统Flume和分布式消息队列Kafka入门；02、流式计算框架Spark Streaming基本原理及使用方法；03、流式计算框架Structured Streaming基本原理及使用方法；

　　04、分布式算法库Spark MlLib入门介绍；05、Spark ML与Spark MLLib；06、机器学习工作流。

　　第五章：Pyspark基础知识

　　01、Spark数据结构及编程语言接口；02、PySpark开发环境搭建；03、PySpark编程入门：Spark基本数据结构；

　　04、PySpark编程入门：PySpark常用语句；05、Spark与分布式数据库和分布式数据仓库的集成方法；06、采用PySpark读取分布式数据库中数据；07、 PySpark数据清洗案例。

　　以上就是6163银河.net163.am老师为大家分享的“商丘大数据分析培训”谢谢大家观看，如果对大数据感兴趣的话，想学大数据培训的，可以在线咨询我们，我们将竭诚为你解答。