Spark培训|Spark实践培训

通过本课程学习与实践，您将了解与掌握：
1）知道Spark能做什么，不能做什么。
2）hadoop和Spark的适用场景。
3）能过熟知Spark的原理、安装Spark集群。
4）能够独立使用Spark工具来分析海量数据。
5）会使用shark来分析数据。
6）会使用Spark Streaming来处理数据。
7）一个需求过来知道在Spark上面怎么实现。

培训对象：1）大数据工程师
2）对海量数据实时分析赶兴趣的人群。
3）对hadoop感兴趣的人群
4）想从事Spark工作的人员

授课方式： 定制课程 + 案例讲解 + 小组讨论，60%案例讲解，40%实践演练

培训内容：

第一天上午	Scala语言介绍 Scala语言安装 Scala快速入门介绍什么Spark Spark的简介 Spark的编译 Spark的安装 Spark安装成功测试
第一天下午	Spark原理 Spark的RDD 什么是RDD RDD的种类 Tranformation Action Spark的存储级别 Cache介绍 Spark的容错原理 Lineage容错 Checkpoint容错 RDD的创建案例统计单词的个数
第二天上午	Spark调度组件 RDD graph 作业与任务调度 DAG Scheduler Task Scheduler Task细节 Job的调度流程 Broadcast variables介绍 Spark的优化 Spark的生态系统 Shark Streaming Spark与hadoop的比较 Spark的使用场景介绍
第二天下午	Spark实战一：求最大值 Spark实战二：自定义RDD(define a new RDD) Spark实战三：RDD创建的种类(Scala、HDFS、localdisk and inputformat) Spark实战四：基于Spark的日志分析

3742 次浏览

1620 次

其他人还看了课程

Hadoop与Spark大数据架构专题 5047 次浏览

Spark实践培训 3743 次浏览

数据统计分析方法与工具、实践 5015 次浏览

大数据分析-SparkR 4248 次浏览

大数据落地技术系列课程 3578 次浏览

企业级Hadoop大数据处理最佳实践 3310 次浏览

最新活动计划

人工智能.机器学习TensorFlow 5-22[北京]

AI智能化软件测试方法与实践 5-23[北京]

图数据库与知识图谱 5-22[北京]

DeepSeek大模型应用开发实践 6-12[厦门]

基于 UML 和EA进行分析设计 6-23[北京]

嵌入式软件架构-高级实践 7-9[北京]