Spark 数据处理引擎实战

第一章：功能更强大的数据处理引擎：Spark（上篇） (8讲)



1. Spark 的基本概念与核心模块

时长 16:00

2. Spark 的代码开发和运行模式

时长 23:22

3. Spark 程序开发和 Spark 的任务提交

时长 25:09

4. Spark 的核心数据抽象 RDD

时长 23:10

5. Spark 的常见算子介绍

时长 24:57

6. Spark 实战案例（一）

时长 30:05

7. Spark 的广播变量和累加器

时长 26:07

8. Spark 实战案例（二）

时长 22:09

第二章：功能更强大的数据处理引擎：Spark（中篇） (12讲)



1. SparkSQL 基本介绍

时长 16:14

2. SparkSQL 的 DataFrame 创建方式

时长 26:07

3. sparkSQL 的 DataFrame 操作及 DataSet

时长 12:24

4. SparkSQL 整合其它外部数据源

时长 21:53

5. SparkSQL 自定义函数

时长 18:54

6. 实践案例（一）

时长 13:05

7. SparkSQL 的底层执行原理

时长 31:58

8. Catalog 及 SQL 调优

时长 25:02

9. SparkStreaming 的基本介绍

时长 22:08

10. SparkStreaming 的高级算子操作

时长 21:06

11. SparkStreaming 数据输出及整合 Kafka

时长 26:00

Spark 作业

时长 00:02

第三章：功能更强大的数据处理引擎：Spark（下篇） (6讲)



1. RDD 的血统、缓存与 checkpoint 机制

时长 19:42

2. DAG 有向无环图

时长 10:25

3. shuffle 过程详解

时长 20:06

4. 任务调度与内存管理

时长 22:42

5. Spark 序列化与反序列化

时长 21:41

6. 数据倾斜问题及处理方法

时长 12:06

讲师

王超( 老王)

大数据资深讲师

经历过创业公司、国有企业、上市公司以及独角兽互联网企业。先后任职 Java 研发工程师、大数据工程师、大数据架构师、大数据资深讲师等职务。做过互联网电商平台、数仓建设平台、实时数据处理平台、数据中台建设，自主 BI 分析平台等，熟悉各类大数据的业务场景，有过多次架构设计及落...查看更多