本次Spark Core核心架构剖析公开课内容如下:
1. Spark Runtime(Driver、Masster、Worker和Executor)深度分析和RDD揭秘;
2. Spark Java开发WordCount实战(local本地运行);
3. Spark Java开发WordCount程序提交到集群运行;
4. Spark Scala、Python开发WordCount程序;
5. Spark spark-shell开发WordCount程序;
6. Spark pyspark开发WordCount程序;
7. Spark spark-submit命令详细说明;
8. Spark WordCount深度原理剖析;
9. Spark 架构原理剖析;
10. Spark RDD基本创建所需要的数据源(集合、本地文件、HDFS、Hbase等);
11. Spark RDD实战和各种实战案例;
12. Spark RDD持久化、广播变量和累加器;
13. Spark高级排序和TopN深度揭秘;
14. Spark Core综合实战(Java和Scala);
15. Spark内核架构深度剖析;
16. Spark RDD的依赖关系深度剖析(Lineage);
17. Spark ON Local深度剖析; Spark ON Yarn深度剖析;Spark ON Mesos深度剖析;
18. Spark的开启之旅深度剖析;
19. Spark的Master(HA、注册、状态改变和资源调度算法等)原理剖析和源码剖析;
20. Spark的Worker原理剖析和源码剖析;尚观顶级IT技术系列(Worker运行流程图分析、Worker启动Driver源码分析、和Worker启动Executor源码分析)
21. Spark中Job运行原理深度分析;
22. Spark的大脑运行机制深度分析;
23. Spark的Task处理内幕和源码深度剖析;
24. Spark的Shuffer模块原理剖析;
25. Spark的BlockManager架构原理、运行流程图和源码分析;
26. CacheManager运行原理流程图和源码分析;
27. Spark 回顾和总结主要技术点;