找回密码
 立即注册
查看: 868|回复: 0

企业级Spark零基础到项目实战开发全套课程 视频教程【38课时】

[复制链接]
累计签到:85 天
连续签到:1 天
发表于 2019-5-12 12:39:34 | 显示全部楼层 |阅读模式
课程目录:% P6 L% z- W! s: O8 ?1 W
01 Spark介绍
# U: y5 H+ q- e0 W. M001 本系列公开课程说明. N% i8 D" k. d
002 What is Spark详细讲解(四大特性)- ]6 J! w4 b0 @- [' a2 h! v
003 MapReduce与Spark异同点和优势比较! E5 D" i1 V; R  o8 f6 _) p
004 实时在线答疑交流) i7 Z  _& `$ r$ a- {; J

/ L- N2 m1 g) P- c) J02 Spark 1.3 编译7 J6 n6 {! v8 x2 u, ~
005 回顾上次课内容和Spark 学习的基础) d* L- s# a; h! k- _
006 Spark 1.x编译的三种方式和如何使用Make方式编译(注意事项详解)
" Y* Y. s! `$ p6 k007 Spark运行Local模式讲解6 o6 u! g6 c5 l* E  ?
008 课程实时在线答疑交流  }2 [6 X$ P! @& s* U1 ~4 m

5 S) D+ c% @  A5 t7 e: e7 {; ^03 Spark 环境搭建
, I7 A% T. U6 t2 L0 e009 Spark 1.x安装前的准备(安装HDFS)3 x1 Y; Q( X7 j" X$ `9 w
010 安装部署Spark 1.x Standalone模式集群
/ ?+ V/ p3 ~/ I5 J  i011 运行Spark Shell进行测试以及对细节进行说明
) G" q3 j0 ~, ?" H4 j& c4 E/ ?" Z012 使用Spark 编写大数据处理经典案例WordCount程序
0 b/ h, e3 x  V, o' U; |0 G% L- M
& I, {- d7 ?% `; V  }: ^0 A04 Spark RDD讲解) d8 J8 n6 \9 C3 R# r3 b% I
013 深入讲解使用Spark编程WordCount程序
4 g' E' X0 |+ u, `' [$ l+ A014 Spark RDD详解
7 h/ b4 ~% ]/ o6 Y8 |015 实时在线答疑, T+ f2 F0 [8 X" u8 J& n
- J4 ^4 S& M" X& W: L
05 如何使用IDEA开发程序
3 a, U/ K3 ?  |9 v0 d* g016 回顾总结前面内容及如何学习Spark
0 \  r% ]+ |, Z; e9 A' D017 Spark Cluster与Application中的重要概念以及如何提交应用spark-submit, k* n/ g+ G& l, W* Q+ m- y( Q9 V
018 如何安装IDEA、安装Scala插件以及导入Spark 源码0 x  O! M* R2 M
019 如何使用IDEA创建Scala Project、编写Spark应用及local测试
( j" k) ~+ r1 k+ W+ m020 如何使用IDEA对Spark Application进行打包测试
  g% p  _+ R" ~& D) Z! t/ M& c% P4 G
; M2 b* B' S- M! j3 D5 V06 RDD操作详解0 a2 p' J8 @) J% x: A9 k
21 Spark RDD创建的两种方式一) Z1 \+ I& p( @4 ^+ L0 A
22 Spark RDD创建的两种方式二' i( |6 g2 h& j+ J, K5 v6 N
23 Spark RDD两种类型的操作(Transformation和action)  c! y; C2 B# _1 d% E) c7 `# B
24 Spark RDD操作之Transformation讲解(结合源码分析)
; [- O( q; n5 K4 i25 Spark RDD操作之Action讲解(结合源码分析)8 _1 D5 X) E: F& a1 a
26 Spark RDD缓存persistent讲解(cache、结合源码分析)6 k3 U% v. {$ J+ [! f( S9 w3 I8 w
2 M( l$ T3 z% d, z  o2 R+ t
07 Spark JobHistory与Spark on YARN
$ E: S5 y% _) u( A5 \! U9 {27 Spark Application Monitor(应用运行时监控)
: |6 n' M( J5 w8 c+ b3 z# J% m28 Spark JobHistory(应用完成以后监控)
9 V+ b! P# m. P% p: M2 @7 Q29 Hadoop YARN如何进行资源管理和调度应用
* A. R4 k+ [7 z30 Spark Application如何运行在YARN上' }; [! T5 ~6 @  y, f
31 Spark应用运行时的部署模式client与cluster4 }& G* q' B  S5 n, H1 t
32 Spark App运行在YARN上
4 Z) D0 q7 ~; U; o0 N" ^3 V* I2 D" K. [( \
08 Spark内核分析+ ~" L7 O; W1 {: o6 T/ W' X
33 Spark编程模型SparkContext详解% B- ]  V8 C& }  x5 W
34 通过源码分析SparkConf的作用. U% C) y/ S. I* T
35 Spark内核分析之Spark Scheduler讲解(结合WordCoun程序)! R7 E- N" B- g4 r
36 Spark内核分析之通过代码调试分析SparkContext启动过程一
9 B! v* ~+ L6 {1 M, J4 f37 Spark内核分析之通过代码调试分析SparkContext启动过程二
/ x; O! r5 T4 [0 m38 Spark内核分析之跟踪源码分析Spark 如何提交应用
7 k+ e2 Z: V2 Y/ x
" Y9 ]% i  P% O. G+ r

本帖子中包含更多资源

您需要 登录 才可以下载或查看,没有账号?立即注册

×
您需要登录后才可以回帖 登录 | 立即注册

本版积分规则

关闭

站长推荐上一条 /1 下一条

点击这里给我发消息

QQ|小黑屋|Archiver|手机版|一路学IT论坛 专业视频教程网站

GMT+8, 2026-10-28 07:54

Powered by Discuz! X3.5

© 2001-2025 Discuz! Team.

快速回复 返回顶部 返回列表