徐培成大数据从入门到精通 零基础到大数据架构师系列课程（零基础学员必学）

冰点也疯狂

2 k, I) r& |9 M! E& A十八掌大数据课程体系图
基础入门课程：
+ q1 a9 S- B( J' M* z1.java
+ Z- v% V- \+ D" H' t/ U: G8 }2.linux  
3.hadoop
中级课程：
4.Avro  
5.ProtoBuf   
6.flume  
9.Kafka   
10.Sqoop与Pig  

# W' e5 t0 b% F' s" D" r高级课程：
12.storm  
& u5 L2 G+ }7 r13scala  
14.spark  
15 mahout  
$ _. O' w; b! }16.R语言
17.elk
4 P& P0 Z/ j. R& W1 M. f18.FLink

) B" H& S6 O* _, D" F, E5 s项目篇：
项目1：友盟数据平台大数据实战项目    
8 B% N1 d$ t  b1 Z1 C' H+ ?0 a) p7 p' s项目2：2017年大数据完整版教程之电商项目    
项目3：2017年互联网常用的大数据指标  
6 P: `' n& m- C* Y/ A( h- s项目4：Spark从入门到实战（11天完整版）    

课程目录：
第1部分
5 x( ]6 o2 p7 p+ a【IT十八掌徐培成】Java基础第1天
第01天-01.常识操作
) v  C7 u# V9 ~+ ]第01天-02.进制转换-cpu亲和力设置
2 i% R0 ]( I: [8 k; U% ?. l: g8 Z第01天-03.dos-path
第01天-04.HelloWorld-classpath

【IT十八掌徐培成】Java基础第2天
6 O2 T8 a& k5 H" Y3 c# |6 F! ^第02天-01.java关键字
* j3 V' X/ u7 G+ r1 J! Z2 Y6 z$ s9 w第02天-02.字节-负数表示-补码-128计算
1 r; i! C; ^; J8 }7 c第02天-03.数据类型-强制类型转换
第02天-04.运算符-移位运算-逻辑运算
4 F6 R2 X: [) `/ l0 T) P第02天-05.条件判断-分支语句
第02天-06.while-for-99表

【IT十八掌徐培成】Java基础第3天
, c4 z1 u. p& q( K5 M/ W第03天-01.位运算-数据类型
第03天-02.函数定义-调用-sum-fac-递归
第03天-03.数组的定义-初始化-越界异常-Null异常
第03天-04.求最值-冒泡排序
- `+ l6 Z8 ]1 ~$ O; P- S! V第03天-05.选择排序-折半查找
. u% X8 J! n. U# L& f第03天-06.二维数组-三维数组-循环遍历
7 F: d6 v3 h& {+ u7 v8 E
【IT十八掌徐培成】Java基础第4天
第04天-01.作业讲解-byte范围变换-二进制格式输出-三维数组横向打印
( V1 f) Q5 {) n4 k/ y第04天-02.OOP概念-定义类-创建对象
第04天-03.OOP-栈区-堆区-引用
% m3 ~  o- C- y5 {4 z! ~$ F% u第04天-04.OOP-堆栈的溢出与设置-private关键字
第04天-05.构造代码块-构造函数-javabean-pojo
第04天-06.super-super()-this-this()
. {5 ?! D  W. n/ P5 U# x

5 ], F6 f/ Y( M* N, t0 E【IT十八掌徐培成】Java基础第5天
, _3 j1 Z, w* D第05天-01.回顾OOP-构造函数
- l+ y3 w4 @# T; y; x( g第05天-02.final-内部类
9 |9 i  @0 O  e2 Q0 ?7 v* f第05天-03.抽象类-抽象方法-修饰符组合

9 [* }( V& {8 ~+ V, S【IT十八掌徐培成】Java基础第6天
' S6 X! ]# m$ K第06天-01.接口
第06天-02.接口-USB-Jing8
2 z/ d* ?# G# j3 X- V$ H第06天-03.多态-类多态-接口多态-同名属性问题
第06天-04.匿名内部类1
第06天-05.匿名内部类-适配器模式
第06天-06.适配器模式2

【IT十八掌徐培成】Java基础第7天
第07天-01.异常
- j  |+ J( w& w( \第07天-02.异常2
第07天-03.package-编译参数指定  
第07天-04.权限-public-private-protected-default
第07天-05.jar打包命令
( G- C! T5 Y/ Y! ]0 k第07天-作业
0 X( l, Z2 a6 ~. B/ y
7 X' O3 J& U& J  {/ N' [6 K【IT十八掌徐培成】Java基础第8天
第08天-01.多线程-yield
第08天-02.多线程-join-daemon-同步
2 ^( O+ S2 R4 F, a( n# q第08天-03.多线程-同步代码块-同步方法
& V% K, Z! Q6 }' N3 Y1 b第08天-04.多线程-生产者-消费者
4 }& T3 Q9 u3 N: i$ }% ~第08天-05.多线程-生产者-消费者2

# S  a% X6 x' m* }# b( P: F/ R【IT十八掌徐培成】Java基础第9天
第09天-01.多线程-时间片-死锁演示
4 u0 P  w1 e- |第09天-02.Runnable-优先级
第09天-03.多线程优先级-eclipse-配置使用
第09天-04.多线程-状态机变换
第09天-05.String-字符集编码
* `7 v, q- Q. G2 F" F# h6 C第09天-作业分析-线程

【IT十八掌徐培成】Java基础第10天
第10天-01.字节集-编解码操作-中繁体-StringBuffer
9 |' J$ X3 N' N4 U7 V& C. B第10天-02.builder设计模式-StringBuilder-包装类
第10天-03.List-集合框架-ArrayList
第10天-04.List-迭代器-对象等价性
7 C5 F- e/ W0 h+ l5 {5 u( B第10天-05.set特点与操作
# i7 I. n5 w* Z2 W8 m/ _第10天-作业答疑
/ Z2 u+ i8 [; H3 O+ _, ^
【IT十八掌徐培成】Java基础第11天
第11天-01.Map集合
第11天-02.Map集合-hash原理
/ Y' S* S% o0 p' r! Z+ {- p  Y第11天-03.Map集合-hash原理2
第11天-04.Map集合-集合整理
第11天-作业分析

  Z: L9 W% d1 }% \& P+ A8 [【IT十八掌徐培成】Java基础第12天
: t6 r  k8 U2 q7 L" t) m8 H$ E  B第12天-01.Map集合的嵌套和遍历
% V# g0 l8 T& L. j, u3 q第12天-02.TreeSet实现与Comparable接口
第12天-03.TreeMap-集合工具类
第12天-04.集合工具类-增强for循环-变长参数
" j0 o# f, Z: _& P2 `第12天-05.IO流操作
! r5 s2 ]4 L0 l4 R; }- {% J1 Y第12天-作业答疑

/ ?0 h$ w1 p+ Z2 l【IT十八掌徐培成】Java基础第13天
; s  u. A* M( g9 Z- I: p第13天-01.Map的迭代方式
第13天-02.BufferedWriter-装饰模式
第13天-03.BufferedReader
第13天-04.字节流-FileInputStream-FileOutputStream
第13天-05.文件流skip操作-文件切割与合成
: l0 n& C+ o* z, T$ d  M; ^第13天-06作业辅导
/ s/ s$ I- [' u; A% p
【IT十八掌徐培成】Java基础第14天
) |' i+ R4 V  D* I! P第14天-01.文件归档
第14天-02.文件解档
第14天-03.媒体文件字符化传输转换
  g/ X4 D2 u. Z% e0 k" r第14天-04.标准IO-File
( }3 Q  C+ U/ t/ l. ~1 A第14天-作业

【IT十八掌徐培成】Java基础第15天
$ L2 x: X) q3 D第15天-01.File操作-递归访问文件夹
第15天-作业
0 k* M+ ~9 x1 b* _0 j2 B1 ~
  X4 x3 C1 r3 F( ~/ D8 [【IT十八掌徐培成】Java基础第16天
第16天-01.RandomAccessFile
* \% K) N. `: X第16天-02.文件多线程复制
  f! e+ _" w( `2 h第16天-03.串行化-深度复制
" r3 F1 w. L0 B  S0 Y第16天-04.ByteArrayInputStream-ByteArrayOutputStream
第16天-05.DataInputStream-DataOutputStream-FilterStream
: _) g9 g, |+ p* D第16天-作业
- r. f7 T! D# M8 `. S  l. j
【IT十八掌徐培成】Java基础第17天
1 `; c9 h/ z- e5 `6 T第17天-01.GUI编程
$ }7 V$ j' E' i第17天-02.GUI编程-editor-dialog
! d* ~: |$ e6 w7 y7 Q7 }" u第17天-03.GUI编程-滚动面板-菜单
9 E0 S. @0 G6 k1 e第17天-04.多线程复制-1avi
第17天-05.多线程复制-多条跟踪
9 R- ]1 }  u6 t3 V8 m6 V% m" {第17天-06.Socket基础
第17天-作业
/ ?, ]* o: X: g7 w& c
【IT十八掌徐培成】Java基础第18天
' I  i4 R. E: x7 T) Z" s第18天-01.Rose工具安装
第18天-02.Rose工具-用例图-类图-时序图-状态图
第18天-03.Socket通信基础
第18天-04.Socket通信基础-2
8 O$ c% M6 D4 J1 u8 |( j1 \8 C第18天-05.OSI七层协议-Tomcat服务器搭建
$ [- Q7 k4 m; W; |第18天-作业

9 L- C! r& }% t9 K【IT十八掌徐培成】Java基础第19天
$ I3 ?5 n  u. B% {; M# N% J第19天_01_实现单聊
( S  X/ M+ l8 S. N, x1 N$ {第19天_02_通信类封装_群聊
4 T" A% `4 l; n* k. C3 c第19天_03_定义消息报文
8 m' s8 Y. `, i& Z9 i1 P- T第19天_04_解析消息_解析后将消息重新封装发送给客户端
2 y/ |: R, Z' e" ?) r第19天_05_单例模式
第19天_06_好友列表消息
6 d- h2 d! O# e# H1 O, W8 \
$ V& q. v" u) k# G+ S$ H. n( L【IT十八掌徐培成】Java基础第20天
第20天-01_消息重构
: r4 `. a, o$ M: y第20天-02_推送好友列表
第20天-03_消息重构——2
& w% y/ o( b2 o! w第20天-04.UDP协议
第20天-05.Zip压缩流与解压缩流实现
7 M# [+ I1 A" c1 @* O第20天-06.屏广-1
) A( _9 Y+ B/ j
【IT十八掌徐培成】Java基础第21天
  H# F' l# e4 x9 V0 t第21天-01.屏广服务端改造-切屏-协议制定
8 o: P% X0 ^) I0 \; G第21天-02.屏广学生端改造-接收广播-解析报文-刷屏
! ]% ?- D6 a6 R( q. A6 m0 x第21天-03.URL-多线程下载
第21天-04.URL-多线程下载-暂停操作
- ~; W8 U# p: s% X/ L第21天-05.URL-多线程下载-断点续传-Properties
: N! t; D. m6 q1 h第21天-06.URL-多线程下载-断点续传-文件实现

% c3 y6 I, m% @/ G( O/ `9 C【IT十八掌徐培成】MySQL+JDBC第22天
第22天-01.MySQL安装
! @9 T+ t0 d4 j第22天-02.MySQL安装-调错
第22天-03.MySQL常用命令avi
第22天-04.JDBC基础
: }3 q+ X& z9 v: J: Z% [- C, t( ]( I5 ^+ _第22天-05.JDBC基础2
第22天-作业
5 K& e6 ^% h# X* C, W7 j2 o1 [
0 q  t* z7 n3 _2 P, |  ]4 Y5 a8 t1 R【IT十八掌徐培成】MySQL+JDBC第23天
0 t' i  E- x! o/ Z. ]2 ]2 W/ @, ]第23天-01.作业和JDBC-dao
1 A/ w9 x3 W& X第23天-02.sql注入-preparedstatement-批量插入 - 副本
! K/ g( J, [% @4 \: r! w* G第23天-03.ppst-addBatch-executeBatch
9 Y2 c: {7 B* W3 v+ y; G第23天-04.jdbc-mysql存储过程
第23天-05.jdbc-mysql函数

【IT十八掌徐培成】MySQL+JDBC+连接池第24天
第24天-01.Blob字段操作
: J& H8 M* |* v: S- \- b第24天-02.事务并发现象-隔离级别
第24天-03.事务并发现象-隔离级别2-表级锁-隔离级别API
4 Z' L/ C! l4 w: f  S第24天-04.分组查询-having-连接查询-笛卡尔积
. f! X5 |" x8 q" I6 K第24天-05.内连接-外链接-集合-去重查询
第24天-06.数据源原理-连接池实现-c3p0第三方连接池使用

1 d3 J# M' d2 F8 Q! z9 I, o7 T
" X( G. P8 Y2 K, J. _% W【IT十八掌徐培成】反射+内省+jdk动态代理+JVM第25天
第25天-01.反射基础
第25天-02.declaredMethod-method-Modifier
3 U% M- D/ [+ Y0 N第25天-03.递归获取所有超类-内省获取所有属性-getter-setter
6 |9 n. T8 l& C第25天-04.classLoader-系统资源-不可见类访问
第25天-05.jdk动态代理
7 d2 G6 p& a8 C: o2 C% V第25天-06.JVM结构1
! a' ~. O  f1 N& l1 K" W$ j1 u  X8 w
7 g$ D( L0 K& Z3 I2 I9 R0 P【IT十八掌徐培成】JVM+NIO第26天
( H. A3 P- ?) s3 k& r! [第26天-01.回顾-JVM初步使用
0 X( z. L3 ~4 [( F. c第26天-02.jvm-young gen-old gen-eden-sur-jvisualvm-jconsole
第26天-03.JVM结构-finalize-gc
+ N4 q' }0 W; M; _; k第26天-04.NIO基础
第26天-05.ByteBuffer-mark-pos-limit-cap-flip
! {6 ]1 }2 H6 r) u7 d' L2 O第26天-06.FileChannel-RandomAccessFile-CopyFile
7 G1 H% T6 u: z第26天-07.DirectByteBuffer
. _- y) p* _# i2 K" R' N第26天-08.DirectByteBuffer2

# b! k' R: k3 ?, o  u( D4 C3 I  O- F【IT十八掌徐培成】NIO+学习总结第27天
* B: G3 {" J! `$ ?0 V! e第27天-01.MappedMemoryBuffer-文件内存映射缓冲区
* o9 N. ~0 S3 Z/ X第27天-02.NIO-ServerSocketChannel-SocketChannel
第27天-03.NIO-Selector
& l* r8 h/ p* G! E6 k第27天-04.NIO-Selector-Server-Client
第27天-05.NIO-状态判断与操作处理
2 r' _4 C) q: D2 s第27天-06.Java基础总结

' g1 |4 f3 [( C2 {2 \第2部分
linux第1天
$ j- S" y1 }4 d- j' \Linux基础-01.VMware安装-Ubuntu-安装-Linux常用命令-文件夹结构
Linux基础-02.Linux常用命令2
Linux基础-03.unmame-file-tar-gzip-gunzip
4 y1 p0 z# k$ v% gLinux基础-04.xargs-mount-umount
* x1 V, G3 r3 ?. {( B- ^Linux基础-05.nano-dirname-basename-环境变量-df-fdisk-cut-job

0 P" G" Z6 |0 _) rlinux第2天
Linux第02天-01.参数处理-nc-if-export
: E( O. \5 |; [3 v$ k" O6 Z/ d* W1 tLinux第02天-02.目录-权限-addUser-user-adduser-apt软件源
Linux第02天-03.桌面安装-增强
Linux第02天-04.网络连接方式-桥接-NAT-OnlyHost-静态ip配置
Linux第02天-05.if-for-while-参数处理-shell编程
; \0 L% b3 e4 M5 @5 X
第3部分
hadoop01天
1 r% ~* Z6 O5 {0 R6 jHadoop第01天-01.hosts-hostname-ip修改-启动模式切换-dns
- y! |. G5 a% A: A+ }Hadoop第01天-02.hadoop-bigdata介绍
+ Y7 z- S' T/ ~Hadoop第01天-03.hadoop安装
Hadoop第01天-04.hadoop配置独立模式-伪分布式
Hadoop第01天-05.hadoop伪分布式2
( R1 N# Y$ i0 X# _
7 G( F) h" s- @1 \hadoop02天
Hadoop第02天-01.Hadoop基础回顾-进程初识-webui
Hadoop第02天-02.scp-rsync-ssh root配置
; |0 N9 d9 K, A9 IHadoop第02天-03.自定义脚本xsync
Hadoop第02天-04.自定义脚本xcall-完全分布式集群配置
' Q  h' v4 S! k4 T7 E6 p9 r* g+ oHadoop第02天-05.hadoop类库和配置文件抽取-2nn配置
/ _7 I& T0 o; H/ F( b$ [, T/ RHadoop第02天-06.hadoop本地目录修改-属性查看
# X' o: ~8 q, O5 [9 w
& T+ O, p9 }. _  f& Ehadoop03天
Hadoop第03天-01.脚本分析
2 A' B; F( o5 B* J( T7 r  H0 S+ k/ ^3 zHadoop第03天-02.hdfs常用操作
Hadoop第03天-03.hdfs FileSystem API
Hadoop第03天-04.hdfs FileSystem API-write
: X, O& r- |; `  y5 e6 \3 WHadoop第03天-05.hdfs FileSystem API-read-filestatus

hadoop04天
. u0 g5 v/ p% q) B  b4 {Hadoop第04天-01.文件删除-递归访问文件系统-eclipse插件
0 o1 G( w7 m; g  P9 o4 MHadoop第04天-02.文件写入解析-机架感知
4 _& p' [- V* UHadoop第04天-03.机架感知测试
Hadoop第04天-04.HDFS读文件剖析-HDFS架构解读
Hadoop第04天-05.win7下hadoop运行需要dll和exe文件的支持
; v8 w/ E$ d( y2 j' Z
$ A/ m, _! |* P6 [hadoop05天
Hadoop第05天-01.滚动编辑日志-融合镜像
4 w4 u# s3 e5 [+ c& xHadoop第05天-02.写文件一致性-distcp-scp远程间复制-har
1 y. y% h' K  M) u+ H6 G' N5 T0 kHadoop第05天-03.数据完成性-校验和
: i. W; I0 t4 Q/ MHadoop第05天-04.校验和-压缩编解码器
Hadoop第05天-05.ubuntu搭建eclipse环境-codec测试
Hadoop第05天-06.hadoop本地库解决-deflate压缩算法编程
Hadoop第05天-07.deflate-gzip-bzip2-lzo综合评测

hadoop06天
/ A8 f5 ?7 X) p5 bHadoop第06天-01.LZO项目编译安装
* S  C1 S; N8 zHadoop第06天-02.maven安装-maven本地仓库服务器搭建
$ L& \4 }2 T7 W6 d; v1 h3 `: tHadoop第06天-03.maven编译hadoop-lzo项目-集成到hadoop项目测试通过
, p  g* H' \& N$ I% P. W% \6 h/ cHadoop第06天-04.snappy安装-综合性测试-性能评测
Hadoop第06天-05.使用codePool优化压缩加压缩过程
Hadoop第06天-06.maven使用

hadoop07天
/ Y. [0 T. Y4 |Hadoop第07天-01.eclipse-maven使用
Hadoop第07天-02.eclipse-maven使用2-hadoop项目依赖引入-sequencefile
* `* }( b$ J+ E. g- O4 ^' }: vHadoop第07天-03.sequencefile-压缩类型-文件格式-同步点-position
7 ^- E* C6 k1 _( ?! l3 ]' ]' |Hadoop第07天-04.mapfile-格式-索引间隔-最近点查找
Hadoop第07天-05.mapfile变形-arrayfile-setfile-mapfile修复seq文件
Hadoop第07天-06.Writable串行化
  C4 P$ \+ c: H5 }  ~9 p
3 F7 R6 Z1 W9 x  khadoop08天
+ g& d7 G/ O) QHadoop第08天-01.Text串行化-Hadoop序列化机制
Hadoop第08天-02.IntWritable-LongWritable-Text-ArrayWritable-MapWritable-NullWritable
Hadoop第08天-03.2NN检查点工作原理-配额管理
Hadoop第08天-04.快照管理
Hadoop第08天-05.回收站
Hadoop第08天-06.MapReduce入门
5 B( I2 [' I1 S* \# D2 P1 h- |
2 z9 O3 E; z1 D, Vhadoop09天
% w' j9 @1 {0 j5 o, C/ yHadoop第09天-01.Job提交过程分析1
' q% U, S! i- Y- }Hadoop第09天-02.Job提交过程分析2
- }: F: ]# q  D2 j' L0 iHadoop第09天-03.Job作业打包-提交-ubuntu运行
+ B! V, C1 Y; g3 AHadoop第09天-04.Job本地模式运行总结
9 |0 n7 h% n% t! l. F: N  kHadoop第09天-05.Job在集群上运行-JVM的远程调试-环境变量设置
0 \+ o) E6 F" ~4 l9 o* ]$ M2 B3 ]Hadoop第09天-06.YarnRunner作业提交过程分析考查

1 j/ N4 E$ y4 r  Q7 l! ^hadoop10天
: e$ k: f9 \8 N( ]5 L) a. L, _Hadoop第10天-01.ipc通信原理
) p% o7 z4 `0 r8 Q$ m5 f# AHadoop第10天-02.ipcdemo通信数据流分析
: u/ k' i' k: I3 oHadoop第10天-03.Map过程分析-combiner-partition
' ?6 V0 K4 p% [8 e& ?5 n1 kHadoop第10天-04.MR logs
Hadoop第10天-05.计数器
$ F' u# X0 A( o1 ]7 t$ [Hadoop第10天-06.block设置-最小块-切片设置-切片算法
& A' T  H' o* K
hadoop11天
; Y  t) m( A- y# m! ^: qHadoop第11天-01.切片文件处理
Hadoop第11天-02.分区函数-数据倾斜
! x7 I# z2 U# T) x5 F" v1 g; |Hadoop第11天-03.MapWC编程Combiner实现
Hadoop第11天-04.inputformat-CombineFileInputFormat
# C& c* z5 r: p* b0 o8 P9 O! Y- gHadoop第11天-05.自定义inputformat-recordreader-whole
Hadoop第11天-06.inputformat-KV-NLine-Seq-SeqAsText
/ p2 V; S: g' IHadoop第11天-07.inputformat-DB
( m8 H9 I$ H9 V- P; G6 o
% h) p: i2 u1 y0 d% Q0 U6 Dhadoop12天
$ `" z' p$ F* f9 j" HHadoop第12天-01.输出格式-text-压缩
1 K! X6 i2 k# g0 [Hadoop第12天-02.输出格式-Seq-DBOutputformat
Hadoop第12天-03.Yarn调度框架-二次分发原理
" U" o% T! z3 b  YHadoop第12天-04.Yarn调度框架-二次分发原理-App状态变换
Hadoop第12天-05.全排序-自定义分区函数-采样器
4 A# x  |7 c: }" \! t0 B
hadoop13天
Hadoop第13天-01.采样器实现全排序-二次排序
# ]# s+ V# \3 m1 g* @3 v( mHadoop第13天-02.二次排序2
Hadoop第13天-03.连接查询1(小型数据集)
Hadoop第13天-04.分布式缓存-两个大数据集连接
Hadoop第13天-05.两个大数据集连接2
3 W0 l9 g, s& q9 y' y$ ?
hadoop14天
Hadoop第14天-01.ChainMapper-ChainReducer
Hadoop第14天-02.节点的服役-退役
Hadoop第14天-03.NameNode的HA-1
Hadoop第14天-04.NameNode HA配置-部署-命令说明
* i# X& T5 n  Z: ~. MHadoop第14天-05.NameNode HA配置-部署-2

第4部分
: X; R& n! A$ [1 IAvro第1天
Avro-01.介绍-使用-串行化-反串行化
Avro-02.avro-writable-java内存-磁盘-串行反串行性能评测-avro MR
1 N) M5 |; s7 p% O9 V* C) GAvro-03.Avro 实现MR2

$ e2 S3 }2 f' i8 h/ O# z第5部分
0 ?3 l$ H# m- r1 F7 K" Q- l9 qProtoBuf
" D+ x1 F4 x1 i1 `3 F- h5 SProtoBuf-01.介绍-使用
ProtoBuf-02.性能评测

9 n1 w6 x# E$ K) v第6部分
" \: K3 A3 k: GHive第1天
Hive第1天-01.Hive简介-安装
( {" h0 A9 C6 M/ E6 lHive第1天-02.Hive常用操作-建库表-插入数据

) b3 ~5 F9 j1 v' S  K6 d) sHive第2天
: W: t; a  V: P% v1 N; ^2 SHive第2天-01.Hive schema外部MySQL存储
Hive第2天-02.Hive客户端JDBC连接操作Hive-Hive-site.xml权限文件修改-协议指定
Hive第2天-03.Hive Beenlie客户端-常用命令
9 o1 o  [' ^3 e2 ^* p  l0 A  Q7 PHive第2天-04.Hive托管表-外部表-分区表
7 Z4 P; H! w5 D- ~/ aHive第2天-05.Hive分区表-常规操作-数据处理
3 V( e! m+ A. a4 K
: g6 A; l7 }+ G" dHive第3天
& v" Z3 a8 f, N% A, dHive第3天-01.动态分区表-严格模式处理
Hive第3天-02.导出数据到本地和到HDFS-insert lcoal Directory
Hive第3天-03.函数-数学-聚合-分组
Hive第3天-04.内连接-外链接-左外-右外-全外
# F; O' n# q; {: ~* w( w0 Q: GHive第3天-05.局部排序-全排序-sortby-orderby-clusterby
8 n) A& e* o+ H% rHive第3天-06.桶表-索引-视图
6 Q) {. U& i3 i+ K' f
Hive第4天
Hive第4天-01.Hive调优
Hive第4天-02.Hive调优2
Hive第4天-03.Hive启用压缩
Hive第4天-04.Hive 自定义函数
  G( p5 a  z( \& gHive第4天-05.Hive自定义函数UDTF

( ]" [: K' R( ~  x第7部分
! h; C9 W4 Z2 _- sHBase第1天
, E+ V9 Z1 n" N1 xHBase第01天-01.Hbase简介-本地模式安装配置
8 P! x# Z5 _8 z" E* I4 [7 zHBase第01天-02.完全分布式集群搭建
/ q% o: c2 G! N* T3 w; M) Q; _HBase第01天-03.Hbase客户端api
4 P' Y9 R( g7 h: H  mHBase第01天-04.Hbase shell操作-create-put-get-scan-disable-drop
HBase第01天-05.Hbase client API-get-put-scan-delete
HBase第01天-06.ZooKeeper介绍-安装
HBase第01天-07.ZooKeeper伪分布集群搭建

HBase第2天
HBase第02天-01.ZK完全分布式集群-API操作
% {) a3 z9 T, k9 \. ?1 `/ pHBase第02天-02.ZK观察模式-事件回调
  M2 q( Y# [% T- h. A4 QHBase第02天-03.Hbase初始化ZK的连接过程考查
HBase第02天-04.Hbase执行CRUD时与ZK和RS的交互过程分析
HBase第02天-05.Hbase架构-区域切割与合并
2 F5 }. f9 d6 f' o$ g' U8 W
HBase第3天
HBase第03天-01.hbase在hadoop上的目录结构-架构分析
/ ?1 ~. X) W$ N* l& y; kHBase第03天-02.hbase shell-VERSION-Delete cell value-raw
HBase第03天-03.Client Buffer-CheckAndPut
( w  B) X6 d7 q  _  F: R0 {) pHBase第03天-04.Scan Cache-Scan Batch
HBase第03天-05.filter-ValueFilter-ColFilter-SingleColValueFilter-FilterList
+ G, _  a- x6 p2 P  `9 w- x
HBase第4天
HBase第04天-01.复杂过滤器-分页-KeyOnly-时间戳
HBase第04天-02.自定义过滤器-Counter
% F0 p1 M& v* v- _  @, F0 KHBase第04天-03.自定义协处理器
HBase第04天-04.kundera API访问hbase
HBase第04天-05.kundera API实现CRUD

HBase第5天
! V+ |: H5 w1 x# y9 l! zHBase第05天-01.move-close-storefile
HBase第05天-02.hbase整合mr
8 f2 E5 k6 z/ _1 u1 d' T9 q! H/ S5 jHBase第05天-03.hbase整合mr-TableReducer
0 Q5 a* v# f5 C( lHBase第05天-04.hbase优化
HBase第05天-05.Hadoop NN与RM的自动容灾
HBase第05天-06.HBase与Hadoop HA集成-MR作业
" e) A9 q* i( O$ EHBase第05天-07.Master HA

) O5 s$ Y$ u9 g7 o$ J5 p- g# o第8部分
5 v) q1 ]/ W: M0 g3 ZFlume第1天
Flume第01天-01.介绍-安装
# m! Z2 C( ^: N% o8 QFlume第01天-02.架构-组件-配置说明
Flume第01天-03.Flume核心类考查
* G) \$ X+ h" r& P4 O8 @; y6 o# ~Flume第01天-04.Flume avro source
Flume第01天-05.Flume Source-exec-tcp-udp-http-nc
# u  X4 |# C* U/ U5 dFlume第01天-06.Flume Source-stress-http-custom
8 C+ n$ w+ O( D3 U. W2 ~$ M
9 G( C8 b/ q. M. e# \5 ~Flume第2天
8 h* M/ y) H9 _4 y9 C$ qFlume第02天-01.HSFS Sink
5 o: K* \: O' \, DFlume第02天-02.Hive Sink
Flume第02天-03.Hive avro hop-hbase-hive
; `& |, t; ?; z5 z& @6 h* SFlume第02天-04.Hive replica-multiple-mysql channel
- S! s  j& s7 [8 N5 Y
& T, T" c' X# p# a% BFlume第3天
9 U' b+ `( V( Z7 {5 g! UFlume第03天-01.Sink负载均衡-拦截器

' |. d# m& F( S- x. P* a, F$ b第9部分
Kafka第1天
8 ^9 d1 z- d; }! y) h8 ^Kafka第01天-01.JMS介绍-Kafka介绍-kafka安装
. _7 H  `+ w' q6 D1 vKafka第01天-02.kafka多broker安装-容错性测试
8 Y: ?* l# S% I! F6 V( z! g1 AKafka第01天-03.kafka完全分布式集群配置
Kafka第01天-04.kafka的zk节点结构分析-各组件考查-本地文件log考查
Kafka第01天-05.kafka的副本结构-重新指定

; J3 q. z- G  ^% D9 l: L5 kKafka第2天
8 x) s' E& Y: \( ~" G% ^) uKafka第2天-01.编写生产者-new API使用
Kafka第2天-02.编写使用自定义分区的生产者
! W/ c, ]9 d3 x6 `Kafka第2天-03.编写消息消费者
Kafka第2天-04.消费者过程分析
Kafka第2天-05.flume整合kafka-KafkaSource
1 R- B3 l1 E! t$ l! ~Kafka第2天-06.flume整合kafka-KafkaSink-KafkaChannel
, x& y4 J/ Q  x/ U  Z! _; c
第10部分Sqoop
( h0 s& ~% U7 M' K; P6 QSqoop-01.安装-配置-使用
# K( z* x) x( MSqoop-02.bug处理-142&mysql5.1.17组合ok
, O0 D$ w6 |3 K5 N8 HSqoop-03.hive-hbase
Sqoop-04.sqoop-增量导入-job
1 l( s/ O4 M9 d5 J) D
( @" _3 n) x/ y, N第11部分Pig
Pig-01.介绍和安装
Pig-02.架构-常用命令-数据模型-数据类型
Pig-03.诊断操作-load-store-分组-join
Pig-04.cogroup-limit-filter-AVG-SUM
% _1 H9 e$ @, @, _: `Pig-05.load-store函数-日期函数-String函数-top-toTuple

第12部分Storm
. p% u& f3 D2 Z9 ?& K) lStorm第1天
Storm第01天-01.介绍与安装
Storm第01天-02.storm配置-启动进程
1 G+ w1 L2 Q1 h# Q& I8 EStorm第01天-03.storm体验Spout-bolt编程

Storm第2天
6 {) w: |& k$ S/ S4 g$ K% P5 C; GStorm第02天-01.StormZK考查-NC集成log输出
Storm第02天-02.Spout进程考查-并发度
! c0 T7 Q& B/ O+ oStorm第02天-03.Spout分组策略-shuffle-all-field-direct
( c; {' Q% c: h! hStorm第02天-04.Spout可靠消息的保证-ack-fail-callback
Storm第02天-05.Spout超时设置
3 c2 w* Z. t" R
. n) q" \  ~4 B3 |" mStorm第3天
Storm第03天-01.Storm并发度设置
6 J; \% T' d& G0 TStorm第03天-02.Storm再平衡-ncbug纠错
- X* B; h" q& @Storm第03天-03.Storm基础kafka
: l' ~5 ~9 `7 b9 Q. b8 G7 JStorm第03天-04.Storm基集成kafka-bug修正
Storm第03天-05.Storm Trident
& G- {5 L3 i) W  r1 J6 g) ]
9 F) `* A  S+ r  G, i5 [! aStorm第4天
( U+ Y; V. L/ h5 X. i) nStorm第04天-01.Trident批次原理考查-分区展示
, L5 U! @+ m$ d/ L0 QStorm第04天-02.聚合函数
Storm第04天-03.自定义聚合函数-Sum-SumAsAggregator
Storm第04天-04.自定义聚合函数-Sum-CombinerAggregator
2 ^" r$ _  v6 u0 x; W0 s( Z' lStorm第04天-05.Drpc-topology值获取
& Q7 c7 m  P7 `9 e
. `" Z. V+ L6 Q" |8 i" o( z1 D$ d) N& rStorm第5天
1 c5 N3 k: `' V; d* i. \Storm第05天-01.hbase-storm集成
Storm第05天-01.hbase-storm集成2
* o2 X" s& ?* C: m& n
13部分Scala
# \% p5 {! E8 ^1 d" dScala第1天
Scala第01天-001.Scala介绍-环境搭建
/ L- l6 h* {7 a4 F) o# xScala第01天-002.Scala-val-var-操作符重载-类型转换
$ `( S( e' Z) E( w2 V+ DScala第01天-003.Scala-ifelse-while-for-
Scala第01天-004.Scala-for高级推导式-函数-99表-阶乘
* b: h  W8 b8 SScala第01天-005.Scala-变长参数-命名参数-过程-异常
0 Q# ^% |- w4 }% S+ f! l8 IScala第01天-006.Scala-数组-缓冲区-多维数组
Scala第01天-007.Scala-Java互操作-元组-map-zip
Scala第01天-008.Scala-构造函数-主构造-附属构造-对象-伴生对象
Scala第01天-009.Scala-包-导入
) k0 {! ?8 t( _
Scala第2天
Scala第02天-001.继承-超类构造-匹配器操作
" R$ G% y# k# dScala第02天-002.匿名内部类对象-抽象类-继承关系树
; B3 h% m, p6 |. M0 u5 RScala第02天-003.正则表达式-文件-进程控制-trait
Scala第02天-004.trait-抽象-自身类型-主构造
4 U8 T: i) R! p+ f: fScala第02天-005.对象trait-类trait-叠加trait
. N* ?1 m# Y. _+ d4 _Scala第02天-006.操作符-scala IDE插件-高阶函数
Scala第02天-007.闭包-柯里化
7 e! G! R/ p2 b1 [2 C8 JScala第02天-008.集合操作
' Y' i* i+ d8 U/ r5 P
0 c$ G' t% Y- ]0 s0 I% V" wScala第3天
. t7 r- r. L3 h4 e( B) V' q4 vScala第03天-001.模式匹配-守卫-模式变量
) M8 v5 q9 [$ D$ G. ~/ X6 ?5 FScala第03天-002.样例类-样例类匹配
4 X. C3 j. j0 s, G2 ~4 @Scala第03天-003.偏函数-Option-Some-None
Scala第03天-004.注解-深度复制-clone
: c5 [) h& F$ m7 w, TScala第03天-005.尾递归-克隆-注解
7 h8 [; N, S& I" P+ A( @8 @Scala第03天-006.泛型上下限-协变-多重边界
5 _/ u4 e6 n3 ~0 Z& }Scala第03天-007.隐式转换
5 A/ y1 }/ W2 H, d
0 Z  C% O7 p0 d- gScala第4天
4 F$ W9 V% U7 EScala第04天-001.Scala Actor-消息接收-消息发送
Scala第04天-002.Scala Actor之间消息的发送
Scala第04天-003.Scala Actor之间共享通道实现消息发送
Scala第04天-004.Scala Actor Future将来时消息-可用判断-调用处理
# ?& E5 v( B8 M9 L$ ?; GScala第04天-005.Scala Actor的link与监控

14部分
spark第1天
【十八掌徐培成】Spark第01天-01.Spark介绍
  }- n5 a- x$ F! E7 u# o【十八掌徐培成】Spark第01天-02.Spark安装
【十八掌徐培成】Spark第01天-03.Spark SparkContext-SparkConf-RDD-LineCount
. j. |5 `8 |' u* R  y【十八掌徐培成】Spark第01天-04.Spark运行独立应用程序-编译scala程序
3 B9 \) o3 m% U+ ]% K0 }. {【十八掌徐培成】Spark第01天-05.Spark运行独立应用程序（java语言编程的wc）
" K6 q6 s5 j% P/ l9 q8 x8 q【十八掌徐培成】Spark第01天-06.Spark变换-action
3 Q7 h  L0 f, I- `: b8 a* h
spark第2天
【十八掌徐培成】Spark第02天-01.伪集合操作-reduce-fold
【十八掌徐培成】Spark第02天-02.pairRDD操作-rdd持久化
【十八掌徐培成】Spark第02天-03.操纵key-value对-聚合-调整并发程度
【十八掌徐培成】Spark第02天-04.数据排序-PairRDD-data分区
【十八掌徐培成】Spark第02天-05.数据分区-分区器-PageRank
& e3 a; r7 }" e: y4 K【十八掌徐培成】Spark第02天-06.自定义分区-数据格式

spark第3天
1 z5 g( j4 ]% m8 C) e+ Z; |【十八掌徐培成】Spark第03天-01.fold方法-json处理
【十八掌徐培成】Spark第03天-02.seq文件-obj文件-lzo
5 N) Z0 F& V9 V: W/ W+ n+ S! B【十八掌徐培成】Spark第03天-03.压缩编解码-hive
/ k5 O: N6 Z& Z9 \9 [' K% }) F8 p. w【十八掌徐培成】Spark第03天-04.spark-hbase集成
【十八掌徐培成】Spark第03天-05.spark-累加器-广播变量
【十八掌徐培成】Spark第03天-06.spark-hbase访问-hive访问-运行时架构
+ s; \" o# F5 a4 _
* o) g3 k8 m2 S/ e" W" R  cspark第4天
: f3 \' E% _: a4 \) }【十八掌徐培成】Spark第04天-01.独立模式启动spark集群与部署
8 w8 b2 _- ]7 n. l1 F【十八掌徐培成】Spark第04天-02.maven编译spark应用
0 |* V' H4 q0 @【十八掌徐培成】Spark第04天-03.maven编译spark应用2
【十八掌徐培成】Spark第04天-04.spark集群应用程序
【十八掌徐培成】Spark第04天-05.spark集群应用程序部署模式cluster-client
【十八掌徐培成】Spark第04天-06.spark集群虚拟机磁盘扩展
5 V) @7 x* H8 k% c% @+ Z1 X【十八掌徐培成】Spark第04天-07.spark yarn集群
【十八掌徐培成】Spark第04天-08.spark SQL-hive

spark第5天
【十八掌徐培成】Spark第05天-01.简历指导
1 @# [" W' A4 W0 J【十八掌徐培成】Spark第05天-01.微博
【十八掌徐培成】Spark第05天-02.Spark-SQL
) p, Q$ O1 i; m  D+ A# _! v4 r0 x【十八掌徐培成】Spark第05天-03.Spark-SQL2
【十八掌徐培成】Spark第05天-04.Spark-Streaming

) N3 w: Q- @- f. I! @, ispark第6天
【十八掌徐培成】Spark第06天-01.Spark-Hive集成
【十八掌徐培成】Spark第06天-02.Spark-Streaming集成
【十八掌徐培成】Spark第06天-03.Spark-Streaming-kafka集成
【十八掌徐培成】Spark第06天-04.Spark-Streaming-kafka集成2
# ]% b& Y# W) A( Q8 O【十八掌徐培成】Spark第06天-05.Spark-Streaming-kafka集成3（maven打包）
【十八掌徐培成】Spark第06天-06.Spark-graphx计算
' r! t; t, z! L. A' P- ~. u0 ~【十八掌徐培成】Spark第06天-07.Spark-graphx计算2
) j4 a/ }. M6 _1 f$ q+ V) ^" r1 x
) Y, z' U' \/ y3 l% B15部分Mahout
  [; J; ^& q( j$ A  ^3 `( p1 IMahout第01天-001.机器学习-分类-聚类-推荐-mahout
& F) E6 O( Z+ q1 ~Mahout第01天-002.推荐过程分析-UML
* t; ?, Y6 q( O. J, U4 YMahout第01天-003.mahout-cluster
3 I8 i* S+ u9 H# D8 K$ w' HMahout第01天-004.mahout-分类
& R3 U) {- X$ ^; uMahout第01天-005.mahout-2

) d" H, ?- h( l+ i7 b" t# X第16部分
8 l+ A8 V: j7 W6 A* W9 K  _  lR语言教程-01.R基础
$ f* p+ O2 E; Y& g: [R语言教程-02.R列表-数据框
& l9 S) e" B% FR语言教程-03.xlsx-mysql
% e4 _9 a# \0 e% jR语言教程-04.R修改图形属性-颜色-字体-缩放-边界
- s# N" @- N6 ?R语言教程-05.Pie-barplot-dotchart
R语言教程-06.基本统计分析-自定义函数-常用函数
9 t& w% n  ?7 e8 {$ U+ AR语言教程-07.项目KPI统计
7 r: |6 b- K, C% y1 @
第17部分 ELK
; r: U1 E  N- }/ x  u! y# s0 wELK-00.介绍-ES
ELK-01.介绍-安装准备
ELK-02.Elasticsearch-安装
ELK-03.Kibana-安装-配置
ELK-04.安装配置Nginx
4 s7 B3 q8 N* j4 \0 W: O! z8 dELK-05.安装Logstash-ssl配置
ELK-06.配置Logstash-验证配置
ELK-07.加载Kibana的仪表盘
: P1 R# r+ C) c) o7 z# V, a& R) NELK-08.在ES中加载FileBeat索引模板
ELK-09.在Client主机上安装FileBeat软件包
. n$ ?" C' m0 M$ aELK-10.在Client主机上安装FileBeat软件2
' X, s7 P7 u  O/ k9 G3 Y% A
第18部分Docker
Docker-01.Docker简介
Docker-02.Docker安装
7 M& O- B0 \. r# z$ v+ JDocker-03.Docker镜像下载与使用
5 P/ E: {8 H- Q' K# {Docker-04.Docker构建本地镜像
Docker-05.Docker push镜像到docker hub并验证
) n( [8 B8 W# g7 f: V. U% m/ a* }Docker-06.Docker从docker hub pull镜像到本地
* d& U, l" D: k1 d* H* o- D- ]Docker-07.Docker 容器操作
Docker-08.Docker-容器启动-停止-端口映射-删除容器
Docker-09.Docker-commit-tag
" [) G# X! M0 C& S4 p, R5 o
第19部分CSDN电商项目
$ Q& {9 U/ B+ I# K0 P项目第1天
; ^+ ~9 H6 ?7 X' C, z5 f! c【十八掌徐培成】项目-01.描述和说明
+ B* E7 A  Y" {. K$ Q【十八掌徐培成】项目-02.项目初始化-类描述设计
【十八掌徐培成】项目-03.service-dao-test-配置
, a2 K2 i  n6 A3 H3 M* B1 z【十八掌徐培成】项目-04.webmvc-配置-集成
【十八掌徐培成】项目-05.用户crud-登录-数据展现

项目第2天
【十八掌徐培成】01-静态页处理-代理-反向代理-nginx安装
& u- y* q2 Z6 e3 A2 U8 _! G1 z) X【十八掌徐培成】02-nginx ubuntu安装-负载均衡-自定义脚本
【十八掌徐培成】03-tomcat服务器安装配置端口-自动部署-pom ant集成
) }& @6 j2 s4 b【十八掌徐培成】04-动静资源文件-日志配置-ab压力测试

( C& v/ J% N% a! ^1 j- t1 S项目第3天
【十八掌徐培成】项目第03天-01.sed命令-wc-crontab-日志滚动
' v9 d& G0 P, \) u8 ~【十八掌徐培成】项目第03天-02.配置ubuntu crontab实现日志滚动
+ a, O6 X& r7 |& Y( M【十八掌徐培成】项目第03天-03.配置flume的spooldir和kafka sink收集log
【十八掌徐培成】项目第03天-04.使用kafka消费者提取日志消息-解析日期信息
【十八掌徐培成】项目第03天-05.创建hive的分区表-清洗数据分析-分区表查询与存储
& V7 D6 a- m  \# c1 Q8 M0 p- k0 h
, z- o# {# l* k. a% n2 C& ^* n4 m项目第4天
/ c; x8 a6 p! A) C3 Q【十八掌徐培成】项目04-01.nginx服务日志滚动-cpu亲和力设置-flume日志头添加
$ s+ p2 R# Z5 t' h【十八掌徐培成】项目04-02.kafka消费者守护线程关闭输出流-输出流池化
5 a! W3 N3 I$ K8 n6 n【十八掌徐培成】项目04-03.主题test4-消费者-测试-Timer
【十八掌徐培成】项目04-04.hive分区表周期性创建-log格式处理

项目第5天
【十八掌徐培成】项目视频1
; r9 p8 O$ q& D' ^  e【十八掌徐培成】项目视频2
1 H7 k' H2 Q0 E! ]2 @: S