找回密码
 立即注册
查看: 1049|回复: 1

2017年8月大数据-基于Spark的机器学习-智能客户系统项目实战 视频教程【63课时】

[复制链接]
累计签到:85 天
连续签到:1 天
发表于 2019-4-29 19:42:46 | 显示全部楼层 |阅读模式
本帖最后由 冰点也疯狂 于 2020-2-26 17:13 编辑 5 x% p0 G) H+ z# x& \: Z
2 J- D0 g  _: B  Z0 W
课程大纲:4 N$ N- m' U: J5 z! d$ F6 s
第01节 项目介绍以及在本课程中能学到什么东西、如何应用到实际项目中 - c. E4 N" \4 [: h1 ~
第02节 scala和IDE的安装以及使用以及maven插件的安装
* `# l( Z! z! F4 G第03节 Centos环境准备(java环境、hosts配置、防火墙关闭) ( Q- E$ o, r* \: e) H
第04节 scala基础知识讲解-1 ' |% B: |: v# X3 f" O
第05节 scala基础知识讲解-函数和闭包-2
( Z' ~! l+ B5 P0 k' E; J4 ~第06节 scala基础知识讲解-数组和集合-3.1 , K' A7 r& u5 _* D
第07节 scala基础知识讲解-数组和集合-3.2
1 R- l5 ~8 c1 E( A. V: W/ c第08节 scala基础知识讲解-类和对象-47 N+ b7 h7 Q( C* D5 M. k. {; v! k
第09节 scala基础知识讲解-特征和模式匹配-5
( V5 l  {0 w- Y0 ~& c/ _第10节 scala基础知识讲解-正则表达式和异常处理-6/ M' g% R( D) |8 j) c# P' C
第11节 scala基础知识讲解-知识回顾( A4 e$ |$ Z- G' Q; W  f- I6 `  y
第12节 nosql数据库mongodb安装8 W- |; V5 Z" B$ Q: j
第13节 spring data for mongodb-简单连接mongodb! P$ ?( K- k6 l! i
第14节 spring data for mongodb-spring配置+CRUD操作(不实现repo,默认操作)' N" |- ]( ~9 J9 E- @, [
第15节 spring data for mongodb-实现repo接口+mongoTemplate+CRUD操作
$ L% x) K! h0 b- m5 `* d第16节 spring data for mongodb-分页查询
/ f/ P$ ^$ C/ G( y, U* o+ Y  B+ h9 n第17节 zookeeper集群安装) n; S1 }/ q0 U/ Q8 J8 e1 e3 j
第18节 zookeeper基本介绍-1
. s/ B# I# s! o& v+ |5 f第19节 zookeeper工作原理-选举流程(basic paxos算法)-25 x5 [8 J( E8 R% r
第20节 zookeeper工作原理-选举流程(fast paxos算法)-3
: Y5 o" a% W, F# K/ U第21节 kafka-背景及架构介绍
. j# F9 O# g# p% w( ^8 J4 n第22节 kafka集群安装以及测试7 [' `9 h' ?: H6 W* g' e2 D
第23节 kafka数据发送与接收实现-java" G( J2 S5 Z+ X( I6 M0 C: m( t
第24节 hdfs单机安装部署5 E4 B: t3 v$ g5 m2 k% r3 d
第25节 连接hdfs查询存储-java
) {7 R: U1 a' C  ?0 L6 R: a8 e第26节 机器学习基本线性代数介绍
/ P+ k+ j2 E6 H/ B第27节 IKAnalyzer中文分词工具介绍
! I* Z7 Y( C) K# [# @第28节 IKAnalyzer中文分词工具结合java应用2 o) [$ i. D- J/ {
第29节 Spark以及生态圈介绍
% @3 K3 K! y. h第30节 Spark运行架构介绍及原理之job,stage,task
7 R8 r3 X( o: @+ C! x  n2 D第31节 Spark编程模型RDD设计以及运行原理
9 N+ R) c# q6 o3 e第32节 纯手写第一个Spark应用程序:WordCount
9 _! ^  q& S7 u; X) R  @' A第33节 RDD常用函数介绍- l8 j( m! v8 _: V
第34节 Spark Sql介绍、DataFrame创建以及使用、RDD DataFrame DataSet相互转化# Q/ E+ c- u. L" |8 ]" s
第35节 Spark Streaming介绍
6 l: L- E) J0 S第36节 Spark Streaming+Kafka集成操作
5 [4 O* {' V' d% J# O( r0 r, z5 L第37节 avro结合maven使用,实现序列化和反序列化
/ I& k3 q. V" f) z% q+ J' V第38节 Spark ML(机器学习)介绍(监督学习、半监督学习、无监督学习) % J  H" }  G9 N
第39节 特征抽取:TF-IDF原理介绍
2 G0 L; p7 E* @- N第40节 特征提取:TF-IDF代码实现计算 9 w4 s8 ~0 y4 M9 b; n
第41节 聚类算法:KMEANS原理介绍, X6 P6 i/ ~3 _$ e3 {3 n4 S
第42节 聚类算法:KMEANS代码实现计算+ s; }: S( Y. D
第43节 其它Spark ML算法简单介绍# V5 z9 e6 ~; p
第44节 Spark连接Mongodb代码实现& R; v  W: i* J1 U, x& W
第45节 Mesos总体架构介绍# e. s& ^3 V) C; A$ @" @
第46节 Mesos安装部署
* M8 G7 K2 v& [/ v第47节 Spark on Mesos安装部署
8 h; [7 s, Z, N2 a0 H第48节 系统整体架构再次介绍+技术串联介绍(将学习的技术全部整合到项目中)
/ J1 c9 F2 d1 R1 I0 z0 _第49节 项目代码:父类工程,管理各个jar的版本
' ]$ P7 @4 i- m7 b7 q1 B3 C第50节 项目代码:avro序列化jar,用于客户端和机器学学习实现序列化和反序列化6 g9 \3 q6 H/ V& \8 c2 w' M$ L
第51节 项目代码:kafka发送数据jar,给app调用并实现切词并发送数据到kafka: w5 R: W3 V  d: I& n
第52节 项目代码:工具类jar,实现操作hdfs、切词以及操作mongodb
. F  {6 K' q+ i' }9 q$ U' L  S第53节 项目代码:操作类jar,调用工具类具体进行切词以及数据清洗并且存储到Hdfs7 c# i$ {7 @' ?. I! C+ x
第54节 项目代码:机器学习集合jar,主要用来存放record
- n8 N. o5 R- H- n第55节 项目代码:机器学习算法jar,主要进行tf-idf以及kmeans计算,主要实现企业上下游、供求上下游模型计算
* @1 E& F: v: J第56节 项目代码:流式计算jar,主要是接受客户端发送到kafka的数据加载模型进行计算
6 R4 I/ w) S% g/ ?  F第57节 项目代码:测试模拟jar,主要模拟实现用户加载avro序列化jar写数据到kafka! n  A  F) S0 B, \7 W
第58节 Spark on Mesos部署提交参数介绍3 i' I, {- U0 h/ q
第59节 Spark代码提交到Mesos运行(Spark-submit)
: |( O7 v5 Z6 ^6 Q) v* H" L第60节 项目整体流程跑通,结果展示! j; s( A3 j& ]0 n9 d& V
第61节 Spark调优介绍  T& \) V* N+ i6 g! ?7 c; }& X
第62节 基于Spark的机器学习项目-智能客户系统实战课程总结  L- S6 ]4 W( \
第63节 实际工作及面试注意问题
游客,如果您要查看本帖隐藏内容请回复

. E1 W* X4 u3 N2 p1 v' f# Q- G4 C7 a' n$ ^. s

( j/ `! P0 [; G

本帖子中包含更多资源

您需要 登录 才可以下载或查看,没有账号?立即注册

×
您需要登录后才可以回帖 登录 | 立即注册

本版积分规则

关闭

站长推荐上一条 /1 下一条

点击这里给我发消息

QQ|小黑屋|Archiver|手机版|一路学IT论坛 专业视频教程网站

GMT+8, 2026-10-28 12:40

Powered by Discuz! X3.5

© 2001-2025 Discuz! Team.

快速回复 返回顶部 返回列表