从无到有搭建中小型互联网公司后台服务架构与运维架构

冰点也疯狂

本课程主要是针对如何从无到有搭建中小型互联网公司后台服务架构和运维架构的课程，课程所涉及的内容均是当前应用最广泛的技术和工具。本课程所讲解的技术体系已经在多个中小型互联网公司中实战运行使用，目前运行已经非常稳定，数据量也是在不断持续增加。并且，这个技术体系也正在被其他很多互联网公司应用，希望通过此课程，让大家能快速熟练掌握各个技术，并且能实际应用到项目中。课程将会通过实际案例讲解，并且会提供完整的视频案例源码供学员学习使用，同时有需要的企业或学员可以直接拿本套教学案例代码来使用或者二次开发。

本课程设计的技术及工具如下：
后台服务架构：dubbo、spring-boot、spring mvc、spring-security-oauth2、spring-ldap、spring-data-jpa等
项目管理工具：maven、nexus
4 s- {2 v0 o4 r  @+ c版本管理工具：gitlab、git
数据库：mysql、mongodb
运维监控工具：Open-Falcon
日志管理工具：ELK
持续集成工具：Jenkins
协作工具：confluence
缓存：redis
消息中间件：kafka、rocketmq
web服务器：tomcat、nginx
* v: a$ f' C) Z7 ]) X' k! @容器引擎：docker
( z: j5 S4 u% ~' F; N
" F# `/ b( W$ G( S9 ]8 c7 L+ V本课程讲解的流程：
7 A0 o1 T! B5 t% W1 g) W0 v) A1、 首先讲解大家都已经熟悉的dubbo技术体系，结合dubbo搭建出一个完整的基于restful的技术框架
* A6 |3 @, ^, [5 k2、 结合dubbo的restful框架，加上基于oauth2的token验证，并实现统一用户中心的设计
5 C' p9 x, x5 |% {9 F8 J3、 重点讲解spring boot，然后结合之前的dubbo技术框架进行改造，实现spring boot和dubbo的相融合
4、 作为一个技术架构肯定涉及java性能调优，所以之后会根据图示讲解jvm里的一系列东西，帮助大家充分了解jvm
$ Q4 r: M5 |+ O; Y) z- q  d* `5、 讲解消息中间件redis，以及高可用集群搭建，以及里面的数据类型，分布式以及一致性问题的讲解
6、 git、elk、jenkins、confluence、kafak、rocketmq工具安装讲解
, @/ V( T- e; y  T; W$ q1 a7、 讲解运维监控工具Open-Falcon，如何保证及时通知运维及开发人员服务器的问题，保证服务器以及服务正常运行
8、 讲解docker系列课程，结合docker进行部署

架构讲解设计的目标:
1、 低成本:任何公司存在的价值都是为了获取商业利益。在可能的情况下，希望一切都是低成本的。
3 E# C& F+ M# D( T# n7 A2、 高性能:网站性能是客观的指标，可以具体体现到响应时间、吞吐量等技术指标。系统的响应延迟，指系统完成某一功能需要使用的时间；系统的吞吐量，指系统在某一时间可以处理的数据总量，通常可以用系统每秒处理的总的数据量来衡量；系统的并发能力，指系统可以同时完成某一功能的能力，通常也用 QPS(query per second)来衡量。
3、 高可用：系统的可用性(availability)指系统在面对各种异常时可以正确提供服务的能力。系统的可用性可 以用系统停服务的时间与正常服务的时间的比例来衡量，也可以用某功能的失败次数与成功次数的比例来衡量。
4 j) @7 t/ X4 O6 W  I2 s% T2 l4、 易伸缩：注重线性扩展，是否可以容易通过加入机器来处理不断上升的用户访问压力。系统的伸缩性(scalability)指分布式系统通过扩展集群机器规模提高系统性能（吞吐、延迟、并发）、存储容量、计算能力的特性。
5、 高安全：现在商业环境中，经常出现被网站被拖库，用户账户被盗等现象。网站的安全性不言而喻。

课程目录：
) w& H5 ^; l$ r" n第1讲 课程内容介绍  11:08
9 \6 G- \) Y, |* Y9 [2 M  T7 w/ p第2讲 服务器统一规划配置安装  07:18
第3讲 后台服务工具maven：maven安装配置  05:10
- z* W, j; X2 g8 B! [; ?4 L第4讲 后台服务工具maven：maven本地资源库设置  09:45
4 ?& c- q4 x# P% U0 n* F( q7 X, i第5讲 后台服务工具maven：使用Nexus配置Maven私有仓库  16:29
+ n' u5 O) }" B- y% `9 @# A第6讲 后台服务工具Eclipse: Eclipse导入jdk1.8 03:27
第7讲 后台服务数据库工具mysql：mysql安装 05:21
1 _8 B5 V3 o8 k7 Y2 ?4 W& `第8讲 后台服务nosql数据库mongodb：高可用讲解以及安装 17:04
第9讲 后台服务代码架构：早期基于spring mvc后台服务搭建及演示 19:15
第10讲 后台服务代码架构：基于spring的mybatis代码结构配置使用 09:39
' C5 R( J3 R# z- A7 m: r第11讲 后台服务代码架构：利用mybatis生成器自动生成实体类、DAO接口和Mapping映射文件 16:40
& ?0 K5 `# _* @第12讲 后台服务代码架构：基于spring的后台代码结构设计及搭建 17:08
第13讲 后台服务代码架构：log4j详细配置及解释 13:28
第14讲 后台服务代码架构：duboo集群部署安装 08:41
+ Y8 x  ^" x% r! k- H' z( g第15讲 后台服务代码架构：dubbo控制台及监控台安装部署 11:41
第16讲 后台服务代码架构：dubbo+spring XML配置及属性设置 23:33
+ v7 F  S# z( |第17讲 后台服务代码架构：dubbo集成restful协议实现post、delete、get请求 28:39
, K3 j$ Y" M- i- V) Y第18讲 后台服务代码架构：dubbo启动时检查、集群容错、负载均衡、线程模型的设置以及选择 10:49
! H1 Z" z2 o1 c& u3 B! c第19讲 后台服务代码架构：duboo直连、只订阅、只注册设置 04:13
% j  g5 @( I. ^' A# C第20讲 后台服务代码架构：dubbo协议讲解以及选择 03:28
# q8 y5 s: `  J* g7 C1 o第21讲 后台服务代码架构：实现开发、测试、生产环境区分运行配置 06:05
3 t0 M) K  H* X, a' @第22讲 后台服务工具postman：postman介绍以及使用 04:06
3 f* j) Q, e: G5 M* [第23讲 后台服务代码架构：基于restful实现接口json数据解析 09:14
第24讲 后台服务代码架构：基于assembly结合maven插件实现代码压缩打包 10:22
第25讲 后台服务工具ldap：统一用户中心ldap工具使用以及安装 10:09
第26讲 后台服务代码架构：基于spring-ladp的统一用户中心结构设计以及代码结构设计 15:14
' E& p# q. I/ U3 Y' }6 ~6 D第27讲 后台服务代码架构：基于spring-data的mongodb连接以及配置 23:16
第28讲 后台服务代码架构：基于spring-security-oauth2的mysql数据表设计 02:40
7 H% r) b$ W% `# g" K- k第29讲 后台服务代码架构：基于spring-security-oauth2实现接口token访问验证 18:26
6 ~# [  h& K) B+ O9 E- l4 d第30讲 后代服务代码架构：spring-boot简单介绍以及基于restful的web服务快速搭建 21:08
第31讲 后代服务代码架构：spring-boot结合Swagger2构建RESTful API测试体系 14:32
7 V+ }. u7 c1 V' |, x: t' o第32讲 后代服务代码架构：结合spring-boot实现多环境配置以及解决读取配置文件中文乱码问题 14:42
第33讲 后代服务代码架构：spring-boot实现统一异常处理 16:56
第34讲 后代服务代码架构：Spring Boot中使用JdbcTemplate访问数据库 19:55
; [% e1 r) f% I第35讲 后代服务代码架构：Spring Boot中使用Spring-data-jpa访问数据库 27:21
第36讲 后代服务代码架构：Spring Boot中多数据源配置1 13:51
第37讲 后代服务代码架构：Spring Boot中多数据源配置2 19:13
% b6 Y* g9 {: A$ _& `第38讲 后代服务代码架构：Spring Boot中使用Spring-data-jpa访问数据库实现分页 15:45
/ A: X5 W! G$ e9 b& y4 Z5 O7 r第39讲 后代服务代码架构：项目应用中spring-boot整合mybatis 12:30
3 r& f% [' g. V第40讲 后代服务代码架构：项目应用中spring-boot-MyBatis注解配置详解增删改查 14:30
" H  M2 M* C, X4 ^4 u9 P. o! I$ J0 |第41讲 后代服务代码架构：项目应用中spring-boot整合Redis 18:34
# E( z) `& u* a6 W) ]. A  t第42讲 后代服务代码架构：项目应用中spring-boot整合mongodb 26:09
第43讲 后代服务代码架构：spring-boot使用事务管理 11:54
第44讲 后代服务代码架构：spring-boot创建定时任务 07:56
6 Q2 ?3 d* V/ S5 v第45讲 后代服务代码架构：spring-boot实现异步调用 12:03
第46讲 后代服务代码架构：spring-boot日志配置详解 22:13
第47讲 后代服务代码架构：spring-boot中将日志记录到mongodb中 06:01
# G% v. ]; U0 N# o4 y第48讲 后代服务代码架构：spring-boot整合spring-security 14:46
) G! G. n) z( V7 \% p第49讲 后代服务代码架构：spring-boot使用EhCache做集中式缓存 26:48
第50讲 后代服务代码架构：spring-boot使用Redis做集中式缓存 09:35
第51讲 后代服务代码架构：spring-boot实现邮件发送 17:53
* z  `0 N4 l( e& b1 u6 a. }第52讲 后台服务于工具消息中间件：rabbitmq安装 05:09
第53讲 后代服务代码架构：spring-boot使用消息中间件 09:53
5 I! h2 z: D: P1 o第54讲 后代服务代码架构：spring-boot+dubbo生产者与消费者配置 10:15
: f; B/ |- ^: R- }第55讲 java虚拟机介绍：一张图详解虚拟机类加载机制 15:44
+ p+ o: }2 w- v) X( W2 ~9 t5 r+ G第56讲 java虚拟机介绍：一张图详解jvm内存运行机制以及参数配置 11:27
; ?& h6 _3 C4 _/ X第57讲 java虚拟机介绍：一张图详解GC 15:08
第58讲 java虚拟机介绍：java程序启动参数设置优化 16:45
5 ^( C' O& r% o, j0 o第59讲 基于ThreadPoolTaskExecutor类的线程池讲解以及代码中配置使用详解 09:00
第60讲 使用线程池与CountDownLatch多线程提升系统性能 05:05
8 x* `" q, L  x1 y0 F* M4 M第61讲 后台服务工具redis：高可用redis集群搭建及原理详解 11:27
第62讲 后台服务工具redis：AOF与RDB持久化存储以及备份和恢复 11:01
8 {. W. p4 W1 P; U( i; b第63讲 后台服务工具redis：详解redis操作命令 11:53
3 i! V" E; n$ [) S  G% Y7 c第64讲 后台服务工具redis：redis之管道模式 08:08
+ A. H: E" p6 J( D. V& }7 D第65讲 后台服务代码架构：基于jedis连接redis集群 10:39
第66讲 后台服务代码架构：项目实际应用中redis缓存与数据库一致性问题解决 08:26
第67讲 后台服务代码架构：项目实际应用中redis实现分布式操作锁 09:01
" g5 M) m4 L) r8 I% N& {: z1 O3 p第68讲 后台服务工具gitlab：版本管理工具gitlab安装以及配置介绍 11:53
第69讲 后台服务工具git：git安装及本地仓库对应gitlab仓库 09:23
7 [7 p9 k# R  S, j. G第70讲 后台服务工具git：git介绍以及各种命令操作演示 26:27
第71讲 后台服务工具tomcat：安装以及使用，同服务器多tomcat端口配置 02:02
: T' N0 V2 l' c1 I' L第72讲 后台服务工具nginx：安装以及反向代理设置及参数设置优化 16:04
第73讲 运维架构持续集成jenkins：安装以及相关插件安装 10:16
第74讲 运维架构持续集成jenkins：权限控制管理 11:11
6 ~* p7 j7 k. ]) z/ ^  }第75讲 运维架构持续集成jenkins：代码持续集成部署 06:03
第76讲 后台服务于工具消息中间件kafka：架构介绍 12:28
第77讲 后台服务于工具消息中间件kafka：高可用集群安装 14:29
第78讲 后台服务于工具消息中间件kafka：发送与接收代码 31:28
第79讲 运维架构日志管理ELK：ElasticSearch 、 Logstash 和 Kibana 介绍，结合redis安装配置及展示
: p4 ~1 S' f2 d3 H6 f5 N* R第80讲 运维架构服务监控Open-Falcon：介绍以及安装
0 G+ _, x5 s- J/ p% q  U0 {第81讲 运维架构服务监控Open-Falcon：环境准备
第82讲 运维架构服务监控Open-Falcon：单机安装和分布式安装说明
第83讲 运维架构服务监控Open-Falcon：后端服务安装并启动
第84讲 运维架构服务监控Open-Falcon：前端安装 07:45
& d0 w6 x$ F# x6 k7 y第85讲 运维架构服务监控Open-Falcon：安装客户端数据采集插件-Agent
第86讲 运维架构服务监控Open-Falcon：安装数据转发服务-Transfer
第87讲 运维架构服务监控Open-Falcon：安装绘图数据的组件- Graph
$ M! I& I4 w' B. }- ?6 W第88讲 运维架构服务监控Open-Falcon：安装查询组件-API
第89讲 运维架构服务监控Open-Falcon：心跳服务- HBS
+ @0 r% c) N5 B5 G3 Z4 G4 T1 J第90讲 运维架构服务监控Open-Falcon：告警判断-Judge
9 g# {  x, I% K3 w第91讲 运维架构服务监控Open-Falcon：告警处理-Alarm 04:03
' B9 _- l1 V* }& Q& I3 x+ k( ~第92讲 运维架构服务监控Open-Falcon：邮件、短信、电话发送接口 11:26
4 C) z$ O# ~1 ^6 C* X7 m6 w& F第93讲 运维架构服务监控Open-Falcon：检测监控数据上报异常- Nodata 03:32
第94讲 运维架构服务监控Open-Falcon：集群聚合模块- Aggregator 04:24
5 k: j2 H3 M( ]- T, P1 u3 B第95讲 运维架构服务监控Open-Falcon：快速使用介绍 11:08
3 M* G7 b6 i9 A6 N- Z9 V第96讲 运维架构服务监控Open-Falcon：Nodata配置 04:13
5 [$ E. q* G- m2 h. J/ _; b第97讲 运维架构服务监控Open-Falcon：集群监控 03:52
第98讲 运维架构服务监控Open-Falcon：进程端口监控 06:55
第99讲 运维架构服务监控Open-Falcon：Mysql监控 08:07
+ p8 U/ S) q0 ^0 k  \5 D* y' O第100讲 运维架构服务监控Open-Falcon：Redis监控 04:19
第101讲 运维架构服务监控Open-Falcon：Mongodb监控 04:00
9 b* u, q9 V* L% D- B( P第102讲 运维架构服务监控Open-Falcon：Rabbitmq监控 02:13
第103讲 运维架构服务监控Open-Falcon：Nginx监控 03:34
第104讲 运维架构服务监控Open-Falcon：总结 01:40
6 _. J4 E9 l6 N* [第105讲 运维架构服务docker：docker简介 08:43
# P1 R: {* a) Z8 J第106讲 运维架构服务docker：docker安装 04:40
, J6 v3 Z9 t3 B$ E$ B; B8 E  ^1 }第107讲 运维架构服务docker：docker入门 22:55
/ H. {- B- _1 w5 x0 U- y第108讲 运维架构服务docker：docker镜像和仓库 23:35
3 ^; @2 f6 ]! n2 v: w