学习前提
这个阶段该如何学习
回顾之前的知识~
- JavaSE
- 数据库
- 前端
- Servlet
- Http
- Mybatis
- Spring5
- SpringMVC
- SpringBoot
- Dubbo、Zookeeper、分布式集成
- Mavenn、Git
- Ajax、Json
- …/
串一下自己需要会的东西
- JavaSE
- 数据库
- 前端
- Servlet
- Http
- Mybatis
- Spring5
- SpringMVC
- SpringBoot
- Dubbo、Zookeeper、分布式集成
- Mavenn、Git
- Ajax、Json
这个阶段该如何学习
三层架构:MVC
框架:
spring:IOC AOP
SpringBoot(对进公司有很大的帮助),新一代的JavaEE标准,自动装配
模块化代替all in one模式
模块化的开发对比all in one模式来说,代码没变化~
微服务架构4个核心问题?
1. 服务很多,客户端该怎么访问?
2. 这么多服务?服务之间如何通信?
3. 这多服务? 如何治理?
4. 服务挂了怎么办?
解决方案:
Spring Cloud(它并不是一个技术,是一个生态!)
常见的方案
1.spring cloud NetFlix 一站解决方案!
API网关,zuul组件
Feign --httpClinet --Http通信方式,同步,阻塞
服务注册发现:Eureka
熔断机制:Hystrix
。。。
官方已经停止维护...
2.Apache Dubbo Zookeeper 半自动,需要整合别人的!
API网关:没有,找第三方组件,或者自己实现
Dubbo:Dubbo是一款高性能、轻量级的开源Java RPC框架,它提供了三大核心能力:面向接口的远程方法调用, 智能容错和负载均衡,以及服务自动注册和发现
Zookeeper:服务的注册与发现
没有熔断机制:借助Hystrix
Dubbo这个方案并不完善~
3.Spring Cloud Alibaba 一站式解决方案!更简单
新概念:服务网格~Server Mesh
istio
万变不离其宗
1.API
2.HTTP,RPC
3.组成和发现
4.熔断机制
归期本质:网络不可靠!
常见面试题
- 什么是微服务
- 微服务之间是如何独立通信的?
- SpringCloud和Dubbo有什么区别
- SpringBoot和SpringCLoud,请谈谈对他们的理解
- SpringBoot和SpringCLoud,请谈谈对他们的理解
- 什么是服务熔断?什么是服务降级?
- 微服务的优缺点分别是方面?说一下你在项目开发中遇到的坑
- 你所知道的微服务技术有哪些?请列举一二
- Eureka和Zookeeper都可以提供服务注册和发现的功能,请说说两个的区别?
微服务概述
什么是微服务
理论理解
微服务(Microservice Architecture) 是近几年流行的一种架构思想,关于它的概念很难一言以蔽之
究竟什么是微服务呢?我们在此引用ThoughtWorks 公司的首席科学家 Martin Fowler 于2014年提出的一段话:
原文:https://martinfowler.com/articles/microservices.html
汉化:https://www.cnblogs.com/liuning8023/p/4493156.html
- 就目前而言,对于微服务,业界并没有一个统一的,标准的定义。
- 但通常而言,微服务架构是一种架构模式,或者说是一种架构风格,它提倡将单一的应用程序划分成一组小的服务,每个服务运行在其独立的自己的进程内,服务之间互相协调,互相配置,为用户提供最终价值,服务之间采用轻量级的通信机制(HTTP)互相沟通,每个服务都围绕着具体的业务进行构建,并且能狗被独立的部署到生产环境中,另外,应尽量避免统一的,集中式的服务管理机制,对具体的一个服务而言,应该根据业务上下文,选择合适的语言,工具(Maven)对其进行构建,可以有一个非常轻量级的集中式管理来协调这些服务,可以使用不同的语言来编写服务,也可以使用不同的数据存储。
再来从技术维度角度理解下
微服务化的核心就是将传统的一站式应用,根据业务拆分成一个一个的服务,彻底地去耦合,每一个微服务提供单个业务功能的服务,一个服务做一件事情,从技术角度看就是一种小而独立的处理过程,类似进程的概念,能够自行单独启动或销毁,拥有自己独立的数据库。
微服务与微服务架构
微服务
强调的是服务的大小,它关注的是某一个点,是具体解决某一个问题/提供落地对应服务的一个服务应用,狭义的看,可以看作是IDEA中的一个个微服务工程,或者Moudel。IDEA 工具里面使用Maven开发的一个个独立的小Moudel,它具体是使用SpringBoot开发的一个小模块,专业的事情交给专业的模块来做,一个模块就做着一件事情。强调的是一个个的个体,每个个体完成一个具体的任务或者功能。
微服务架构
一种新的架构形式,Martin Fowler 于2014年提出。
微服务架构是一种架构模式,它体长将单一应用程序划分成一组小的服务,服务之间相互协调,互相配合,为用户提供最终价值。每个服务运行在其独立的进程中,服务与服务之间采用轻量级的通信机制(如HTTP)互相协作,每个服务都围绕着具体的业务进行构建,并且能够被独立的部署到生产环境中,另外,应尽量避免统一的,集中式的服务管理机制,对具体的一个服务而言,应根据业务上下文,选择合适的语言、工具(如Maven)对其进行构建。
微服务优缺点
优点
- 单一职责原则;
- 每个服务足够内聚,足够小,代码容易理解,这样能聚焦一个指定的业务功能或业务需求;
- 开发简单,开发效率高,一个服务可能就是专一的只干一件事;
- 微服务能够被小团队单独开发,这个团队只需2-5个开发人员组成;
- 微服务是松耦合的,是有功能意义的服务,无论是在开发阶段或部署阶段都是独立的;
- 微服务能使用不同的语言开发;
- 易于和第三方集成,微服务允许容易且灵活的方式集成自动部署,通过持续集成工具,如jenkins,Hudson,bamboo;
- 微服务易于被一个开发人员理解,修改和维护,这样小团队能够更关注自己的工作成果,无需通过合作才能体现价值;
- 微服务允许利用和融合最新技术;
- 微服务只是业务逻辑的代码,不会和HTML,CSS,或其他的界面混合;
- 每个微服务都有自己的存储能力,可以有自己的数据库,也可以有统一的数据库;
缺点
- 开发人员要处理分布式系统的复杂性;
- 多服务运维难度,随着服务的增加,运维的压力也在增大;
- 系统部署依赖问题;
- 服务间通信成本问题;
- 数据一致性问题;
- 系统集成测试问题;
- 性能和监控问题;
微服务技术栈有那些?
微服务技术条目 | 落地技术 |
---|---|
服务开发 | SpringBoot、Spring、SpringMVC等 |
服务配置与管理 | Netfix公司的Archaius、阿里的Diamond等 |
服务注册与发现 | Eureka、Consul、Zookeeper等 |
服务调用 | Rest、PRC、gRPC |
服务熔断器 | Hystrix、Envoy等 |
负载均衡 | Ribbon、Nginx等 |
服务接口调用(客户端调用服务的简化工具) | Fegin等 |
消息队列 | Kafka、RabbitMQ、ActiveMQ等 |
服务配置中心管理 | SpringCloudConfig、Chef等 |
服务路由(API网关) | Zuul等 |
服务监控 | Zabbix、Nagios、Metrics、Specatator等 |
全链路追踪 | Zipkin、Brave、Dapper等 |
数据流操作开发包 | SpringCloud Stream(封装与Redis,Rabbit,Kafka等发送接收消息) |
时间消息总栈 | SpringCloud Bus |
服务部署 | Docker、OpenStack、Kubernetes等 |
为什么选择SpringCloud作为微服务架构
选型依据
- 整体解决方案和框架成熟度
- 社区热度
- 可维护性
- 学习曲线
当前各大IT公司用的微服务架构有那些?
-
阿里:dubbo+HFS
-
京东:JFS
-
新浪:Motan
-
当当网:DubboX
…
各微服务框架对比
Spring Cloud入门概述
SpringCloud是什么?
Spring官网:https://spring.io/
SpringCloud,基于SpringBoot提供了-套微服务解决方案,包括服务注册与发现,配置中心,全链路监控,服务网关,负载均衡,熔断器等组件,除了基于NetFlix的开源组件做高度抽象封装之外,还有一些选型中立的开源组件。
SpringCloud利用SpringBoot的开发便利性,巧妙地简化了分布式系统基础设施的开发,SpringCloud为开发人员提供了快速构建分布式系统的一些工具,包括配置管理,服务发现,断路器,路由,微代理,事件总线,全局锁,决策竞选,分布式会话等等,他们都可以用SpringBoot的开发风格做到一键启动和部署。
SpringBoot并没有重复造轮子,它只是将目前各家公司开发的比较成熟,经得起实际考研的服务框架组合起来,通过SpringBoot风格进行再封装,屏蔽掉了复杂的配置和实现原理,最终给开发者留出了一套简单易懂,易部署和易维护的分布式系统开发工具包
SpringCloud是分布式微服务架构下的一站式解决方案,是各个微服务架构落地技术的集合体,俗称微服务全家桶。
SpringCloud和SpringBoot的关系
- SpringBoot专注于开发单个个体微服务;
- SpringCloud是关注全局的微服务协调整理治理框架,它将SpringBoot开发的一个个单体微服务,整合并管理起来,为各个微服务之间提供:配置管理、服务发现、断路器、路由、为代理、事件总栈、全局锁、决策竞选、分布式会话等等集成服务;
- SpringBoot可以离开SpringCloud独立使用,开发项目,但SpringCloud离不开SpringBoot,属于依赖关系;
- SpringBoot专注于快速、方便的开发单个个体微服务,SpringCloud关注全局的服务治理框架;
Dubbo 和 SpringCloud技术选型
分布式+服务治理Dubbo
目前成熟的换了我架构:应用服务化拆分+消息中间件
Dubbo和SpringCloud对比
可以看下社区活跃度
https://github.com/spring-cloud
结果:
最大区别: SpringCloud抛弃 了Dubbo的RPC通信,采用的是基于HTTP的REST方式
严格来说,这两种方式各有优劣。虽然从一定程度上来说,SpringCloud牺牲了服务调用的性能,但也避免了上面提到的原生RPC带来的问题。而且REST相比RPC更为灵活,服务提供方和调用方的依赖只依靠-纸契约, 不存在代码级别的强依赖,这在强调快速演化的微服务环境下,显得更加合适。
品牌机与组装机的区别
很明显,Spring Cloud的功能比DUBBO更加强大,涵盖面更广,而且作为Spring的拳头项目,它也能够与SpringFramework. Spring Boot. Spring Data. Spring Batch等其他Spring项目完美融合,这些对于微服务而言是至关重要的。使用Dubb构建的微服务架构就像组装电脑,各环节我们的选择自由度很高,但是最终结果很有可能因为一条内存质量不行就点不亮了,总是让人不怎么放心,但是如果你是一名高手,那这些都不是问题;而SpringCloud就像品牌机,在Spring Source的整合下,做了大量的兼容性测试,保证了机器拥有更高的稳定性,但是如果要在使用非原装组件外的东西,就需要对其基础有足够的了解。
社区支持与更新力度
最为重要的是,DUBBO停止了5年左右的更新,虽然2017.7重启了。 对于技术发展的新需求,需要由开发者自行拓展升级(比如当当网弄出了DubboX) , 这对于很多想要采用微服务架构的中小软件组织,显然是不太合适的,中小公司没有这么强大的技术能力去修改Dubbo源码+周边的一-整套解决方案,并不是每一个公司都有阿里的大牛+真实的线上生产环境测试过。
总结
曾风靡国内的开源RPC服务框架Dubbo在重启维护后,令许多用户为之雀跃,但同时,也迎来了-一些质疑的声音。互联网技术发展迅速,Dubbo 是否还能跟上时代? Dubbo与Spring Cloud相比又有何优势和差异?是否会有相关举措保证Dubbo的后续更新频率?
人物
Dubbo重启维护开发的刘军,主要负责人之一
刘军,阿里巴巴中间件高级研发工程师,主导了Dubbo重启维护以后的几个发版计划,专注于高性能RPC框架和微服务相关领域。曾负责网考拉RPC框架的研发及指导在内部使用,参与了服务治理平台、分布式跟踪系统、分布式一致性框架等从无到有的设计与开发过程。
解决的问题域不一样:Dubbo 的定位是一款RPC框架,Spring Cloud的目标是微服务架构的一站式解决方案
SpringCloud能干什么
- Distributed/versioned configuration (分布式/版本控制配置)
- Service registration and discovery (服务注册与发现)
- Routing (路由)
- Service-to-service calls (服务到服务的调用)
- Load balancing (负载均衡配置)
- Circuit Breakers (断路器)
- Distributed messaging (分布式消息管理)
SpringCloud在哪里下载
官网:http://projects.spring.io/spring-cloud/
Spring cloud是一个由众多独立子项目组成的大型综合项目,每个子项目有不同的发行节奏,都维护着自己的发布版本号。spring Cloud通过一 一个资源清单BOM (Bi11 of Materials)来管理每个版本的子项目清单。为避免与子项月的发布号混淆,所以没有采用版本号的方式,而是通过命名的方式。
这些版本 名称的命名方式采用了伦敦地铁站的名称,同时根据字母表的顺序来对应版木时间顺序,比如:最早的Release版本: Ange1, 第二个Release版本: Brixton. 然后是Camden、Dalston. Edgware, 目前最新的是Finch1ey版本。
参考文档:
spring-cloud-netflix:https://springcloud.cc/spring-cloud-netflix.html
中文API文档: https://springcloud.cc/spring-cloud-dalston.html
SpringCloud中国社区: http://springcloud.cn/
SpringCloud中文网: https://springcloud.cc
SpringCloud Rest学习环境搭建
SpringCloud版本选择
注意版本依赖说明:https://docs.spring.io/spring-cloud/docs/
实际开发版本关系
使用最后的两个版本…
第一个SpringCloud项目
创建父项目
创建工程
创建一个名为SpringCloud-Study的普通的maven项目
作为父项目,不需要src文件夹
导入pom依赖
指定打包方式
我们熟悉的打包方式有jar包、war包、在这里我们使用的打包方式是pom
<!--打包方式 pom-->
<packaging>pom</packaging>
导入springcloud依赖
查询网站:https://mvnrepository.com/artifact/org.springframework.cloud/spring-cloud-dependencies
我们使用Greenwich.SR1版本
<!--dependencyManagement:maven的管理 需要使用直接调用即可-->
<dependencyManagement>
<dependencies>
<!--springcloud依赖-->
<dependency>
<groupId>org.springframework.cloud</groupId>
<artifactId>spring-cloud-dependencies</artifactId>
<version>Greenwich.SR1</version>
<type>pom</type>
<!--作用域,这是父项目,选择import(导入)即可-->
<scope>import</scope>
</dependency>
</dependencies>
</dependencyManagement>
导入springboot依赖
从springboot和springcloud的实际开发版本的关系中可以看出,Greenwich.SR1版本适应的springboot版本是2.1.4,此处导入此版本的springboot依赖
作为一个父项目,这里直接导入springboot的依赖即可,不导入springboot的各种parpent的版本
<!--SpringBoot依赖-->
<dependency>
<groupId>org.springframework.boot</groupId>
<artifactId>spring-boot-dependencies</artifactId>
<version>2.1.4.RELEASE</version>
<type>pom</type>
<scope>import</scope>
</dependency>
其他需要的依赖
数据库需要的依赖
<!--数据库-->
<dependency>
<groupId>mysql</groupId>
<artifactId>mysql-connector-java</artifactId>
<version>5.1.47</version>
</dependency>
<!--数据库数据源-->
<dependency>
<groupId>com.alibaba</groupId>
<artifactId>druid</artifactId>
<version>1.1.10</version>
</dependency>
<!--SpringBoot启动器-->
<dependency>
<groupId>org.mybatis.spring.boot</groupId>
<artifactId>mybatis-spring-boot-starter</artifactId>
<version>1.3.2</version>
</dependency>
日志依赖
<!--日志测试-->
<dependency>
<groupId>ch.qos.logback</groupId>
<artifactId>logback-core</artifactId>
<!--${logback-core.version}将版本提取出来,统一管理-->
<version>${logback-core.version}</version>
</dependency>
<!--Junit-->
<dependency>
<groupId>junit</groupId>
<artifactId>junit</artifactId>
<version>${junit.version}</version>
</dependency>
<!--Log4j-->
<dependency>
<groupId>log4j</groupId>
<artifactId>log4j</artifactId>
<version>${log4j.version}</version>
</dependency>
将依赖版本进行统一的管理
<!--maven依赖版本声明-->
<properties>
<project.build.sourceEncoding>UTF-8</project.build.sourceEncoding>
<maven.compiler.source>1.8</maven.compiler.source>
<maven.compiler.target>1.8</maven.compiler.target>
<junit.version>4.12</junit.version>
<lombok.version>1.16.18</lombok.version>
<log4j.version>1.2.17</log4j.version>
<logback-core.version>1.2.3</logback-core.version>
</properties>
lombok依赖
<!--Lombok-->
<dependency>
<groupId>org.projectlombok</groupId>
<artifactId>lombok</artifactId>
<version>${lombok.version}</version>
</dependency>
pom.xml所有内容
<?xml version="1.0" encoding="UTF-8"?>
<project xmlns="http://maven.apache.org/POM/4.0.0"
xmlns:xsi="http://www.w3.org/2001/XMLSchema-instance"
xsi:schemaLocation="http://maven.apache.org/POM/4.0.0 http://maven.apache.org/xsd/maven-4.0.0.xsd">
<modelVersion>4.0.0</modelVersion>
<groupId>com.jjh</groupId>
<artifactId>SpringCloud-Study</artifactId>
<version>1.0-SNAPSHOT</version>
<!--打包方式 pom-->
<packaging>pom</packaging>
<!--maven依赖版本声明-->
<properties>
<project.build.sourceEncoding>UTF-8</project.build.sourceEncoding>
<maven.compiler.source>1.8</maven.compiler.source>
<maven.compiler.target>1.8</maven.compiler.target>
<junit.version>4.12</junit.version>
<lombok.version>1.16.18</lombok.version>
<log4j.version>1.2.17</log4j.version>
<logback-core.version>1.2.3</logback-core.version>
</properties>
<!--dependencyManagement:maven的管理 需要使用直接调用即可-->
<dependencyManagement>
<dependencies>
<!--springcloud依赖-->
<dependency>
<groupId>org.springframework.cloud</groupId>
<artifactId>spring-cloud-dependencies</artifactId>
<version>Greenwich.SR1</version>
<type>pom</type>
<!--作用域,这是父项目,选择import(导入)即可-->
<scope>import</scope>
</dependency>
<!--SpringBoot依赖-->
<dependency>
<groupId>org.springframework.boot</groupId>
<artifactId>spring-boot-dependencies</artifactId>
<version>2.1.4.RELEASE</version>
<type>pom</type>
<scope>import</scope>
</dependency>
<!--数据库-->
<dependency>
<groupId>mysql</groupId>
<artifactId>mysql-connector-java</artifactId>
<version>5.1.47</version>
</dependency>
<!--数据库数据源-->
<dependency>
<groupId>com.alibaba</groupId>
<artifactId>druid</artifactId>
<version>1.1.10</version>
</dependency>
<!--SpringBoot启动器-->
<dependency>
<groupId>org.mybatis.spring.boot</groupId>
<artifactId>mybatis-spring-boot-starter</artifactId>
<version>1.3.2</version>
</dependency>
<!--日志测试-->
<dependency>
<groupId>ch.qos.logback</groupId>
<artifactId>logback-core</artifactId>
<!--${logback-core.version}将版本提取出来,统一管理-->
<version>${logback-core.version}</version>
</dependency>
<!--Junit-->
<dependency>
<groupId>junit</groupId>
<artifactId>junit</artifactId>
<version>${junit.version}</version>
</dependency>
<!--Log4j-->
<dependency>
<groupId>log4j</groupId>
<artifactId>log4j</artifactId>
<version>${log4j.version}</version>
</dependency>
<!--Lombok-->
<dependency>
<groupId>org.projectlombok</groupId>
<artifactId>lombok</artifactId>
<version>${lombok.version}</version>
</dependency>
</dependencies>
</dependencyManagement>
</project>
springcloud-api模块
创建模块
在父工程下创建一个名为springcloud-api的普通maven项目moudle
在moudle中引入lombok依赖,不要加版本号
<dependencies>
<!--Lombok-->
<dependency>
<groupId>org.projectlombok</groupId>
<artifactId>lombok</artifactId>
</dependency>
</dependencies>
可以发现lombok使用的版本就是父工程中指定的版本
准备数据库
创建数据库,名为DB01
创建表,名为dept
CREATE TABLE `db01`.`Untitled` (
`deptno` bigint NOT NULL AUTO_INCREMENT,
`dname` varchar(60) CHARACTER SET utf8 COLLATE utf8_general_ci NULL DEFAULT NULL,
`db_source` varchar(60) CHARACTER SET utf8 COLLATE utf8_general_ci NULL DEFAULT NULL,
PRIMARY KEY (`deptno`)
);
插入数据
INSERT INTO dept(dname,db_source) VALUES('开发部',DATABASE());
INSERT INTO dept(dname,db_source) VALUES('人事部',DATABASE());
INSERT INTO dept(dname,db_source) VALUES('财务部',DATABASE());
INSERT INTO dept(dname,db_source) VALUES('市场部',DATABASE());
INSERT INTO dept(dname,db_source) VALUES('运维部',DATABASE());
创建实体类
在com.jjh.springcloud.pojo包下创建实体类Dept
package com.jjh.springcloud.pojo;
import lombok.Data;
import lombok.NoArgsConstructor;
import lombok.experimental.Accessors;
import java.io.Serializable;
@Data
//添加无参构造
@NoArgsConstructor
//开启链式写法
@Accessors(chain = true)
//implements Serializable:实体类必须实现序列化
public class Dept implements Serializable {
//主键
private Long deptno;
//名称
private String dname;
//这个数据存在那个数据库的字段,微服务,一个服务对应一个数据库。同一个信息可能存在不同的数据库
private String db_source;
//构造器
public Dept(String dname) {
this.dname = dname;
}
/*
链式写法:
dept.setDeptNo(11).setDname('ssss').setDb_source('001');
*/
}
服务提供者模块
创建服务提供者模块
在父工程下创建一个名为springcloud-provider-dept-8001的普通maven项目moudle
添加依赖
<dependencies>
<!--我们需要拿到实体类,所以要配置api module-->
<dependency>
<groupId>com.jjh</groupId>
<artifactId>springcloud-api</artifactId>
<version>1.0-SNAPSHOT</version>
</dependency>
<!--junit-->
<dependency>
<groupId>junit</groupId>
<artifactId>junit</artifactId>
<scope>test</scope>
</dependency>
<dependency>
<groupId>mysql</groupId>
<artifactId>mysql-connector-java</artifactId>
</dependency>
<dependency>
<groupId>com.alibaba</groupId>
<artifactId>druid</artifactId>
</dependency>
<dependency>
<groupId>ch.qos.logback</groupId>
<artifactId>logback-core</artifactId>
</dependency>
<dependency>
<groupId>org.mybatis.spring.boot</groupId>
<artifactId>mybatis-spring-boot-starter</artifactId>
</dependency>
<!--test-->
<dependency>
<groupId>org.springframework.boot</groupId>
<artifactId>spring-boot-test</artifactId>
</dependency>
<dependency>
<groupId>org.springframework.boot</groupId>
<artifactId>spring-boot-starter-web</artifactId>
</dependency>
<!--jetty-->
<dependency>
<groupId>org.springframework.boot</groupId>
<artifactId>spring-boot-starter-jetty</artifactId>
</dependency>
<!--热部署工具-->
<dependency>
<groupId>org.springframework.boot</groupId>
<artifactId>spring-boot-devtools</artifactId>
</dependency>
</dependencies>
配置moudle
application.yml
# 端口号
server:
port: 8001
# mybatis配置
mybatis:
# 类型别名映射
type-aliases-package: com.jjh.springcloud.pojo
config-location: classpath:mybatis-config.xml
mapper-location: classpath:mybatis/mapper/*.xml
# spring配置
spring:
application:
name: springcloud-provider-dept
# 数据源的配置
datasource:
type: com.alibaba.druid.pool.DruidDataSource
driver-class-name: com.mysql.jdbc.Driver #数据库驱动
url: jdbc:mysql://localhost:3306/db01?useUnicode=true&characterEncoding=utf-8&servetTimeZone=Asia/Shanghai
username: root
password: 123456
mybatis-config.xml
<?xml version="1.0" encoding="UTF-8" ?>
<!DOCTYPE configuration
PUBLIC "-//mybatis.org//DTD Config 3.0//EN"
"http://mybatis.org/dtd/mybatis-3-config.dtd">
<!--核心配置文件-->
<configuration>
<settings>
<!--开启二级缓存-->
<setting name="cacheEnabled" value="true"/>
</settings>
</configuration>
编写业务代码
dao层
DeptDao
@Mapper
@Repository
public interface DeptDao {
public boolean addDept(Dept dept);
public Dept queryById(Long id);
public List<Dept> queryAll();
}
DeptMapper.xml
在application.yml配置文件中已经配置了Mapper文件的位置classpath:mybatis/mapper/*.xml,所以在resources文件夹下创建mybatis/mapper文件夹,所有的mapper文件都在这个目录下
<?xml version="1.0" encoding="UTF-8" ?>
<!DOCTYPE mapper
PUBLIC "-//mybatis.org//DTD Config 3.0//EN"
"http://mybatis.org/dtd/mybatis-3-mapper.dtd">
<!--核心配置文件-->
<mapper namespace="com.jjh.springcloud.dao.DeptDao">
<!--增加一个部门-->
<insert id="addDept" parameterType="Dept">
insert into dept (dname,db_source) values (#{dname},DATABASE())
</insert>
<!--根据id查询部门信息-->
<select id="queryById" resultType="Dept">
select * from dept where deptno = #{depono};
</select>
<!--查询所有的部门信息-->
<select id="queryAll" resultType="Dept">
select * from dept;
</select>
</mapper>
service层
DeptService
package com.jjh.springcloud.service;
public interface DeptService {
public boolean addDept(Dept dept);
public Dept queryById(Long id);
public List<Dept> queryAll();
}
DeptServiceImpl
@Service
public class DeptServiceImpl implements DeptService {
@Autowired
private DeptDao deptDao;
@Override
public boolean addDept(Dept dept) {
return deptDao.addDept(dept);
}
@Override
public Dept queryById(Long id) {
return deptDao.queryById(id);
}
@Override
public List<Dept> queryAll() {
return deptDao.queryAll();
}
}
controller层
DeptController
//提供Restful服务
@RestController
public class DeptController {
@Autowired
private DeptService deptService;
@PostMapping("/dept/add")
public boolean addDept(Dept dept){
return deptService.addDept(dept);
}
@GetMapping("/dept/get/{id}")
public Dept get(@PathVariable("id") Long id){
return deptService.queryById(id);
}
@GetMapping("/dept/list")
public List<Dept> queryAll() {
return deptService.queryAll();
}
}
启动类
DeptProvider_8001
//启动类
@SpringBootApplication
public class DeptProvider_8001 {
public static void main(String[] args) {
SpringApplication.run(DeptProvider_8001.class,args);
}
}
目录结构
启动测试
1、启动springcloud-provider-dept-8001模块
2、浏览器访问测试
http://localhost:8001/dept/list
http://localhost:8001/dept/get/1
服务消费者模块
创建服务消费者模块
在父工程下创建一个名为springcloud-consumer-dept-80的普通maven项目moudle
添加依赖
<!--实体类+web-->
<dependencies>
<!--我们自己创的实体类-->
<dependency>
<groupId>com.kuang</groupId>
<artifactId>springcloud-api</artifactId>
<version>1.0-SNAPSHOT</version>
</dependency>
<!--web服务依赖-->
<dependency>
<groupId>org.springframework.boot</groupId>
<artifactId>spring-boot-starter-web</artifactId>
</dependency>
<!--热部署工具-->
<dependency>
<groupId>org.springframework.boot</groupId>
<artifactId>spring-boot-devtools</artifactId>
</dependency>
</dependencies>
配置moudle
application.yml
# http 的默认端口
server:
port: 80
编写业务代码
配置类
再com.jjh.springcloud.config包下创建ConfigBean 配置类
@Configuration
public class ConfigBean { //@Configuration=spring的 application.xml
@Bean
public RestTemplate getRestTemplate(){
return new RestTemplate();
}
}
controller层
因为服务的消费者作用是调用其他的服务模块,所以只有controller层,不涉及业务层和dao层
再com.jjh.springcloud.controller包下创建DeptConsumerController类
@RestController
public class DeptConsumerController {
// 理解:消费者,不该有service层
// RestTemplate.. 里面有方法供我们调用即可,注册到spring中
//(String url,实体, Class<T> responseType)
//提供多种便捷访问远程http服务的方法,简单的Restful服务模板
@Autowired
private RestTemplate restTemplate;
//声明提供者的localhost路径
private static String url="http://localhost:8001";
//调用8001提供者的控制器=>根据id查询数据
@RequestMapping("/consumer/dept/get/{id}")
public Dept getDept(@PathVariable(name = "id") Long id){
return restTemplate.getForObject(url+"/dept/get/"+id,Dept.class);
}
//调用8001提供者的控制器=>添加方法
@RequestMapping("/consumer/dept/add")
public boolean addDept(Dept dept){
return restTemplate.postForObject(url+"/dept/add",dept,Boolean.class);
}
//调用8001提供者的控制器=>查询所有
@RequestMapping("/consumer/dept/list")
public List<Dept> queryAll(){
return restTemplate.getForObject(url+"/dept/list",List.class);
}
}
启动类
//消费者 运行方式80可省略 例:localhost/consumer/dept/list
@SpringBootApplication
public class DeptConsumer_80 {
public static void main(String[] args) {
SpringApplication.run(DeptConsumer_80.class,args);
}
}
目录结构
启动测试
启动服务提供者,服务消费者。
浏览器访问测试
http://localhost/consumer/dept/get/1
http://localhost/consumer/dept/list
http://localhost/consumer/dept/add?dname='随便部门'
查看数据库,看数据添加成功,搞定,nice
Eureka服务注册中心
什么是Eureka
Netflix在设计Eureka时,遵循的就是AP原则
Eureka是Netflix的一个子模块,也是核心模块之-。 Eureka是一个基于REST的服务,用于定位服务,以实现云端中间层服务发现和故障转移,服务注册与发现对于微服务来说是非常重要的,有了服务发现与注册,只需要使用服务的标识符,就可以访问到服务,而不需要修改服务调用的配置文件了,功能类似于Dubbo的注册中心,比如Zookeeper
原理讲解
Eureka基本的架构
- Springcloud 封装了Netflix公司开发的Eureka模块来实现服务注册与发现 (对比Zookeeper).
- Eureka采用了C-S的架构设计,EurekaServer作为服务注册功能的服务器,他是服务注册中心.
- 而系统中的其他微服务,使用Eureka的客户端连接到EurekaServer并维持心跳连接。这样系统的维护人员就可以通过EurekaServer来监控系统中各个微服务是否正常运行,Springcloud 的一些其他模块 (比如Zuul) 就可以通过EurekaServer来发现系统中的其他微服务,并执行相关的逻辑.
- Eureka 包含两个组件:Eureka Server 和 Eureka Client.
- Eureka Server 提供服务注册,各个节点启动后,回在EurekaServer中进行注册,这样Eureka Server中的服务注册表中将会储存所有课用服务节点的信息,服务节点的信息可以在界面中直观的看到.
- Eureka Client 是一个Java客户端,用于简化EurekaServer的交互,客户端同时也具备一个内置的,使用轮询负载算法的负载均衡器。在应用启动后,将会向EurekaServer发送心跳 (默认周期为30秒) 。如果Eureka Server在多个心跳周期内没有接收到某个节点的心跳,EurekaServer将会从服务注册表中把这个服务节点移除掉 (默认周期为90s).
三大角色
- Eureka Server:提供服务的注册与发现
- Service Provider:服务生产方,将自身服务注册到Eureka中,从而使服务消费方能狗找到
- Service Consumer:服务消费方,从Eureka中获取注册服务列表,从而找到消费服务
Eureka注册中心构建
创建模块
在父工程下新创建一个名为springcloud-eureka-7001的普通maven模块
添加依赖
pom.xml 配置
<!--导包~-->
<dependencies>
<!-- https://mvnrepository.com/artifact/org.springframework.cloud/spring-cloud-starter-eureka-server -->
<!--导入Eureka Server依赖-->
<dependency>
<groupId>org.springframework.cloud</groupId>
<artifactId>spring-cloud-starter-eureka-server</artifactId>
<version>1.4.6.RELEASE</version>
</dependency>
<!--热部署工具-->
<dependency>
<groupId>org.springframework.boot</groupId>
<artifactId>spring-boot-devtools</artifactId>
</dependency>
</dependencies>
模块配置
application.yml
server:
port: 7001
#Eureka配置
eueka:
instance:
hostname: localhost # Eureka服务端的实例名称
client:
# 表示是否向eureka注册中心注册自己,因为这个模块就是在写eureka服务器,所以不用注册自己
register-with-eureka: false
fetch-registry: false #如果为false,表示自己为注册中心
service-url: # 简单理解就是监控页面
# 点进去参考源码,可看到默认的url端口配置为8761,我们设置为自己的端口。
# 其他服务通过这个地址进行注册
defaultZone: http://${eureka.instance.hostname}:${server.port}/eureka
源码中Eureka的默认端口以及访问路径:
主启动类
EurekaServer_7001
@SpringBootApplication
@EnableEurekaServer // EnableEurekaServer 服务端的启动类,可以接收别人注册进来
public class EurekaServer_7001 {
public static void main(String[] args) {
SpringApplication.run(EurekaServer_7001.class,args);
}
}
目录结构
访问测试
Eureka:服务注册-信息配置-自我保护机制
调整之前创建的springlouc-provider-dept-8001(服务提供者)
导入Eureca依赖
<!--Eureka依赖-->
<!-- https://mvnrepository.com/artifact/org.springframework.cloud/spring-cloud-starter-eureka -->
<dependency>
<groupId>org.springframework.cloud</groupId>
<artifactId>spring-cloud-starter-eureka</artifactId>
<version>1.4.6.RELEASE</version>
</dependency>
Eureca配置
application.yml
# Eureka配置:配置服务注册中心地址
eureka:
client:
service-url:
# 服务注册中心地址
defaultZone: http://localhost:7001/eureka/
主启动类
DeptProvider_8001
//启动类
@SpringBootApplication
// @EnableEurekaClient 开启Eureka客户端注解,在服务启动后自动向注册中心注册服务
@EnableEurekaClient
public class DeptProvider_8001 {
public static void main(String[] args) {
SpringApplication.run(DeptProvider_8001.class,args);
}
}
启动测试
启动springcloud-eureka-7001服务,启动springcloud-provider-dept-8001服务
浏览器访问http://localhost:7001/,已经成功注册
页面会有一个爆红的错误提示,在springcloud-eureka-7001服务配置中加上
application.yml
server:
enable-self-preservation: false #关闭自我保护机制
重启springcloud-eureka-7001,springcloud-provider-dept-8001,测试发现有爆红行,原因是我们在上一步关闭了自我保护机制
完善配置
修改默认描述信息
测试发现
这里有一个默认的状态栏描述信息,我们可以手动配置这个信息
springcloud-provider-dept-8001.application.yml
# Eureka配置:配置服务注册中心地址
eureka:
client:
service-url:
# 服务注册中心地址
defaultZone: http://localhost:7001/eureka/
instance:
instance-id: springcloud-provider-dept-8001 # 修改eureka的默认描述信息
测试
隐藏链接地址
鼠标放在springcloud-provider-dept-8001上时,页面的左下角会有链接地址的信息,但是这个并不是真实的地址,如果想显示真实的地址,可以在application.yml中进行配置
# Eureka配置:配置服务注册中心地址
eureka:
instance:
instance-id: springcloud-provider-dept-8001 # 修改eureka的默认描述信息
# 改为true后Eureka的status栏就会显示真实的ip地址,默认是false,不显示
prefer-ip-address: true
测试:http://eureka7001.com:7001/,亲测,成功
修改监控信息
点击这个链接地址,发现是错误页面。
完善监控信息
添加依赖
springcloud-provider-dept--8001.pom.xml
<!--Eureka的status链接xx/info点击后监控信息-->
<dependency>
<groupId>org.springframework.boot</groupId>
<artifactId>spring-boot-starter-actuator</artifactId>
</dependency>
模块配置
配置springcloud-provider-dept-8001模块
springcloud-provider-dept-8001--application.yml
# info配置 Eureka的status的xx/info链接点开后的info监控信息。没有太大意义
info:
app.name: kuangshen-springcloud
company.name: com.jjh
test.name: com.jjh.test
启动测试,再次访问监控信息的链接,页面显示了我们自定义配置的信息
服务发现与配置
注册进来的微服务,获取一些消息(团队开发会用到)
springcloud-provider-dept-8001--DeptController新增一个接口
//提供Restful服务
@RestController
public class DeptController {
// DiscoveryClient 可以用来获取一些配置的信息,得到具体的微服务!
@Autowired
private DiscoveryClient discovery;
// 获取一些注册进来的微服务的信息
@GetMapping("/dept/discovery")
public Object discovery() {
// 获取微服务列表的清单
List<String> services = discovery.getServices();
System.out.println("services=>" + services);
// 得到一个具体的微服务信息,通过具体的微服务id,applicaioinName;
List<ServiceInstance> instances = discovery.getInstances("SPRINGCLOUD-PROVIDER-DEPT");
for (ServiceInstance serviceInstance : instances) {
System.out.println(
serviceInstance.getHost() + "\t" + // 主机名称
serviceInstance.getPort() + "\t" + // 端口号
serviceInstance.getUri() + "\t" + // uri
serviceInstance.getServiceId() // 服务id
);
}
return this.discovery;
}
}
主启动类中加入@EnableDiscoveryClient 注解
//启动类
@SpringBootApplication
// @EnableEurekaClient 开启Eureka客户端注解,在服务启动后自动向注册中心注册服务
@EnableEurekaClient
// @EnableEurekaClient 开启服务发现客户端的注解,可以用来获取一些配置的信息,得到具体的微服务
@EnableDiscoveryClient
public class DeptProvider_8001 {
public static void main(String[] args) {
SpringApplication.run(DeptProvider_8001.class,args);
}
}
访问测试 http://desktop-7qgt2m3:8001/dept/discovery
后台打印
自我保护机制
自我保护机制建议开启,我们现在还是将自我保护机制开启 ,重启springcloud-eureka-7001,springcloud-provider-dept-8001
我们将springcloud-provider-dept-8001服务停止,查看eureka监控页面
发现即使服务停止了,页面上还是显示停止的服务,这是因为eureka的自我保护机制
自我保护机制:好死不如赖活着
- 一句话总结: 某时刻某一个微服务不可以用了 , eureka不会立刻清理,依旧会对该微服务的信息进行保存!
- 默认情况下,如果EurekaServer在一定时间内没有接收到某 个微服务实例的心跳,EurekaServer将会注销该实例(默认90秒)。 但是当网络分区故障发生时,微服务与Eureka之间无法正常通行,以上行为可能变得非常危险了---- 因为微服务本身其实是健康的,此时本不应该注销这个服务。Eureka通过 自我保护机制来解决这个问题–当EurekaServer节点在短时间内丢失过多客户端时(可能发生了网络分区故障) , 那么这个节点就会进入自我保护模式。一旦进入该模式,EurekaServer就会保护服务注册表中的信息,不再删除服务注册表中的数据(也就是不会注销任何微服务) .当网络故障恢复后,该EurekaServer节 点会自动退出自我保护模式。
- 在自我保护模式中,EurekaServer会保护服务注册表中的信息, 不再注销任何服务实例。当它收到的心跳数重新恢复到阈值以上时,该EurekaServer节点就会 自动退出自我保护模式。它的设计哲学就是宁可保留错误的服务注册信息,也不盲目注销任何可能健康的服务实例。一句话:好死不如赖活着
- 综上,自我保护模式是-种应对网络异常的安全保护措施。它的架构哲学是宁可同时保留所有微服务(健康的微服务和不健康的微服务都会保留),也不盲目注销任何健康的微服务。使用自我保护模式,可以让Eureka集群更加的健壮和稳定
- 在SpringCloud中, 可以使用 eureka. server. enable-self-preservation = false 禁用自我保护模式[不推荐关闭自我保护机制]
目录结构
集群环境配置
思考一下,现在我们只有springcloud-eureka-7001这一个注册中心,如果这个服务崩掉的话,那么所有服务的注册信息都会丢失,所以我们要进行集群的搭建,这样就会保证如果一个注册中心有问题,其他的注册中心就会代替其进行工作。因此我们需要实现下图的集群搭建和配置
创建 springcloud-eureka-7002 Maven项目
创建 springcloud-eureka-7003 Maven项目
可复制springcloud-eureka-7001项目的所有依赖及内容,更改端口 启动类 等等配置。
新建模块
导入依赖
直接从springcloud-eureka-7001拷贝
<!--导包~-->
<dependencies>
<!-- https://mvnrepository.com/artifact/org.springframework.cloud/spring-cloud-starter-eureka-server -->
<!--导入Eureka Server依赖-->
<dependency>
<groupId>org.springframework.cloud</groupId>
<artifactId>spring-cloud-starter-eureka-server</artifactId>
<version>1.4.6.RELEASE</version>
</dependency>
<!--热部署工具-->
<dependency>
<groupId>org.springframework.boot</groupId>
<artifactId>spring-boot-devtools</artifactId>
</dependency>
</dependencies>
模块配置
7002 7003配置application.yml
server:
port: 7002/7003
#Eureka配置
eureka:
instance:
hostname: localhost # Eureka服务端的实例名称
client:
# 表示是否向eureka注册中心注册自己,因为这个模块就是在写eureka服务器,所以不用注册自己
register-with-eureka: false
fetch-registry: false #如果为false,表示自己为注册中心
service-url: # 简单理解就是监控页面
# 点进去参考源码,可看到默认的url端口配置为8761,我们设置为自己的端口。
# 其他服务通过这个地址进行注册
defaultZone: http://${eureka.instance.hostname}:${server.port}/eureka
主启动类
EurekaServer_7002
@SpringBootApplication
@EnableEurekaServer // EnableEurekaServer 服务端的启动类,可以接收别人注册进来
public class EurekaServer_7002 {
public static void main(String[] args) {
SpringApplication.run(EurekaServer_7002.class,args);
}
}
EurekaServer_7003
@SpringBootApplication
@EnableEurekaServer // EnableEurekaServer 服务端的启动类,可以接收别人注册进来
public class EurekaServer_7003 {
public static void main(String[] args) {
SpringApplication.run(EurekaServer_7003.class,args);
}
}
测试一下,只保留7003这个注册中心,关掉其他的注册中心,访问7003,成功
配置主机名映射
可以在c盘的hosts中配置三个链接,用于模拟集群域名映射
打开:C:\Windows\System32\drivers\etc\hosts
127.0.0.1 eureka7001.com
127.0.0.1 eureka7002.com
127.0.0.1 eureka7003.com
模块配置
三个maven项目都需配置yml,只需更改当前的hostname,和defaultZone其他关联地址
springcloud-eureka-7001--application.yml
server:
port: 7001
#Eureka配置
eureka:
instance:
hostname: eureka7001.com # Eureka服务端的实例名称
client:
# 表示是否向eureka注册中心注册自己,因为这个模块就是在写eureka服务器,所以不用注册自己
register-with-eureka: false
fetch-registry: false #如果为false,表示自己为注册中心
service-url: # 简单理解就是监控页面
# 点进去参考源码,可看到默认的url端口配置为8761,我们设置为自己的端口。
# 其他服务通过这个地址进行注册
# 单机配置
# defaultZone: http://${eureka.instance.hostname}:${server.port}/eureka
# 集群配置(除自身外 关联其他所有),本注册中心服务要与7002和7003关联起来
defaultZone: http://eureka7002.com:7002/eureka/,http://eureka7003.com:7003/eureka/
springcloud-eureka-7002--application.yml
server:
port: 7002
#Eureka配置
eureka:
instance:
hostname: eureka7002.com # Eureka服务端的实例名称
client:
# 表示是否向eureka注册中心注册自己,因为这个模块就是在写eureka服务器,所以不用注册自己
register-with-eureka: false
fetch-registry: false #如果为false,表示自己为注册中心
service-url: # 简单理解就是监控页面
# 点进去参考源码,可看到默认的url端口配置为8761,我们设置为自己的端口。
# 其他服务通过这个地址进行注册
defaultZone: http://eureka7001.com:7001/eureka/,http://eureka7003.com:7003/eureka/
springcloud-eureka-7003--application.yml
server:
port: 7003
#Eureka配置
eureka:
instance:
hostname: eureka7003.com # Eureka服务端的实例名称
client:
# 表示是否向eureka注册中心注册自己,因为这个模块就是在写eureka服务器,所以不用注册自己
register-with-eureka: false
fetch-registry: false #如果为false,表示自己为注册中心
service-url: # 简单理解就是监控页面
# 点进去参考源码,可看到默认的url端口配置为8761,我们设置为自己的端口。
# 其他服务通过这个地址进行注册
defaultZone: http://eureka7001.com:7001/eureka/,http://eureka7002.com:7002/eureka/
集群配置完毕后,我们8001服务提供者服务注册到Eureka中,需要更改配置的路径地址、
更改springcloud-provider-dept-8001的application.yml Eureka服务注册defaultZone地址
springcloud-provider-dept-8001--application.yml
defaultZone: http://eureka7001.com:7001/eureka/,http://eureka7002.com:7002/eureka/,http://eureka7003.com:7003/eureka/
目录结构
启动测试
依次启动7001,7002,7003,8001四个服务
浏览器访问测试
发现三个注册中心服务都有8001服务注册的信息,现在关掉7003服务,其他注册中心仍然保留8001服务注册的信息
CAP原则及对比Zookeeper
RDBMS (Mysql. Oracle. sqlServer) ==> ACID
NoSQL (redis. mongdb) ==>CAP
回顾CAP原则
CAP原则
-
C (Consistency) 强一致性
-
A (Availabilty) 可用性
-
P (Partition tolerance) 分区容错性
CAP的三进二: CA、AP、 CP,即做多能实现两个点,不可能三者兼得
ACID原则
- A (Atomicity) 原子性
- C (Consistency) 一致性
- I (Isolation) 隔离性
- D (Durability) 持久性
经典CAP图
CAP理论的核心
- 一个分布式系统不可能同时很好的满足-致性,可用性和分区容错性这三个需求
- 根据CAP原理,将NoSQL数据库分成了满足CA原则,满足CP原则和满足AP原则三大类:
- CA:单点集群,满足-致性,可用性的系统,通常可扩展性较差
- CP: 满足- -致性,分区容错性的系统,通常性能不是特别高
- AP:满足可用性。分区容错性的系统,通常可能对一致性要求低一些
对比Zookeeper
作为服务注册中心,Eureka比Zookeeper好在哪里?
著名的CAP理论指出,一个分布式系统不可能同时满足C (一致性)、A (可用性)、P (容错性) .
由于分区容错性P在分布式系统中是必须要保证的,因此我们只能在A和C之间进行权衡。
- Zookeeper保证的是
CP
- Eureka保证的是
AP
Zookeeper保证的是CP
当向注册中心查询服务列表时,我们可以容忍注册中心返回的是几分钟以前的注册信息,但不能接受服务直接down掉不可用。也就是说,服务注册功能对可用性的要求要高于一致性。但是zk会出现这样一种情况,当master节点因为网络故障与其他节点失去联系时,剩余节点会重新进行leader选举。问题在于,选举leader的时间太长,30 ~ 120s, 且选举期间整个zk集群都是不可用的,这就导致在选举期间注册服务瘫痪。在云部署的环境下,因网络问题使得zk集群失去master节点是较大概率会发生的事,虽然服务能够最终恢复,但是漫长的选举时间导致的注册长期不可用是不能容忍的。
Eureka保证的是AP
Eureka看明白了这一点,因此在设计时就优先保证可用性。Eureka各个节点都是平等的 ,几个节点挂掉不会影响正常节点的工作,剩余的节点依然可以提供注册和查询服务。而Eureka的客户端在向某个Eureka注册或如果发现连接失败,则会自动切换至其它节点,只要有一台Eureka还在,就能保证注册服务可用(保证可用性),只不过查到的信息可能不是最新的(不保证强一致性)。除此之外,Eureka还有一种自我保护机制,如果在15分钟内超过85%的节点都没有正常的心跳,那么Eureka就认为客户端与注册中心出现了网络故障,此时会出现以下几种情况:
Eureka不再从注册列表中移除因为长时间没收到心跳而应该过期的服务
Eureka仍然能够接受新服务的注册和查询请求,但是不会被同步到其它节点上(即保证当前节点依然可用)
当网络稳定时,当前实例新的注册信息会被同步到其它节点中
因此,Eureka可以很好的应对因网络故障导致部分节点失去联系的情况,而不会像zookeeper那样使整个注册服务瘫痪。
Ribbon负载均衡(基于客户端)
Ribbon介绍
ribbno是什么?
Spring Cloud Ribbon是基于Netflix Ribbon实现的一套 客户端负载均衡的工具。
简单的说,Ribbon是Netflix发布的开源项目, 主要功能是提供客户端的软件负载均衡算法,将NetFlix的中间层服务连接在一起。 Ribbon的客户端组件提供一系列完整的配置项如:连接超时、重试等等。简单的说,就是在配置文件中列出LoadBalancer (简称LB: 负载均衡)后面所有的机器,Ribbon会自动的帮助你基于某种规则(如简单轮询,随机连接等等)去连接这些机器。我们也很容易使用Ribbon实现自定义的负载均衡算法!
ribbon能干什么?
- LB,即负载均衡(Load Balance) ,在微服务或分布式集群中经常用的一种应用。
- 负载均衡简单的说就是将用户的请求平摊的分配到多个服务上,从而达到系统的HA (高可用) .
- 常见的负载均衡软件有 Nginx,Lvs等等
- dubbo、SpringCloud中均给我们提供了负载均衡,SpringCloud的负载均衡算法可以自定义
- 负载均衡简单分类:
- 集中式LB
- 即在服务的消费方和提供方之间使用独立的LB设施,如Nginx, 由该设施负责把访问请求通过某种策略转发至服务的提供方!
- 进程式LB
- 将LB逻辑集成到消费方,消费方从服务注册中心获知有哪些地址可用,然后自己再从这些地址中选出一个合适的服务器。
- Ribbon就属于进程内LB,它只是一个类库,集成于消费方进程,消费方通过它来获取到服务提供方的地址!
- 集中式LB
集成Ribbon
Ribbon基于的是客户端,所以要在服务消费者springcloud-consumer-dept-80集成Ribbon
添加依赖
向pom.xml中添加Ribbon和Eureka依赖
<!--Ribbon-->
<dependency>
<groupId>org.springframework.cloud</groupId>
<artifactId>spring-cloud-starter-ribbon</artifactId>
<version>1.4.6.RELEASE</version>
</dependency>
<!--Eureka: Ribbon需要从Eureka服务中心获取要拿什么-->
<dependency>
<groupId>org.springframework.cloud</groupId>
<artifactId>spring-cloud-starter-eureka</artifactId>
<version>1.4.6.RELEASE</version>
</dependency>
模块配置
application.yml
server:
port: 80
# Eureka配置
eureka:
client:
register-with-eureka: false # 不向 Eureka注册自己
service-url: # 从三个注册中心中随机取一个去访问
defaultZone: http://eureka7001.com:7001/eureka/,http://eureka7002.com:7002/eureka/,http://eureka7003.com:7003/eureka/
主启动类
DeptConsumer_80
//消费者 运行方式80可省略 例:localhost/consumer/dept/list
@SpringBootApplication
//Ribbon 和 Eureka 整合以后,客户端可以直接调用,不用关心IP地址和端口号
@EnableEurekaClient //开启Eureka 客户端
public class DeptConsumer_80 {
public static void main(String[] args) {
SpringApplication.run(DeptConsumer_80.class,args);
}
}
自定义配置类配置
自定义Spring配置类:ConfigBean.java 配置负载均衡实现RestTemplate
@Configuration
public class ConfigBean { //@Configuration=spring的 application.xml
@Bean
@LoadBalanced //配置负载均衡实现RestTemplate
public RestTemplate getRestTemplate(){
return new RestTemplate();
}
}
controller层
DeptConsumerController
// 通过ribbon去实现负载均衡,这里服务应该是一个变量,通过服务名来访问
private static final String url = "http://SPRINGCLOUD-PROVIDER-DEPT";
目录结构
启动测试
查看服务是否成功注册
访问测试 http://localhost/consumer/dept/list,成功
证明客户端成功的通过服务名获取到到服务,并且能够正确访问,因为现在只有一个服务,所以看不出来负载均衡的效果,通过测试,理论上已经实现了负载均衡
Ribbon实现负责均衡
在2中,我们其实已经实现了负载均衡。但是只有一个服务提供者,看不到负载均衡实现后的效果。现在真实的感受一下负载均衡的实现效果。
数据准备
提供者8001使用的数据库是db01,现在我们需要创建数据库db02,db03。将db01的dept表复制到其他的两个数据库中
新建数据库
复制dept表
DROP TABLE IF EXISTS `dept`;
CREATE TABLE `dept` (
`deptno` bigint(20) NOT NULL AUTO_INCREMENT,
`dname` varchar(60) CHARACTER SET utf8 COLLATE utf8_general_ci NULL DEFAULT NULL,
`db_source` varchar(60) CHARACTER SET utf8 COLLATE utf8_general_ci NULL DEFAULT NULL,
PRIMARY KEY (`deptno`) USING BTREE
) ENGINE = InnoDB AUTO_INCREMENT = 7 CHARACTER SET = utf8 COLLATE = utf8_general_ci ROW_FORMAT = Dynamic;
-- ----------------------------
-- Records of dept
-- ----------------------------
INSERT INTO dept(dname,db_source) VALUES('开发部',DATABASE());
INSERT INTO dept(dname,db_source) VALUES('人事部',DATABASE());
INSERT INTO dept(dname,db_source) VALUES('财务部',DATABASE());
INSERT INTO dept(dname,db_source) VALUES('市场部',DATABASE());
INSERT INTO dept(dname,db_source) VALUES('运维部',DATABASE());
SET FOREIGN_KEY_CHECKS = 1;
新建模块
新建两个服务提供者springcloud-provider-dept-8002,springcloud-provider-dept-8003
创建普通maven项目
添加依赖
将8001依赖复制到新创建的两个moudle
<dependencies>
<!--我们需要拿到实体类,所以要配置api module-->
<dependency>
<groupId>com.jjh</groupId>
<artifactId>springcloud-api</artifactId>
<version>1.0-SNAPSHOT</version>
</dependency>
<!--junit-->
<dependency>
<groupId>junit</groupId>
<artifactId>junit</artifactId>
<scope>test</scope>
</dependency>
<dependency>
<groupId>mysql</groupId>
<artifactId>mysql-connector-java</artifactId>
</dependency>
<dependency>
<groupId>com.alibaba</groupId>
<artifactId>druid</artifactId>
</dependency>
<dependency>
<groupId>ch.qos.logback</groupId>
<artifactId>logback-core</artifactId>
</dependency>
<dependency>
<groupId>org.mybatis.spring.boot</groupId>
<artifactId>mybatis-spring-boot-starter</artifactId>
</dependency>
<!--test-->
<dependency>
<groupId>org.springframework.boot</groupId>
<artifactId>spring-boot-test</artifactId>
</dependency>
<dependency>
<groupId>org.springframework.boot</groupId>
<artifactId>spring-boot-starter-web</artifactId>
</dependency>
<!--jetty-->
<dependency>
<groupId>org.springframework.boot</groupId>
<artifactId>spring-boot-starter-jetty</artifactId>
</dependency>
<!--热部署工具-->
<dependency>
<groupId>org.springframework.boot</groupId>
<artifactId>spring-boot-devtools</artifactId>
</dependency>
<!--Eureka依赖-->
<!-- https://mvnrepository.com/artifact/org.springframework.cloud/spring-cloud-starter-eureka -->
<dependency>
<groupId>org.springframework.cloud</groupId>
<artifactId>spring-cloud-starter-eureka</artifactId>
<version>1.4.6.RELEASE</version>
</dependency>
<!--完善监控信息-->
<!--Eureka的status链接xx/info点击后监控信息-->
<dependency>
<groupId>org.springframework.boot</groupId>
<artifactId>spring-boot-starter-actuator</artifactId>
</dependency>
</dependencies>
模块配置
将8001的application.yml复制到新建moudle,修改部分适用本模块的配置
application.yml,修改下图的三个地方,8003如法炮制
修改之后,这三个服务名称都是 SPRINGCLOUD-PROVIDER-DEPT
mybatis
复制mybatis配置文件 mybatis-config.xml,创建和8001相同的目录结构
复制mapper文件DeptMapper.xml
拷贝源代码
将8001中的所有代码拷贝到8002,8003
修改启动类,以8002为例,8003如法炮制
这里不改也可以,为了看着更加舒服
启动测试
启动7001,7002,7003,8001,8002,8003,80
查看服务是否成功注册
现在通过客户端访问服务,观察每次访问到底选择的是那个服务
第一次访问 http://localhost/consumer/dept/list
第二次访问,经过测试,访问的是8002服务
第三次访问,经过测试,访问的是8001服务
通过测试,可以发现,ribbon通过轮询(默认算法)实现负载均衡
自定义负载均衡算法
负载均衡算法的核心是IRule接口
这个接口之下有很多实现类,下面对几个实现类进行了解
- RoundRobinRule 轮询策略(默认)
- AvailabilityFilteringRule:会先过滤掉,跳闸,访问故障的服务,对剩下的进行轮询
- RandomRule 随机策略
- RetryRule : 会先按照轮询获取服务~,如果服务获取失败,则会在指定的时间内进行,重试
切换策略
ribbon默认使用的是RoundRobinRule 轮询策略,现在我们想要使用RandomRule 随机策略。实现起来很简单,只需要在springcloud-consumer-dept-80客户端的配置类中配置RandomRule 对象,交给spring容器管理即可
方式一
ConfigBean
/**
* IRule:
* RoundRobinRule 轮询策略
* RandomRule 随机策略
* AvailabilityFilteringRule : 会先过滤掉,跳闸,访问故障的服务~,对剩下的进行轮询~
* RetryRule : 会先按照轮询获取服务~,如果服务获取失败,则会在指定的时间内进行,重试
*/
@Bean
public IRule myRule() {
return new RandomRule();//使用随机策略
}
重启客户端,测试一下,看看是否使用了随机策略
访问 http://localhost/consumer/dept/list
第一次使用的是8003服务
第二次使用的是8001服务
第三次使用的是8001服务
第四次使用的是8001服务
第五次使用的是8002服务
可以看到,随机策略生效
方式二(推荐)
上述方法可以实现策略的切换,但是一般情况下,我们不会在这个位置去定义想要切换的策略
即myrule包的位置要和主启动类所在的包同级
新建配置类
所以再com.jjh下新建一个名为myrule的包,创建一个KuangRule配置类,再这个策略配置类中定义策略
@Configuration
public class KuangRule {
/**
* IRule:
* RoundRobinRule 轮询策略
* RandomRule 随机策略
* AvailabilityFilteringRule : 会先过滤掉,跳闸,访问故障的服务~,对剩下的进行轮询~
* RetryRule : 会先按照轮询获取服务~,如果服务获取失败,则会在指定的时间内进行,重试
*/
@Bean
public IRule myRule() {
return new RandomRule();//使用随机策略
}
}
主启动类
// 在微服务启动的时候就能加载我们自定义Ribbon类
@RibbonClient(name="SPRINGCLOUD-PROVIDER-DEPT",configuration = KuangRule.class)
DeptConsumer_80
//消费者 运行方式80可省略 例:localhost/consumer/dept/list
@SpringBootApplication
//Ribbon 和 Eureka 整合以后,客户端可以直接调用,不用关心IP地址和端口号
@EnableEurekaClient //开启Eureka 客户端
// 在微服务启动的时候就能加载我们自定义Ribbon类
@RibbonClient(name="SPRINGCLOUD-PROVIDER-DEPT",configuration = KuangRule.class)
public class DeptConsumer_80 {
public static void main(String[] args) {
SpringApplication.run(DeptConsumer_80.class,args);
}
}
经测试,同样实现了随机策略
自定义策略
这里我们参考Ribbon中默认的规则代码(RandomRule.java)自己稍微改动
自定义策略
- 每个服务访问5次,超过5次则换下一个服务(总共3个服务)
自定义策略
在myrule包下新建自定义策略类MyRandomRule.java
public class MyRandomRule extends AbstractLoadBalancerRule {
/**
* 每个服务访问5次则换下一个服务(总共3个服务)
* <p>
* total=0,默认=0,如果=5,指向下一个服务节点
* index=0,默认=0,如果total=5,index+1
*/
private int total = 0;//被调用的次数
private int currentIndex = 0;//当前是谁在提供服务
//@edu.umd.cs.findbugs.annotations.SuppressWarnings(value = "RCN_REDUNDANT_NULLCHECK_OF_NULL_VALUE")
public Server choose(ILoadBalancer lb, Object key) {
if (lb == null) {
return null;
}
Server server = null;
while (server == null) {
if (Thread.interrupted()) {
return null;
}
List<Server> upList = lb.getReachableServers();//获得当前活着的服务
List<Server> allList = lb.getAllServers();//获取所有的服务
int serverCount = allList.size();
if (serverCount == 0) {
/*
* No servers. End regardless of pass, because subsequent passes
* only get more restrictive.
*/
return null;
}
//int index = chooseRandomInt(serverCount);//生成区间随机数
//server = upList.get(index);//从或活着的服务中,随机获取一个
//=====================自定义代码=========================
if (total < 5) {
server = upList.get(currentIndex);
total++;
} else {
total = 0;
currentIndex++;
if (currentIndex > upList.size()) {
currentIndex = 0;
}
server = upList.get(currentIndex);//从活着的服务中,获取指定的服务来进行操作
}
//======================================================
if (server == null) {
/*
* The only time this should happen is if the server list were
* somehow trimmed. This is a transient condition. Retry after
* yielding.
*/
Thread.yield();
continue;
}
if (server.isAlive()) {
return (server);
}
// Shouldn't actually happen.. but must be transient or a bug.
server = null;
Thread.yield();
}
return server;
}
protected int chooseRandomInt(int serverCount) {
return ThreadLocalRandom.current().nextInt(serverCount);
}
@Override
public Server choose(Object key) {
return choose(getLoadBalancer(), key);
}
@Override
public void initWithNiwsConfig(IClientConfig clientConfig) {
// TODO Auto-generated method stub
}
}
配置自定义策略
KuangRule类中配置自定义的策略
@Configuration
public class KuangRule {
/**
* IRule:
* RoundRobinRule 轮询策略
* RandomRule 随机策略
* AvailabilityFilteringRule : 会先过滤掉,跳闸,访问故障的服务~,对剩下的进行轮询~
* RetryRule : 会先按照轮询获取服务~,如果服务获取失败,则会在指定的时间内进行,重试
*/
@Bean
public IRule myRule() {
// return new RandomRule();//使用随机策略
return new MyRandomRule();//使用自定义策略
}
}
主启动类
主启动类配置注解
// 在微服务启动的时候就能加载我们自定义Ribbon类
@RibbonClient(name="SPRINGCLOUD-PROVIDER-DEPT",configuration = KuangRule.class)
//消费者 运行方式80可省略 例:localhost/consumer/dept/list
@SpringBootApplication
//Ribbon 和 Eureka 整合以后,客户端可以直接调用,不用关心IP地址和端口号
@EnableEurekaClient //开启Eureka 客户端
// 在微服务启动的时候就能加载我们自定义Ribbon类
@RibbonClient(name="SPRINGCLOUD-PROVIDER-DEPT",configuration = KuangRule.class)
public class DeptConsumer_80 {
public static void main(String[] args) {
SpringApplication.run(DeptConsumer_80.class,args);
}
}
访问测试
重启springcloud-consumer-dept-80服务
访问 http://localhost/consumer/dept/list
经测试,发现每个服务访问五次,超过五次换下一个服务,亲测成功
Feign负载均衡(基于客户端)
使用接口方式调用服务
Feign简介
Feign是声明式Web Service客户端,它让微服务之间的调用变得更简单,类似controller调用service。SpringCloud集成了Ribbon和Eureka,可以使用Feigin提供负载均衡的http客户端
只需要创建一个接口,然后添加注解即可
Feign,主要是社区版,大家都习惯面向接口编程。这个是很多开发人员的规范。调用微服务访问两种方法
1.微服务名字 【ribbon】
2.接口和注解 【feign】
Feign能干什么
- Feign旨在使编写Java Http客户端变得更容易
- 前面在使用Ribbon + RestTemplate时,利用RestTemplate对Http请求的封装处理,形成了一套模板化的调用方法。但是在实际开发中,由于对服务依赖的调用可能不止一处,往往一个接口会被多处调用,所以通常都会针对每个微服务自行封装一个客户端类来包装这些依赖服务的调用。所以,Feign在此基础上做了进一步的封装,由他来帮助我们定义和实现依赖服务接口的定义,在Feign的实现下,我们只需要创建一个接口并使用注解的方式来配置它 (类似以前Dao接口上标注Mapper注解,现在是一个微服务接口上面标注一个Feign注解),即可完成对服务提供方的接口绑定,简化了使用Spring Cloud Ribbon 时,自动封装服务调用客户端的开发量。
Feign默认集成了Ribbon
利用Ribbon维护了MicroServiceCloud-Dept的服务列表信息,并且通过轮询实现了客户端的负载均衡,而与Ribbon不同的是,通过Feign只需要定义服务绑定接口且以声明式的方法,优雅而简单的实现了服务调用。
Ribbon和Feign的区别
Ribbon和Feign都是用于调用其他服务的,不过方式不同。
-
Ribbon RestFul风格
-
Feign 面向接口
- 启动类使用的注解不同,Ribbon用的是@RibbonClient,Feign用的是@EnableFeignClients。
- 服务的指定位置不同,Ribbon是在@RibbonClient注解上声明,Feign则是在定义抽象方法的接口中使用@FeignClient声明。
- 调用方式不同,Ribbon需要自己构建http请求,模拟http请求然后使用RestTemplate发送给其他服务,步骤相当繁琐。
- Feign则是在Ribbon的基础上进行了一次改进,采用接口的方式,将需要调用的其他服务的方法定义成抽象方法即可,不需要自己构建http请求。不过要注意的是抽象方法的注解、方法签名要和提供服务的方法完全一致。
Feign的使用步骤
编写接口
如果从更直观的角度来说,我们应该是新创建一个springcloud-api-feign模块,仅仅是用来和springcloud-api模块相互区分,在这里我们不用那么麻烦。直接在springcloud-api模块中操作即可
在springcloud-api模块中导入feign依赖
<dependency>
<groupId>org.springframework.cloud</groupId>
<artifactId>spring-cloud-starter-feign</artifactId>
<version>1.4.6.RELEASE</version>
</dependency>
在springcloud-api模块下com.jjh.springcloud这个包下创建一个service包,包下创建DeptClientService接口,之所以是在类似于api这样的模块下创建feign接口,就是因为api这样的模块可以被其他的服务直接使用。也就是说这个模块里面的类,接口等可以直接被引用
DeptClientService
@FeignClient(value = "SPRINGCLOUD-PROVIDER-DEPT")
public interface DeptClientService {
@GetMapping("/dept/get/{id}")
public Dept queryById(@PathVariable("id") Long id);
@GetMapping("/dept/list")
public List<Dept> queryAll();
@PostMapping("/dept/add")
public boolean addDept(Dept dept);
}
新建模块
在父工程下新建一个springcloud-consumer-dept-feign普通maven模块,这个模块也是一个客户端,仅仅是为了和80客户端区分,表示通过feign的方式实现的负载均衡的客户端
完善模块
完善springcloud-consumer-dept-feign模块
拷贝代码
复制springcloud-consumer-dept-80的所有内容(包括目录结构)
修改主启动类
类名由DeptConsumer_80改为FeignDeptConsumer_80,去掉@RibbonClient注解,因为我们使用的不是ribbon
controller层
DeptConsumerController
@RestController
public class DeptConsumerController {
@Autowired
private DeptClientService deptClientService;
//调用8001提供者的控制器=>根据id查询数据
@RequestMapping("/consumer/dept/get/{id}")
public Dept getDept(@PathVariable(name = "id") Long id){
return this.deptClientService.queryById(id);
}
//调用8001提供者的控制器=>添加方法
@RequestMapping("/consumer/dept/add")
public boolean addDept(Dept dept){
return this.deptClientService.addDept(dept);
}
//调用8001提供者的控制器=>查询所有
@RequestMapping("/consumer/dept/list")
public List<Dept> queryAll(){
return this.deptClientService.queryAll();
}
}
主启动类
FeignDeptConsumer_80
//消费者 运行方式80可省略 例:localhost/consumer/dept/list
@SpringBootApplication
//Ribbon 和 Eureka 整合以后,客户端可以直接调用,不用关心IP地址和端口号
@EnableEurekaClient //开启Eureka 客户端
//让Feign的接口被扫描到,也就是说让加了@FeignClient注解的接口被扫描到
@EnableFeignClients(basePackages = {"com.jjh.springcloud"})
public class FeignDeptConsumer_80 {
public static void main(String[] args) {
SpringApplication.run(FeignDeptConsumer_80.class,args);
}
}
启动测试
启动7001,7002,7003三个注册中心,8001,8002,8003三个服务提供者,和springcloud-consumer-dept-feign客户端
访问http://eureka7001.com:7001/查看注册中心是否成功启动
访问http://localhost/consumer/dept/list,亲测成功
与Ribbon对比
Feign和Ribbon二者对比,前者显现出面向接口编程特点,代码看起来更清爽,而且Feign调用方式更符合我们之前在做SSM或者SprngBoot项目时,Controller层调用Service层的编程习惯!
Hystrix熔断/降级
分布式系统面临的问题: 复杂分布式结构中的应用程序有数十个依赖关系,每个依赖关系在某些时候将不可避免的失效.
服务雪崩
多个微服务之间调用的时候,假设微服务A调用微服务B和微服务C,微服务B和微服务C又调用其他的微服务,这就是所谓的“扇出”、如果扇出的链路上某个微服务的调用响应时间过长或者不可用,对微服务A的调用就会占用越来越多的系统资源,进而引起系统崩溃,所谓的“雪崩效应"。
对于高流量的应用来说,单一的后端依赖可能会导致所有服务器上的所有资源都在几秒中内饱和。比失败更糟糕的是,这些应用程序还可能导致服务之间的延迟增加,备份队列,线程和其他系统资源紧张,导致整个系统发生更多的级联故障,这些都表示需要对故障和延迟进行隔离和管理,以便单个依赖关系的失败,不能取消整个应用程序或系统。
什么是Hystrix
Hystrix是一个用于处理分布式系统的延迟和容错的开源库,在分布式系统里,许多依赖不可避免的会调用失败,比如超时,异常等,Hystrix能够保证在一 个依赖出问题的情况下, 不会导致整体服务失败,避免级联故障,以提高分布式系统的弹性。
“断路器”本身是一种开关装置,当某个服务单元发生故障之后,通过断路器的故障监控(类似熔断保险丝) , 向调用方返回-一个服务预期的,可处理的备选响应(FallBack),而不是长时间的等待或者抛出调用方法无法处理的异常,这样就可以保证了服务调用方的线程不会被长时间,不必要的占用,从而避免了故障在分布式系统中的蔓延,乃至雪崩。
Hystrix能干什么
- 服务降级
- 服务熔断
- 服务限流
- 接近实时的监控
- ·····
当一切正常时,请求流可以如下所示:
当许多后端系统中有一个潜在阻塞服务时,它可以阻止整个用户请求
随着大容量通信量的增加,单个后端依赖项的潜在性会导致所有服务器上的所有资源在几秒钟内饱和。
应用程序中通过网络或客户端库可能导致网络请求的每个点都是潜在故障的来源。比失败更糟糕的是,这些应用程序还可能导致服务之间的延迟增加,从而备份队列、线程和其他系统资源,从而导致更多跨系统的级联故障。
当使用Hystrix包装每个基础依赖项时,上面的图表中所示的体系结构会发生类似于以下关系图的变化。每个依赖项是相互隔离的,限制在延迟发生时它可以填充的资源中,并包含在回退逻辑中,该逻辑决定在依赖项中发生任何类型的故障时要做出什么样的响应:
Hystrix官网资料=> https://github.com/Netflix/Hystrix/wiki
Hystrix服务熔断(服务端)
介绍
在服务端实现
熔断机制是对应雪崩效应的一种微服务链路保护机制。
当扇出链路的某个微服务不可用或者响应时间太长时,会进行服务的降级,进而熔断该节点微服务的调用,快速返回错误的响应信息。当检测到该节点微服务调用响应正常后恢复调用链路。在SpringCloud框架里熔断机制通过Hystrix实现。Hystrix会监控微服务间调用的状况, 当失败的调用到一定阈值,缺省是5秒内20次调用失败就会启动熔断机制。熔断机制的注解是@HystrixCommand.
服务熔断解决如下问题:
- 当所依赖的对象不稳定时,能够起到快速失败的目的;
- 快速失败后,能够根据一定的算法动态试探所依赖对象是否恢复。
Hystrix服务熔断实现
新建模块
新创建一个名为springcloud-provider-dept-hystrix-8001的普通maven模块
模块拷贝
1、将springcloud-provider-dept-8001模块中的所有内容(依赖、配置文件、源代码...)复制到新建的模块中
2、修改启动类的名字:由DeptProvider_8001改为DeptProviderHystrix_8001,仅仅是为了做区分
3、修改application.yml中的Eureka的instance-id为 springcloud-provider-dept-hystrix-8001
实现Hystrix
导入依赖
springcloud-provider-dept-hystrix-8001--pom.xml
<!--Hystrix:服务熔断依赖-->
<dependency>
<groupId>org.springframework.cloud</groupId>
<artifactId>spring-cloud-starter-hystrix</artifactId>
<version>1.4.6.RELEASE</version>
</dependency>
controller层
DeptController
//提供Restful服务
@RestController
public class DeptController {
@Autowired
private DeptService deptService;
@RequestMapping("/dept/get/{id}")
@HystrixCommand(fallbackMethod = "hystrixGet") //如果失败 去调用Hystrix的备选方案
public Dept get(@PathVariable("id") Long id){
Dept dept = deptService.queryById(id);
//如果当前id值为空 抛出异常,调用这个方法的服务方不处理这异常,就会抛给虚拟机,导致服务雪崩
if (dept==null){
throw new RuntimeException("id=> "+ id+"不存在该用户,或者该信息无法找到");
}
return dept;
}
// 备选方法
public Dept hystrixGet(@PathVariable("id") Long id){
return new Dept()
.setDeptno(id)
.setDname("id=> "+id+"没有找到相关信息,null by Hystrix")
.setDb_source("not found database in mysql");
}
}
主启动类
在主启动类上添加对Hystrix的支持
DeptProviderHystrix_8001
//启动类
@SpringBootApplication
// @EnableEurekaClient 开启Eureka客户端注解,在服务启动后自动向注册中心注册服务
@EnableEurekaClient
// @EnableEurekaClient 开启服务发现客户端的注解,可以用来获取一些配置的信息,得到具体的微服务
@EnableDiscoveryClient
// @EnableCircuitBreaker 添加对熔断的支持
@EnableCircuitBreaker
public class DeptProviderHystrix_8001 {
public static void main(String[] args) {
SpringApplication.run(DeptProviderHystrix_8001.class,args);
}
}
启动测试
启动7001,7002,7003,hystrix-8001,80
访问http://eureka7001.com:7001/,服务已经成功注册
访问http://localhost/consumer/dept/get/1,能够查询到数据,返回结果正常
访问http://localhost/consumer/dept/get/10,因为在数据库中没有找到数据,所以出现异常,服务熔断,使用了Hystrix备选的方法
如果将springcloud-provider-dept-8001模块中controller层改成相同的代码,不使用熔断的话,访问一个不存在的数据,会出现错误的页面提示,显然提示效果不够友好。
Hystrix服务降级(客户端)
介绍
在客户端实现
服务降级是指当服务器压力剧增的情况下,根据实际业务情况及流量,对一些服务和页面有策略的不处理,或换种简单的方式处理,从而释放服务器资源以保证核心业务正常运作或高效运作。说白了,就是尽可能的把系统资源让给优先级高的服务。
资源有限,而请求是无限的。如果在并发高峰期,不做服务降级处理,一方面肯定会影响整体服务的性能,严重的话可能会导致宕机某些重要的服务不可用。所以,一般在高峰期,为了保证核心功能服务的可用性,都要对某些服务降级处理。比如当双11活动时,把交易无关的服务统统降级,如查看蚂蚁森林,查看历史订单等等
服务降级主要用于什么场景呢?当整个微服务架构整体的负载超出了预设的上限阈值或即将到来的流量预计将会超过预设的阈值时,为了保证重要或基本的服务能正常运行,可以将一些 不重要 或 不紧急 的服务或任务进行服务的 延迟使用 或 暂停使用。
降级的方式可以根据业务来,可以延迟服务,比如延迟给用户增加积分,只是放到一个缓存中,等服务平稳之后再执行 ;或者在粒度范围内关闭服务,比如关闭相关文章的推荐。
服务降级需要考虑的问题
- 1)那些服务是核心服务,哪些服务是非核心服务
- 2)那些服务可以支持降级,那些服务不能支持降级,降级策略是什么
- 3)除服务降级之外是否存在更复杂的业务放通场景,策略是什么?
自动降级分类
1)超时降级:主要配置好超时时间和超时重试次数和机制,并使用异步机制探测回复情况
2)失败次数降级:主要是一些不稳定的api,当失败调用次数达到一定阀值自动降级,同样要使用异步机制探测回复情况
3)故障降级:比如要调用的远程服务挂掉了(网络故障、DNS故障、http服务返回错误的状态码、rpc服务抛出异常),则可以直接降级。降级后的处理方案有:默认值(比如库存服务挂了,返回默认现货)、兜底数据(比如广告挂了,返回提前准备好的一些静态页面)、缓存(之前暂存的一些缓存数据)
4)限流降级:秒杀或者抢购一些限购商品时,此时可能会因为访问量太大而导致系统崩溃,此时会使用限流来进行限制访问量,当达到限流阀值,后续请求会被降级;降级后的处理方案可以是:排队页面(将用户导流到排队页面等一会重试)、无货(直接告知用户没货了)、错误页(如活动太火爆了,稍后重试)。
Hystrix服务降级实现
代码实现
在springcloud-api中或者新建的springcloud-api-feign项目中的service包中创DeptClientServiceFallbackFactory降级服务类
springcloud-api--DeptClientServiceFallbackFactory
@Component
public class DeptClientServiceFallbackFactory implements FallbackFactory {
@Override
public DeptClientService create(Throwable throwable) {
return new DeptClientService() {
@Override
public Dept queryById(Long id) {
return new Dept()
.setDeptno(id)
.setDname("id=>" +id+"没有对应的信息,客户端提供了降级的信息,这个服务现在已经关闭")
.setDb_source("已降级 未查找到数据");
}
@Override
public List<Dept> queryAll() {
return null;
}
@Override
public boolean addDept(Dept dept) {
return false;
}
};
}
}
在DeptClientService中添加服务降级的注解,@FeignClient(value=“xxx”,fallbackFactory=“降级的类”)
springcloud-api--DeptClientService
@Component
@FeignClient(value = "SPRINGCLOUD-PROVIDER-DEPT",fallbackFactory = DeptClientServiceFallbackFactory.class)
public interface DeptClientService {
@GetMapping("/dept/get/{id}")
public Dept queryById(@PathVariable("id") Long id);
@GetMapping("/dept/list")
public List<Dept> queryAll();
@PostMapping("/dept/add")
public boolean addDept(Dept dept);
}
在springcloud-consumer-dept-feign客户端配置开启服务降级
springcloud-consumer-dept-feign--application.yml
# 开启服务降级feign:hystrix
feign:
hystrix:
enabled: true
启动,测试
启动7001,springcloud-provider-dept-8001,springcloud-consumer-dept-feign
访问http://eureka7001.com:7001/,服务成功注册
访问http://localhost/consumer/dept/get/1,得到正确数据
现在我们将springcloud-provider-dept-8001关掉,再次访问http://localhost/consumer/dept/get/1
成功实现服务降级
熔断和降级的区别
- 服务熔断—>服务端实现:某个服务超时或异常,引起熔断~,类似于保险丝(自我熔断)
- 服务降级—>客户端:从整体网站请求负载考虑,当某个服务熔断或者关闭之后,服务将不再被调用,此时在客户端,我们可以准备一个 FallBackFactory ,返回一个默认的值(缺省值)。会导致整体的服务下降,但是好歹能用,比直接挂掉强。
- 触发原因不太一样,服务熔断一般是某个服务(下游服务)故障引起,而服务降级一般是从整体负荷考虑;管理目标的层次不太一样,熔断其实是一个框架级的处理,每个微服务都需要(无层级之分),而降级一般需要对业务有层级之分(比如降级一般是从最外围服务开始)
- 实现方式不太一样,服务降级具有代码侵入性(由控制器完成/或自动降级),熔断一般称为自我熔断。
熔断,降级,限流:
-
限流:限制并发的请求访问量,超过阈值则拒绝;
-
降级:服务分优先级,牺牲非核心服务(不可用),保证核心服务稳定;从整体负荷考虑;
-
熔断:依赖的下游服务故障触发熔断,避免引发本系统崩溃;系统自动执行和恢复
Hystrix流监控Dashboard
流监控Dashboard实现
新建模块
新建springcloud-consumer-hystrix-dashboard普通maven模块
导入依赖
因为dashboard流监控也是客户端,所以将springcloud-consumer-dept-80客户端中的所有依赖拷贝到本模块
<!--实体类+web-->
<dependencies>
<!--我们自己创的实体类-->
<dependency>
<groupId>com.jjh</groupId>
<artifactId>springcloud-api</artifactId>
<version>1.0-SNAPSHOT</version>
</dependency>
<!--web服务依赖-->
<dependency>
<groupId>org.springframework.boot</groupId>
<artifactId>spring-boot-starter-web</artifactId>
</dependency>
<!--热部署工具-->
<dependency>
<groupId>org.springframework.boot</groupId>
<artifactId>spring-boot-devtools</artifactId>
</dependency>
<!--Ribbon-->
<dependency>
<groupId>org.springframework.cloud</groupId>
<artifactId>spring-cloud-starter-ribbon</artifactId>
<version>1.4.6.RELEASE</version>
</dependency>
<!--Eureka: Ribbon需要从Eureka服务中心获取要拿什么-->
<dependency>
<groupId>org.springframework.cloud</groupId>
<artifactId>spring-cloud-starter-eureka</artifactId>
<version>1.4.6.RELEASE</version>
</dependency>
</dependencies>
添加Hystrix依赖、dashboard监控依赖
<!--Hystrix依赖-->
<dependency>
<groupId>org.springframework.cloud</groupId>
<artifactId>spring-cloud-starter-hystrix</artifactId>
<version>1.4.6.RELEASE</version>
</dependency>
<!--dashboard监控依赖-->
<dependency>
<groupId>org.springframework.cloud</groupId>
<artifactId>spring-cloud-starter-hystrix-dashboard</artifactId>
<version>1.4.6.RELEASE</version>
</dependency>
模块配置
application.yml
server:
port: 9001
主启动类
DeptConsumerDashboard_9001
@SpringBootApplication
// @EnableHystrixDashboard 开启流监控
@EnableHystrixDashboard
public class DeptConsumerDashboard_9001 {
public static void main(String[] args) {
SpringApplication.run(DeptConsumerDashboard_9001.class,args);
}
}
启动服务
目前本模块没有进行任何的代码实现,只是导入了两个依赖和配置了一个启动类,现在我们启动springcloud-consumer-hystrix-dashboard监控页面服务,查看是否存在页面,
默认地址:http://localhost:9001/hystrix
出现页面,证明服务没有问题
检查服务端依赖
目前的服务有8001,8002,8003,hystrix-8001,检查他们的依赖中是否存在
<!--完善监控信息-->
<!--Eureka的status链接xx/info点击后监控信息-->
<dependency>
<groupId>org.springframework.boot</groupId>
<artifactId>spring-boot-starter-actuator</artifactId>
</dependency>
没有的添加上
服务端配置
现在我们配置springcloud-provider-dept-hystrix-8001服务端,其他的服务端如法炮制
给springcloud-provider-dept-hystrix-8001模块下的主启动类添加如下代码,添加监控
导入依赖springcloud-provider-dept-hystrix-8001--pom.xml
<!--Hystrix依赖-->
<dependency>
<groupId>org.springframework.cloud</groupId>
<artifactId>spring-cloud-starter-hystrix</artifactId>
<version>1.4.6.RELEASE</version>
</dependency>
springcloud-provider-dept-hystrix-8001--DeptProvider_8001主启动类
//启动类
@SpringBootApplication
// @EnableEurekaClient 开启Eureka客户端注解,在服务启动后自动向注册中心注册服务
@EnableEurekaClient
// @EnableEurekaClient 开启服务发现客户端的注解,可以用来获取一些配置的信息,得到具体的微服务
@EnableDiscoveryClient
// @EnableCircuitBreaker 添加对熔断的支持
@EnableCircuitBreaker
public class DeptProviderHystrix_8001 {
public static void main(String[] args) {
SpringApplication.run(DeptProviderHystrix_8001.class,args);
}
//增加一个servlet,配合dashboard监控使用,固定的代码 http://localhost:8001/actuator/hystrix.stream访问监控
@Bean
public ServletRegistrationBean hystrixMetricsStreamServlet(){
ServletRegistrationBean servletRegistrationBean = new ServletRegistrationBean(new HystrixMetricsStreamServlet());
servletRegistrationBean.addUrlMappings("/actuator/hystrix.stream");
return servletRegistrationBean;
}
}
启动测试
测试
启动7001,8001,springcloud-consumer-hystrix-dashboard(9001)
访问http://localhost:8001/actuator/hystrix.stream,可以看到监控捕获到的内容
如无任何监控信息,访问localhost:8001/dept/get/1链接,查询一条值信息,可以看到会加载到一些监控信息
http://localhost:9001/hystrix 配置要监控的页面地址,时间及标题设置
点击Monitor Stream
访问成功后,可以看到一个可视化监控的面板,可以直观的看到一些监控到的信息
在8001服务中多次执行查询,会看到心跳会越来越大。随之也会缩小,波动值也会随之增加/减少
多次访问查询看效果。
遇到的坑
在springcloud-provider-dept-8001的主启动类中编写同样的代码
//启动类
@SpringBootApplication
// @EnableEurekaClient 开启Eureka客户端注解,在服务启动后自动向注册中心注册服务
@EnableEurekaClient
// @EnableEurekaClient 开启服务发现客户端的注解,可以用来获取一些配置的信息,得到具体的微服务
@EnableDiscoveryClient
public class DeptProviderHystrix_8001 {
public static void main(String[] args) {
SpringApplication.run(DeptProviderHystrix_8001.class,args);
}
//增加一个servlet,配合dashboard监控使用,固定的代码 http://localhost:8001/actuator/hystrix.stream访问监控
@Bean
public ServletRegistrationBean hystrixMetricsStreamServlet(){
ServletRegistrationBean servletRegistrationBean = new ServletRegistrationBean(new HystrixMetricsStreamServlet());
servletRegistrationBean.addUrlMappings("/actuator/hystrix.stream");
return servletRegistrationBean;
}
}
但是监控页面显示出现问题,因为主启动类没有加上注解
// @EnableCircuitBreaker 添加对熔断的支持
@EnableCircuitBreaker
如果页面显示还是出现问题,controller层进行服务熔断
@GetMapping("/dept/{id}")
@HystrixCommand(fallbackMethod = "hystrixcQueryById")
public Dept queryById(@PathVariable Long id) {
Dept dept = deptService.queryById(id);
if (dept == null) {
throw new RuntimeException("id=> " + id + "不存在该用户,或者该信息无法找到");
}
return dept;
}
public Dept hystrixcQueryById(@PathVariable Long id) {
return new Dept()
.setDeptno(id)
.setDname("id=> " + id + "没有找到相关信息,null by Hystrix")
.setDb_source("not found database in mysql");
}
监控配置的步骤总结
- 创建springcloud-consumer-hystrix-dashboard项目,复制springcloud-consumer-dept-80项目所有依赖,导入Hystrix和dashboard依赖
- 编写application.yml端口配置
- 配置监控的启动类,配置监控注解
- 切换至hystrix8001服务提供者项目,查看是否有 actuator相关监控信息依赖
- 要监控流,需要在hystrix8001启动类中配置流监控
- 启动注册中心,hystrix8001服务,9001监控测试
如何看监控页面各种数据
七色
一圆
实心圆: 共有两种含义,他通过颜色的变化代表了实例的健康程度
- 它的健康程度从绿色<黄色<橙色<红色递减
- 它的大小也会根据实例的请求流量发生变化,流量越大,该实心圆就
越大,所以通过该实心圆的展示,就可以在大量的实例中快速发现故障实例和高压力实例
一线
整图说明
zuul路由网关
概述
什么是zuul?
Zull包含了对请求的路由(用来跳转的)和过滤两个最主要功能:
其中路由功能负责将外部请求转发到具体的微服务实例上,是实现外部访问统一入口的基础,而过滤器功能则负责对请求的处理过程进行干预,是实现请求校验,服务聚合等功能的基础。Zuul和Eureka进行整合,将Zuul自身注册为Eureka服务治理下的应用,同时从Eureka中获得其他服务的消息,也即以后的访问微服务都是通过Zuul跳转后获得。
注意:Zuul 服务最终还是会注册进 Eureka
提供:代理 + 路由 + 过滤 三大功能!
Zuul 能干嘛?
- 路由
- 过滤
官方文档:https://github.com/Netflix/zuul/
为什么要建立Zuul
Netfix. API流量的数量和多样性有时会导致生产问题迅速出现而没有警告。我们需要一个允许我们快
速改支行为以对这些情况做出反应的系统。
Zuul使用了各种不同类型的过滤器,这使我们能够快速灵活地将功能应用于边缘服务。这些过滤器帮
助我们执行以下功能:
-
身份验证和安全性识别每个资源的身份验证要求,井拒绝不满足要求的请求。
-
见解和监控在边缘跟族有意义的数据和统计信息,以便为我们提供准确的生产规图。
-
动态路由根据需要将请求动态路由到不同的后端群集
-
压力测试逐渐增加到群集的流量以评估性能。
-
减载-小每种类型的清求分配容量,并丢弃超出限制的请求。
-
静态响应处理-直接在边缘构建一 些响应。而不是将其转发到内部集群
-
多区域弹性在AWS区域之间路由请求,以多样化我们的ELB使用并将我们的优势拉近我们的成员有关更多详细信
息:我们如何在Netfio中使用Zuul
Zuul组件
- zuul-core–zuul核心库,包含编译和执行过滤器的核心功能
- zuul-simple-webapp–zuul Web应用程序示例,展示了如何使用zuul-core构建应用程序
- zuul-netflix–lib包,将其他NetflixOSS组件添加到Zuul中,例如使用功能区进去路由请求处理
- zuul-netflix-webapp–webapp,它将zuul-core和zuul-netflix封装成一个简易的webapp工程包
Zuul实现
创建模块
在父工程下新建springcloud-zuul-9527普通maven项目
导入依赖
1、复制springcloud-consumer-hystrix-dashboard项目的所有pom依赖
2、添加自己的依赖
<!--导入zuul依赖-->
<dependency>
<groupId>org.springframework.cloud</groupId>
<artifactId>spring-cloud-starter-zuul</artifactId>
<version>1.4.6.RELEASE</version>
</dependency>
模块配置
application.yml
server:
port: 9527
spring:
application:
name: springcloud-zuul #微服务名称
# eureka 注册中心配置
eureka:
client:
service-url:
defaultZone: http://eureka7001.com:7001/eureka/,http://eureka7002.com:7002/eureka/,http://eureka7003.com:7003/eureka/
instance: #实例的id
instance-id: zuul9527.com
prefer-ip-address: true # 显示ip
info:
app.name: kuang-springcloud # 项目名称
company.name: blog.kuangstudy.com # 公司名称
主启动类
ZuulApplication_9527
@SpringBootApplication
@EnableZuulProxy // 开启Zuul
public class ZuulApplication_9527 {
public static void main(String[] args) {
SpringApplication.run(ZuulApplication_9527.class,args);
}
}
启动测试
启动:7001,hystrix-8001,9527
访问 http://eureka7001.com:7001/,hystrix-8001,9527服务成功注册
通过网关访问服务,要把服务名称改为小写,现在的8001服务名称是SPRINGCLOUD-PROVIDER-DEPT,所以改为小写后访问http://www.kuangstudy.com:9527/springcloud-provider-dept/dept/get/1
测试成功。
但是在实际的项目过程中,不应该把服务的名称springcloud-provider-dept暴漏出来,因此我们需要对zuul进行配置
模块配置
为了让服务名称不被暴漏出来,需要进行下面的配置
application.yml
zuul:
routes:
mydept.serviceId: springcloud-provider-dept
#之前的查询链接地址 http://www.kuangstudy.com:9527/springcloud-provider-dept/dept/get/1
#现在的查询链接地址,配置后为 http://www.kuangstudy.com:9527/mydept/dept/get/1
#两者都皆可访问(原路径+现配路径)。配置自定义的前缀后 可不让客户端知道真实的ip地址
mydept.path: /mydept/**
启动测试
重启9527服务
带服务名称,访问http://www.kuangstudy.com:9527/springcloud-provider-dept/dept/get/1
不带服务名称,访问http://www.kuangstudy.com:9527/mydept/dept/get/1
可以发现,服务名称已经隐藏。但是带名称的链接还是能够被访问,需要限制带服务名称的访问链接
模块配置
限制带有服务名称的访问链接
application.yml
zuul:
routes:
mydept.serviceId: springcloud-provider-dept
#之前的查询链接地址 http://www.kuangstudy.com:9527/springcloud-provider-dept/dept/get/1
#现在的查询链接地址,配置后为 http://www.kuangstudy.com:9527/mydept/dept/get/1
#两者都皆可访问(原路径+现配路径)。配置自定义的前缀后 可不让客户端知道真实的ip地址
mydept.path: /mydept/**
ignored-services: springcloud-provider-dept # 不能在使用这个路径进行访问了,忽略服务名称
启动测试
重启9527
访问http://www.kuangstudy.com:9527/springcloud-provider-dept/dept/get/1,发现访问失败,测试成功
模块配置
实际的开发过程中,微服务有很多,所以可以使用统配符号*限制所有的服务名称
配置访问前缀
zuul:
routes:
mydept.serviceId: springcloud-provider-dept
#之前的查询链接地址 http://www.kuangstudy.com:9527/springcloud-provider-dept/dept/get/1
#现在的查询链接地址,配置后为 http://www.kuangstudy.com:9527/mydept/dept/get/1
#两者都皆可访问(原路径+现配路径)。配置自定义的前缀后 可不让客户端知道真实的ip地址
mydept.path: /mydept/**
#ignored-services: springcloud-provider-dept # 不能在使用这个路径进行访问了,忽略服务名称
ignored-services: "*" 限制所有的微服务名称,忽略所有的微服务名称
# 设置公共的前缀 配置后的地址为:http://www.kuangstudy.com:9527/kuang/mydept/dept/get/1
prefix: /kuang
访问http://www.kuangstudy.com:9527/kuang/mydept/dept/get/1,成功
访问http://www.kuangstudy.com:9527/mydept/dept/get/1,失败,因为配置了前缀
访问http://www.kuangstudy.com:9527/springcloud-provider-dept/dept/get/1,失败,因为配置限制了名称
所有配置
application.yml
server:
port: 9527
spring:
application:
name: springcloud-zuul #微服务名称
# eureka 注册中心配置
eureka:
client:
service-url:
defaultZone: http://eureka7001.com:7001/eureka/,http://eureka7002.com:7002/eureka/,http://eureka7003.com:7003/eureka/
instance: #实例的id
instance-id: zuul9527.com
prefer-ip-address: true # 显示ip
info:
app.name: kuang-springcloud # 项目名称
company.name: blog.kuangstudy.com # 公司名称
zuul:
routes:
mydept.serviceId: springcloud-provider-dept
#之前的查询链接地址 http://www.kuangstudy.com:9527/springcloud-provider-dept/dept/get/1
#现在的查询链接地址,配置后为 http://www.kuangstudy.com:9527/mydept/dept/get/1
#两者都皆可访问(原路径+现配路径)。配置自定义的前缀后 可不让客户端知道真实的ip地址
mydept.path: /mydept/**
ignored-services: springcloud-provider-dept # 不能在使用这个路径进行访问了,忽略服务名称
#ignored-services: "*" 限制所有的微服务名称,忽略所有的微服务名称
# 设置公共的前缀 配置后的地址为:http://www.kuangstudy.com:9527/kuang/mydept/dept/get/1
prefix: /kuang
SpringCloudConfig分布式配置(CS架构)
Spring Cloud Config为分布式系统中的外部配置提供服务器和客户端支持。使用Config Server,您可以在所有环境中管理应用程序的外部属性。客户端和服务器上的概念映射与Spring Environment
和PropertySource
抽象相同,因此它们与Spring应用程序非常契合,但可以与任何以任何语言运行的应用程序一起使用。随着应用程序通过从开发人员到测试和生产的部署流程,您可以管理这些环境之间的配置,并确定应用程序具有迁移时需要运行的一切。服务器存储后端的默认实现使用git,因此它轻松支持标签版本的配置环境,以及可以访问用于管理内容的各种工具。很容易添加替代实现,并使用Spring配置将其插入
概述
分布式系统面临的–配置文件问题
微服务意味着要将单体应用中的业务拆分成一个个子服务,每个服务的粒度相对较小,因此系统中会出现大量的服务,由于每个服务都需要必要的配置信息才能运行,所以一套集中式的,动态的配置管理设施是必不可少的。spring cloud提供了configServer来解决这个问题,我们每一个微服务自己带着一个application.yml,那上百个的配置文件修改起来,令人头疼!
什么是分布式配置中心?
spring cloud config 为微服务架构中的微服务提供集中化的外部支持,配置服务器为各个不同微服务应用的所有环节提供了一个中心化的外部配置。
spring cloud config 分为服务端和客户端两部分。
服务端也称为 分布式配置中心,它是一个独立的微服务应用,用来连接配置服务器并为客户端提供获取配置信息,加密,解密信息等访问接口。
客户端则是通过指定的配置中心来管理应用资源,以及与业务相关的配置内容,并在启动的时候从配置中心获取和加载配置信息。配置服务器默认采用git来存储配置信息,这样就有助于对环境配置进行版本管理。并且可用通过git客户端工具来方便的管理和访问配置内容。
分布式配置中心能干嘛?
- 集中式管理配置文件
- 不同环境,不同配置,动态化的配置更新,分环境部署,比如 /dev /test /prod /beta /release
- 运行期间动态调整配置,不再需要在每个服务部署的机器上编写配置文件,服务会向配置中心统一拉取配置自己的信息
- 当配置发生变动时,服务不需要重启,即可感知到配置的变化,并应用新的配置(需要热部署)
- 将配置信息以REST接口的形式暴露
分布式配置中心与GitHub整合
由于spring cloud config 默认使用git来存储配置文件 (也有其他方式,比如自持SVN 和本地文件),但是最推荐的还是git ,而且使用的是 http / https 访问的形式。
springcloudconfig环境搭建
git环境配置
下载git客户端
按照网上教程,下载git客户端即可,很简单
gitee码云
登录/注册账号
访问https://gitee.com,如果有账号,进行登录,否则注册
创建仓库
复制仓库的ssh地址
本地git拉取资源
在电脑新建文件夹,用GitBash工具 执行 git clone springcloud-config复制的SSH地址,进行拉取仓库内容,拉去后选择yes
此时我们已经拿到远程的代码
如果拉取失败,显示权限不存在,需要配置当前Git,如果能够成功拉取,则不需要
配置权限
Git大全 [https://gitee.com/all-about-git
# 显示当前的Git配置
$ git config --list
# 设置提交代码时的用户信息
$ git config --global user.name "[name]"
$ git config --global user.email "[email address]"
复制仓库中的 https 中的地址,直接 在 GitBash中,git clone 复制的地址
可能需要配置密钥等操作,在网上搜索即可
创建配置文件
在刚才拉取到本地的仓库目录下创建配置文件
编辑配置文件,打开application.yml文件,进行编辑
spring:
profiles:
active: dev
---
spring:
profiles: dev
application:
name: springcloud-config-dev
---
spring:
profiles: test
application:
name: springcloud-config-test
提交git
GitBash打开命令工具
cd 至 springcloud-config
git add . 将文件添加到暂存区
git status 查看状态
git commit -m “一次提交” 本地提交,-m为提交时写的信息
git push origin master 提交到远程的当前路径分枝
当前的application.yml已成功push添加至远程仓库中
服务端连接git配置
新建模块
在父工程下新建springcloud-config-server-3344普通maven模块
添加依赖
<dependencies>
<!--springboot启动-->
<dependency>
<groupId>org.springframework.boot</groupId>
<artifactId>spring-boot-starter-web</artifactId>
</dependency>
<!--springcloud-config的配置-->
<dependency>
<groupId>org.springframework.cloud</groupId>
<artifactId>spring-cloud-config-server</artifactId>
<version>2.1.1.RELEASE</version>
</dependency>
<!--监控信息 可不加-->
<dependency>
<groupId>org.springframework.boot</groupId>
<artifactId>spring-boot-starter-actuator</artifactId>
</dependency>
</dependencies>
模块配置
resource下创建application.yml配置文件,Spring Cloud Config服务器从git存储库(必须提供)为远程客户端提供配置
application.yml
server:
port: 3344
spring:
application:
name: springcloud-config-server
cloud:
config:
server:
git:
#自己远程仓库的https地址,注意是https的而不是ssh
# 通过 config-server可以连接到git,访问其中的资源以及配置~
uri: https://gitee.com/jinjiahuangitee/springcloud-config.git
主启动类
Config_Server_3344
@SpringBootApplication
// 开启spring cloud config server服务
@EnableConfigServer
public class Config_Server_3344 {
public static void main(String[] args) {
SpringApplication.run(Config_Server_3344.class,args);
}
}
访问形式
位资源的默认策略是克隆一个git仓库(在spring.cloud.config.server.git.uri
),并使用它来初始化一个迷你SpringApplication
。小应用程序的Environment
用于枚举属性源并通过JSON端点发布。
/{application}/{profile}[/{label}]
/{application}-{profile}.yml
/{label}/{application}-{profile}.yml
/{application}-{profile}.properties
/{label}/{application}-{profile}.properties
其中“应用程序”作为SpringApplication
中的spring.config.name
注入(即常规的Spring Boot应用程序中通常是“应用程序”),“配置文件”是活动配置文件(或逗号分隔列表的属性),“label”是可选的git标签(默认为“master”)。
启动测试
启动springcloud-config-server-3344
git远程服务器的配置文件内容,目前激活的文件是dev
访问http://localhost:3344/application-dev.yml,成功访问到被激活的文件
现在我们访问没有被激活的文件http://localhost:3344/application-test.yml
测试访问 http://localhost:3344/application/test/master
测试访问 http://localhost:3344/master/application-dev.yml
如果测试访问不存在的配置则不显示 如:http://localhost:3344/master/application-aaa.yml
客户端连接服务端远程访问
提交远程仓库
将本地git仓库springcloud-config文件夹下新建的config-client.yml提交到码云仓库
编写内容config-client.yml
#启动环境选择的配置
spring:
profiles:
active: dev
#springboot启动多环境的配置
---
server:
port: 8201
#spring的配置
spring:
profiles: dev
application:
name: springcloud-config-client-dev
#Eureka的配置。 服务注册到Eureka中,需要一个路径地址
eureka:
client:
service-url:
defaultZone: http://eureka7001.com:7001/eureka/
---
server:
port: 8202
#spring的配置
spring:
profiles: test
application:
name: springcloud-config-client-test
#Eureka的配置。 服务注册到Eureka中,需要一个路径地址
eureka:
client:
service-url:
defaultZone: http://eureka7001.com:7001/eureka/
提交config-client.yml文件
远程查看
客户端实现
新建模块
新建一个springcloud-config-client-3355普通maven模块
添加依赖
<dependencies>
<dependency>
<groupId>org.springframework.cloud</groupId>
<artifactId>spring-cloud-starter-config</artifactId>
<version>2.1.1.RELEASE</version>
</dependency>
<dependency>
<groupId>org.springframework.boot</groupId>
<artifactId>spring-boot-starter-actuator</artifactId>
</dependency>
<dependency>
<groupId>org.springframework.boot</groupId>
<artifactId>spring-boot-starter-web</artifactId>
</dependency>
</dependencies>
模块配置
resources下创建application.yml和bootstrap.yml配置文件
区别:
- bootstrap.yml 是系统级别的配置
- application.yml 是用户级别的配置
- bootstrap.yml的级别要高于application.yml
bootstrap.yml
# 系统级别的配置
spring:
cloud:
config:
# 需要从git上读取的资源名称,不要后缀(.yml)
# 通过name,profile,label,相当于/config-client/test/masterl获取配置文件的链接
name: config-client
profile: dev #dev环境端口:8201 test环境端口:8202
label: master #需要在git上的哪个分支拿
#连接到3344服务,中转站的形式连接服务端访问远程地址
uri: http://localhost:3344
application.yml
# 用户级别的配置
spring:
application:
name: springcloud-config-client
controller层
创建controller包下的ConfigClientController.java 用于测试
ConfigClientController
@RestController
public class ConfigClientController {
//@Value为git上的client-config的值
@Value("${spring.application.name}")
private String applicationName; //获取微服务名称
@Value("${eureka.client.service-url.defaultZone}")
private String eurekaServer; //获取Eureka服务
@Value("${server.port}")
private String port; //获取服务端的端口号
@RequestMapping("/config")
public String getConfig(){
return "applicationName:"+applicationName +
"eurekaServer:"+eurekaServer +
"port:"+port;
}
}
主启动类
ConfigClient
@SpringBootApplication
public class ConfigClient {
public static void main(String[] args) {
SpringApplication.run(ConfigClient.class,args);
}
}
启动测试
测试
启动3344服务端,3355客户端
git远程的配置文件内容,此时激活的是dev环境
此时我们配置的也是dev环境的配置文件
此时3355客户端的应用名称是springcloud-config-client
访问http://localhost:3344/application-dev.yml,服务端能够成功获取配置文件
访问http://localhost:8201/config/,客户端成功通过服务端拿到git远程配置文件
配置文件优先级
可以发现,我们成功拿到dev环境的配置文件,但是服务名是springcloud-config-client-dev,所以得出结论,远程的配置文件级别比本地的application.yml级别的配置文件高,同样的配置,本地的配置会失效
测试能够获得未激活的配置文件
如果我们配置的是test环境的文件,远程激活的文件是dev环境,我们是否能够成功拿到test环境的配置文件
修改bootstrap.yml
重启3355,再次访问激活的dev环境配置的路径http://localhost:8201/config,已经链接失败
访问test环境配置的链接路径http://localhost:8202/config,访问成功
说明远程虽然激活了dev环境,但是本地配置了使用test环境的配置文件,仍然可以获取配置并且生效
远程配置实战测试
现在父工程下很多springboot微服务的配置都是一样的,改动起来需要一个一个的改,很麻烦。所以我们通过springcloudconfigserver配置,将配置文件放到git远程仓库,让多个微服务共享一个配置文件,这样只在远程仓库修改配置文件,供所有共享这个文件的服务使用并生效
新建配置文件并提交
本地新建config-eureka.yml和config-dept.yml并提交到码云仓库
config-eureka.yml
spring:
profiles:
avtive: dev
---
server:
port: 7001
#spring的配置
spring:
profiles: dev
application:
name: springcloud-config-eureka-dev
#Eureka配置
eureka:
instance:
hostname: eureka7001.com # Eureka服务端的实例名称
client:
# 表示是否向eureka注册中心注册自己,因为这个模块就是在写eureka服务器,所以不用注册自己
register-with-eureka: false
fetch-registry: false #如果为false,表示自己为注册中心
service-url: # 简单理解就是监控页面
# 点进去参考源码,可看到默认的url端口配置为8761,我们设置为自己的端口。
# 其他服务通过这个地址进行注册
# 单机配置
# defaultZone: http://${eureka.instance.hostname}:${server.port}/eureka
# 集群配置(除自身外 关联其他所有),本注册中心服务要与7002和7003关联起来
defaultZone: http://eureka7002.com:7002/eureka/,http://eureka7003.com:7003/eureka/
---
server:
port: 7001
#spring的配置
spring:
profiles: test
application:
name: springcloud-config-eureka-test
#Eureka配置
eureka:
instance:
hostname: eureka7001.com # Eureka服务端的实例名称
client:
# 表示是否向eureka注册中心注册自己,因为这个模块就是在写eureka服务器,所以不用注册自己
register-with-eureka: false
fetch-registry: false #如果为false,表示自己为注册中心
service-url: # 简单理解就是监控页面
# 点进去参考源码,可看到默认的url端口配置为8761,我们设置为自己的端口。
# 其他服务通过这个地址进行注册
# 单机配置
# defaultZone: http://${eureka.instance.hostname}:${server.port}/eureka
# 集群配置(除自身外 关联其他所有),本注册中心服务要与7002和7003关联起来
defaultZone: http://eureka7002.com:7002/eureka/,http://eureka7003.com:7003/eureka/
config-dept.yml
# 端口号
#启动环境选择的配置
spring:
profiles:
active: dev
---
server:
port: 8001
# mybatis配置
mybatis:
# 类型别名映射
type-aliases-package: com.jjh.springcloud.pojo
config-location: classpath:mybatis/mybatis-config.xml
mapper-locations: classpath:mybatis/mapper/*.xml
# spring配置
spring:
profiles: dev
application:
name: springcloud-config-dept-dev
# 数据源的配置
datasource:
type: com.alibaba.druid.pool.DruidDataSource
driver-class-name: com.mysql.jdbc.Driver #数据库驱动
url: jdbc:mysql://localhost:3306/db01?useUnicode=true&characterEncoding=utf-8&servetTimeZone=Asia/Shanghai
username: root
password: 123456
# Eureka配置:配置服务注册中心地址
eureka:
client:
service-url:
# 服务注册中心地址
# defaultZone: http://localhost:7001/eureka/
defaultZone: http://eureka7001.com:7001/eureka/,http://eureka7002.com:7002/eureka/,http://eureka7003.com:7003/eureka/
instance:
instance-id: springcloud-provider-dept-8001 # 修改eureka的默认描述信息
# 改为true后Eureka的status栏就会显示真实的ip地址,默认是false,不显示
prefer-ip-address: true
# info配置 Eureka的status的xx/info链接点开后的info监控信息。没有太大意义
info:
app.name: kuangshen-springcloud
company.name: com.jjh
test.name: com.jjh.test
---
server:
port: 8001
# mybatis配置
mybatis:
# 类型别名映射
type-aliases-package: com.jjh.springcloud.pojo
config-location: classpath:mybatis/mybatis-config.xml
mapper-locations: classpath:mybatis/mapper/*.xml
# spring配置
spring:
profiles: test
application:
name: springcloud-config-dept-test
# 数据源的配置
datasource:
type: com.alibaba.druid.pool.DruidDataSource
driver-class-name: com.mysql.jdbc.Driver #数据库驱动
url: jdbc:mysql://localhost:3306/db02?useUnicode=true&characterEncoding=utf-8&servetTimeZone=Asia/Shanghai
username: root
password: 123456
# Eureka配置:配置服务注册中心地址
eureka:
client:
service-url:
# 服务注册中心地址
# defaultZone: http://localhost:7001/eureka/
defaultZone: http://eureka7001.com:7001/eureka/,http://eureka7002.com:7002/eureka/,http://eureka7003.com:7003/eureka/
instance:
instance-id: springcloud-provider-dept-8001 # 修改eureka的默认描述信息
# 改为true后Eureka的status栏就会显示真实的ip地址,默认是false,不显示
prefer-ip-address: true
# info配置 Eureka的status的xx/info链接点开后的info监控信息。没有太大意义
info:
app.name: kuangshen-springcloud
company.name: com.jjh
test.name: com.jjh.test
提交到git仓库
环境搭建
eureka注册中心服务环境搭建
新建模块
创建springcloud-config-eureka-7001的普通maven模块,和springcloud-eureka-7001的区别就是,springcloud-config-eureka-7001是从远程仓库读取配置文件,springcloud-eureka-7001是从本地读取的配置文件。其他的地方没有区别
导入依赖
导入springcloud-eureka-7001依赖
<!--导包~-->
<dependencies>
<!-- https://mvnrepository.com/artifact/org.springframework.cloud/spring-cloud-starter-eureka-server -->
<!--导入Eureka Server依赖-->
<dependency>
<groupId>org.springframework.cloud</groupId>
<artifactId>spring-cloud-starter-eureka-server</artifactId>
<version>1.4.6.RELEASE</version>
</dependency>
<!--热部署工具-->
<dependency>
<groupId>org.springframework.boot</groupId>
<artifactId>spring-boot-devtools</artifactId>
</dependency>
</dependencies>
导入springcloud-config启动的配置依赖
<dependency>
<groupId>org.springframework.cloud</groupId>
<artifactId>spring-cloud-starter-config</artifactId>
<version>2.1.1.RELEASE</version>
</dependency>
模块配置
复制 springcloud-eureka-7001项目所有的内容
拷贝成功
删掉application.yml所有配置,因为此配置已经在git远程仓库中配置,添加以下的配置内容
application.yml
spring:
application:
name: springcloud-config-eureka-7001
创建bootstrap.yml 注意创建此yml一定要导入springcloud-config的配置依赖
spring:
cloud:
config:
name: config-eureka # 需要从git上读取的资源名称,不要后缀
label: master #需要在git上的哪个分支拿
profile: dev #dev环境/test环境
uri: http://localhost:3344 #连接到3344服务,中转站的形式连接服务端访问远程地址
启动测试
启动springcloud-config-server-3344服务端,测试是否能够从远程仓库拿到指定的配置文件
访问http://localhost:3344/config-eureka-dev.yml,成功拿到配置文件
启动springcloud-config-eureka-7001,测试是否能够通过3344服务拿到远程的配置文件并成功启动注册中心
访问http://eureka7001.com:7001/,注册中心启动成功
ok 通过客户端 调用 服务端 以中转站的形式连接服务端访问远程地址 配置Eureka成功
dept服务提供者环境搭建
新建模块
创建springcloud-config-dept-8001普通maven模块,远程访问仓库实现8001服务提供者
添加依赖
复制 springcloud-provider-dept-8001 项目所有的内容及依赖
拷贝springcloud-provider-dept-8001依赖,并添加springcloudcofig配置依赖
<dependencies>
<!--我们需要拿到实体类,所以要配置api module-->
<dependency>
<groupId>com.jjh</groupId>
<artifactId>springcloud-api</artifactId>
<version>1.0-SNAPSHOT</version>
</dependency>
<!--junit-->
<dependency>
<groupId>junit</groupId>
<artifactId>junit</artifactId>
<scope>test</scope>
</dependency>
<dependency>
<groupId>mysql</groupId>
<artifactId>mysql-connector-java</artifactId>
</dependency>
<dependency>
<groupId>com.alibaba</groupId>
<artifactId>druid</artifactId>
</dependency>
<dependency>
<groupId>ch.qos.logback</groupId>
<artifactId>logback-core</artifactId>
</dependency>
<dependency>
<groupId>org.mybatis.spring.boot</groupId>
<artifactId>mybatis-spring-boot-starter</artifactId>
</dependency>
<!--test-->
<dependency>
<groupId>org.springframework.boot</groupId>
<artifactId>spring-boot-test</artifactId>
</dependency>
<dependency>
<groupId>org.springframework.boot</groupId>
<artifactId>spring-boot-starter-web</artifactId>
</dependency>
<!--jetty-->
<dependency>
<groupId>org.springframework.boot</groupId>
<artifactId>spring-boot-starter-jetty</artifactId>
</dependency>
<!--热部署工具-->
<dependency>
<groupId>org.springframework.boot</groupId>
<artifactId>spring-boot-devtools</artifactId>
</dependency>
<!--Eureka依赖-->
<!-- https://mvnrepository.com/artifact/org.springframework.cloud/spring-cloud-starter-eureka -->
<dependency>
<groupId>org.springframework.cloud</groupId>
<artifactId>spring-cloud-starter-eureka</artifactId>
<version>1.4.6.RELEASE</version>
</dependency>
<!--完善监控信息-->
<!--Eureka的status链接xx/info点击后监控信息-->
<dependency>
<groupId>org.springframework.boot</groupId>
<artifactId>spring-boot-starter-actuator</artifactId>
</dependency>
</dependencies>
<!--springcloudconfig配置依赖-->
<dependency>
<groupId>org.springframework.cloud</groupId>
<artifactId>spring-cloud-starter-config</artifactId>
<version>2.1.1.RELEASE</version>
</dependency>
拷贝内容
复制成功
模块配置
删掉application.yml所有配置,因为此配置已经在git远程仓库中配置,添加以下的配置内容
spring:
application:
name: springcloud-config-dept-8001
创建bootstrap.yml 注意创建此yml一定要导入springcloud-config的配置依赖
#系统级的配置
# 系统级别的配置
spring:
cloud:
config:
name: config-dept # 需要从git上读取的资源名称,不要后缀
profile: dev #dev环境端口:8201 test环境端口:8202
label: master #需要在git上的哪个分支拿
#连接到3344服务,中转站的形式连接服务端访问远程地址
uri: http://localhost:3344
启动测试
启动springcloud-config-dept-8001
访问http://eureka7001.com:7001/,成功通过3355服务读取到远程配置文件并在rureka注册中心注册成功
访问http://localhost:8001/dept/get/1,成功获取数据,dev环境使用的是db01数据库
现在获取的配置文件是dev环境,使用的数据库是db01,现在我们改成test环境(数据库使用的是db02)
重启/热部署(需要导入依赖)springcloud-config-dept-8001服务
访问http://localhost:8001/dept/get/7,成功获取test环境,使用的数据库db02
完结,撒花
springcloud基本使用步骤
1、导入依赖
2、添加配置
3、开启注解支持@Enablexxx