大型单体应用拆分成多个独立部署运行的微服务(解决并发问题)
6、Feign和Dubbo
Feign是一个声明式的Web服务客户端,它使得编写HTTP客户端变得更简单
Feign集成了Ribbon和Hystrix,可以方便地实现服务发现和负载均衡
Dubbo是一个高性能的RPC框架,它提供了丰富的配置和容错机制,适合大规模分布式系统
Dubbo通过RPC调用实现远程调用,支持多种传输协议,如Dubbo、RMI、HTTP、Redis等,可以根据业务场景选择最佳的方式,非常灵活。Dubbo在性能上有优势,
它通过TCP长连接的方式进行通信,服务粒度是方法级的,适合数据量小、高并发和服务提供者远远少于消费者的场景。
注意:es 数据秒查、MongDB存日志 随便丢,
网关限流,做转发(统一认证、日志处理、统一结果集、全局降级处理),基于WebFlux不能整合mysql
Spring Cloud Gateway | Api网关 |
Spring Cloud OpenFeign | 远程调用 |
Spring Cloud Security | 用户认证、服务认证 |
Spring Cloud Sleuth(少) | 链路追踪 |
Spring Cloud Stream(少) | 做统一的消息管理 |
Sentinel | 把流量作为切入点,从流量控制、熔断降级、系统负载保护等多个维度保护服务的稳定性 |
Nacos | 一个更易于构建云原生应用的动态服务发现、配置管理和服务管理平台。(注册中心、配置中心)(解决服务治理问题) |
RocketMQ | 一款开源的分布式消息系统(数据),基于高可用分布式集群技术,提供低延时的、高可靠的消息发布与订阅服务。(异步消息 不阻塞) |
Seata | 阿里巴巴开源产品,一个易于使用的高性能微服务分布式事务解决方案 |
Sentinel注意:Feign和Dubbo属于同步消息,同步消息(需要等待响应), 异步消息(不阻塞,类似发短信)
两个位置
/*
* Copyright 1999-2018 Alibaba Group Holding Ltd.
*
* Licensed under the Apache License, Version 2.0 (the "License");
* you may not use this file except in compliance with the License.
* You may obtain a copy of the License at
*
* http://www.apache.org/licenses/LICENSE-2.0
*
* Unless required by applicable law or agreed to in writing, software
* distributed under the License is distributed on an "AS IS" BASIS,
* WITHOUT WARRANTIES OR CONDITIONS OF ANY KIND, either express or implied.
* See the License for the specific language governing permissions and
* limitations under the License.
*/
/******************************************/
/* 数据库全名 = nacos_config */
/* 表名称 = config_info */
/******************************************/
CREATE TABLE `config_info` (
`id` bigint(20) NOT NULL AUTO_INCREMENT COMMENT 'id',
`data_id` varchar(255) NOT NULL COMMENT 'data_id',
`group_id` varchar(128) DEFAULT NULL,
`content` longtext NOT NULL COMMENT 'content',
`md5` varchar(32) DEFAULT NULL COMMENT 'md5',
`gmt_create` datetime NOT NULL DEFAULT CURRENT_TIMESTAMP COMMENT '创建时间',
`gmt_modified` datetime NOT NULL DEFAULT CURRENT_TIMESTAMP COMMENT '修改时间',
`src_user` text COMMENT 'source user',
`src_ip` varchar(50) DEFAULT NULL COMMENT 'source ip',
`app_name` varchar(128) DEFAULT NULL,
`tenant_id` varchar(128) DEFAULT '' COMMENT '租户字段',
`c_desc` varchar(256) DEFAULT NULL,
`c_use` varchar(64) DEFAULT NULL,
`effect` varchar(64) DEFAULT NULL,
`type` varchar(64) DEFAULT NULL,
`c_schema` text,
`encrypted_data_key` text NOT NULL COMMENT '密钥',
PRIMARY KEY (`id`),
UNIQUE KEY `uk_configinfo_datagrouptenant` (`data_id`,`group_id`,`tenant_id`)
) ENGINE=InnoDB DEFAULT CHARSET=utf8 COLLATE=utf8_bin COMMENT='config_info';
/******************************************/
/* 数据库全名 = nacos_config */
/* 表名称 = config_info_aggr */
/******************************************/
CREATE TABLE `config_info_aggr` (
`id` bigint(20) NOT NULL AUTO_INCREMENT COMMENT 'id',
`data_id` varchar(255) NOT NULL COMMENT 'data_id',
`group_id` varchar(128) NOT NULL COMMENT 'group_id',
`datum_id` varchar(255) NOT NULL COMMENT 'datum_id',
`content` longtext NOT NULL COMMENT '内容',
`gmt_modified` datetime NOT NULL COMMENT '修改时间',
`app_name` varchar(128) DEFAULT NULL,
`tenant_id` varchar(128) DEFAULT '' COMMENT '租户字段',
PRIMARY KEY (`id`),
UNIQUE KEY `uk_configinfoaggr_datagrouptenantdatum` (`data_id`,`group_id`,`tenant_id`,`datum_id`)
) ENGINE=InnoDB DEFAULT CHARSET=utf8 COLLATE=utf8_bin COMMENT='增加租户字段';
/******************************************/
/* 数据库全名 = nacos_config */
/* 表名称 = config_info_beta */
/******************************************/
CREATE TABLE `config_info_beta` (
`id` bigint(20) NOT NULL AUTO_INCREMENT COMMENT 'id',
`data_id` varchar(255) NOT NULL COMMENT 'data_id',
`group_id` varchar(128) NOT NULL COMMENT 'group_id',
`app_name` varchar(128) DEFAULT NULL COMMENT 'app_name',
`content` longtext NOT NULL COMMENT 'content',
`beta_ips` varchar(1024) DEFAULT NULL COMMENT 'betaIps',
`md5` varchar(32) DEFAULT NULL COMMENT 'md5',
`gmt_create` datetime NOT NULL DEFAULT CURRENT_TIMESTAMP COMMENT '创建时间',
`gmt_modified` datetime NOT NULL DEFAULT CURRENT_TIMESTAMP COMMENT '修改时间',
`src_user` text COMMENT 'source user',
`src_ip` varchar(50) DEFAULT NULL COMMENT 'source ip',
`tenant_id` varchar(128) DEFAULT '' COMMENT '租户字段',
`encrypted_data_key` text NOT NULL COMMENT '密钥',
PRIMARY KEY (`id`),
UNIQUE KEY `uk_configinfobeta_datagrouptenant` (`data_id`,`group_id`,`tenant_id`)
) ENGINE=InnoDB DEFAULT CHARSET=utf8 COLLATE=utf8_bin COMMENT='config_info_beta';
/******************************************/
/* 数据库全名 = nacos_config */
/* 表名称 = config_info_tag */
/******************************************/
CREATE TABLE `config_info_tag` (
`id` bigint(20) NOT NULL AUTO_INCREMENT COMMENT 'id',
`data_id` varchar(255) NOT NULL COMMENT 'data_id',
`group_id` varchar(128) NOT NULL COMMENT 'group_id',
`tenant_id` varchar(128) DEFAULT '' COMMENT 'tenant_id',
`tag_id` varchar(128) NOT NULL COMMENT 'tag_id',
`app_name` varchar(128) DEFAULT NULL COMMENT 'app_name',
`content` longtext NOT NULL COMMENT 'content',
`md5` varchar(32) DEFAULT NULL COMMENT 'md5',
`gmt_create` datetime NOT NULL DEFAULT CURRENT_TIMESTAMP COMMENT '创建时间',
`gmt_modified` datetime NOT NULL DEFAULT CURRENT_TIMESTAMP COMMENT '修改时间',
`src_user` text COMMENT 'source user',
`src_ip` varchar(50) DEFAULT NULL COMMENT 'source ip',
PRIMARY KEY (`id`),
UNIQUE KEY `uk_configinfotag_datagrouptenanttag` (`data_id`,`group_id`,`tenant_id`,`tag_id`)
) ENGINE=InnoDB DEFAULT CHARSET=utf8 COLLATE=utf8_bin COMMENT='config_info_tag';
/******************************************/
/* 数据库全名 = nacos_config */
/* 表名称 = config_tags_relation */
/******************************************/
CREATE TABLE `config_tags_relation` (
`id` bigint(20) NOT NULL COMMENT 'id',
`tag_name` varchar(128) NOT NULL COMMENT 'tag_name',
`tag_type` varchar(64) DEFAULT NULL COMMENT 'tag_type',
`data_id` varchar(255) NOT NULL COMMENT 'data_id',
`group_id` varchar(128) NOT NULL COMMENT 'group_id',
`tenant_id` varchar(128) DEFAULT '' COMMENT 'tenant_id',
`nid` bigint(20) NOT NULL AUTO_INCREMENT,
PRIMARY KEY (`nid`),
UNIQUE KEY `uk_configtagrelation_configidtag` (`id`,`tag_name`,`tag_type`),
KEY `idx_tenant_id` (`tenant_id`)
) ENGINE=InnoDB DEFAULT CHARSET=utf8 COLLATE=utf8_bin COMMENT='config_tag_relation';
/******************************************/
/* 数据库全名 = nacos_config */
/* 表名称 = group_capacity */
/******************************************/
CREATE TABLE `group_capacity` (
`id` bigint(20) unsigned NOT NULL AUTO_INCREMENT COMMENT '主键ID',
`group_id` varchar(128) NOT NULL DEFAULT '' COMMENT 'Group ID,空字符表示整个集群',
`quota` int(10) unsigned NOT NULL DEFAULT '0' COMMENT '配额,0表示使用默认值',
`usage` int(10) unsigned NOT NULL DEFAULT '0' COMMENT '使用量',
`max_size` int(10) unsigned NOT NULL DEFAULT '0' COMMENT '单个配置大小上限,单位为字节,0表示使用默认值',
`max_aggr_count` int(10) unsigned NOT NULL DEFAULT '0' COMMENT '聚合子配置最大个数,,0表示使用默认值',
`max_aggr_size` int(10) unsigned NOT NULL DEFAULT '0' COMMENT '单个聚合数据的子配置大小上限,单位为字节,0表示使用默认值',
`max_history_count` int(10) unsigned NOT NULL DEFAULT '0' COMMENT '最大变更历史数量',
`gmt_create` datetime NOT NULL DEFAULT CURRENT_TIMESTAMP COMMENT '创建时间',
`gmt_modified` datetime NOT NULL DEFAULT CURRENT_TIMESTAMP COMMENT '修改时间',
PRIMARY KEY (`id`),
UNIQUE KEY `uk_group_id` (`group_id`)
) ENGINE=InnoDB DEFAULT CHARSET=utf8 COLLATE=utf8_bin COMMENT='集群、各Group容量信息表';
/******************************************/
/* 数据库全名 = nacos_config */
/* 表名称 = his_config_info */
/******************************************/
CREATE TABLE `his_config_info` (
`id` bigint(20) unsigned NOT NULL,
`nid` bigint(20) unsigned NOT NULL AUTO_INCREMENT,
`data_id` varchar(255) NOT NULL,
`group_id` varchar(128) NOT NULL,
`app_name` varchar(128) DEFAULT NULL COMMENT 'app_name',
`content` longtext NOT NULL,
`md5` varchar(32) DEFAULT NULL,
`gmt_create` datetime NOT NULL DEFAULT CURRENT_TIMESTAMP,
`gmt_modified` datetime NOT NULL DEFAULT CURRENT_TIMESTAMP,
`src_user` text,
`src_ip` varchar(50) DEFAULT NULL,
`op_type` char(10) DEFAULT NULL,
`tenant_id` varchar(128) DEFAULT '' COMMENT '租户字段',
`encrypted_data_key` text NOT NULL COMMENT '密钥',
PRIMARY KEY (`nid`),
KEY `idx_gmt_create` (`gmt_create`),
KEY `idx_gmt_modified` (`gmt_modified`),
KEY `idx_did` (`data_id`)
) ENGINE=InnoDB DEFAULT CHARSET=utf8 COLLATE=utf8_bin COMMENT='多租户改造';
/******************************************/
/* 数据库全名 = nacos_config */
/* 表名称 = tenant_capacity */
/******************************************/
CREATE TABLE `tenant_capacity` (
`id` bigint(20) unsigned NOT NULL AUTO_INCREMENT COMMENT '主键ID',
`tenant_id` varchar(128) NOT NULL DEFAULT '' COMMENT 'Tenant ID',
`quota` int(10) unsigned NOT NULL DEFAULT '0' COMMENT '配额,0表示使用默认值',
`usage` int(10) unsigned NOT NULL DEFAULT '0' COMMENT '使用量',
`max_size` int(10) unsigned NOT NULL DEFAULT '0' COMMENT '单个配置大小上限,单位为字节,0表示使用默认值',
`max_aggr_count` int(10) unsigned NOT NULL DEFAULT '0' COMMENT '聚合子配置最大个数',
`max_aggr_size` int(10) unsigned NOT NULL DEFAULT '0' COMMENT '单个聚合数据的子配置大小上限,单位为字节,0表示使用默认值',
`max_history_count` int(10) unsigned NOT NULL DEFAULT '0' COMMENT '最大变更历史数量',
`gmt_create` datetime NOT NULL DEFAULT CURRENT_TIMESTAMP COMMENT '创建时间',
`gmt_modified` datetime NOT NULL DEFAULT CURRENT_TIMESTAMP COMMENT '修改时间',
PRIMARY KEY (`id`),
UNIQUE KEY `uk_tenant_id` (`tenant_id`)
) ENGINE=InnoDB DEFAULT CHARSET=utf8 COLLATE=utf8_bin COMMENT='租户容量信息表';
CREATE TABLE `tenant_info` (
`id` bigint(20) NOT NULL AUTO_INCREMENT COMMENT 'id',
`kp` varchar(128) NOT NULL COMMENT 'kp',
`tenant_id` varchar(128) default '' COMMENT 'tenant_id',
`tenant_name` varchar(128) default '' COMMENT 'tenant_name',
`tenant_desc` varchar(256) DEFAULT NULL COMMENT 'tenant_desc',
`create_source` varchar(32) DEFAULT NULL COMMENT 'create_source',
`gmt_create` bigint(20) NOT NULL COMMENT '创建时间',
`gmt_modified` bigint(20) NOT NULL COMMENT '修改时间',
PRIMARY KEY (`id`),
UNIQUE KEY `uk_tenant_info_kptenantid` (`kp`,`tenant_id`),
KEY `idx_tenant_id` (`tenant_id`)
) ENGINE=InnoDB DEFAULT CHARSET=utf8 COLLATE=utf8_bin COMMENT='tenant_info';
CREATE TABLE `users` (
`username` varchar(50) NOT NULL PRIMARY KEY,
`password` varchar(500) NOT NULL,
`enabled` boolean NOT NULL
);
CREATE TABLE `roles` (
`username` varchar(50) NOT NULL,
`role` varchar(50) NOT NULL,
UNIQUE INDEX `idx_user_role` (`username` ASC, `role` ASC) USING BTREE
);
CREATE TABLE `permissions` (
`role` varchar(50) NOT NULL,
`resource` varchar(255) NOT NULL,
`action` varchar(8) NOT NULL,
UNIQUE INDEX `uk_role_permission` (`role`,`resource`,`action`) USING BTREE
);
INSERT INTO users (username, password, enabled) VALUES ('nacos', '$2a$10$EuWPZHzz32dJN7jexM34MOeYirDdFAZm2kuWj7VEOJhhZkDrxfvUu', TRUE);
INSERT INTO roles (username, role) VALUES ('nacos', 'ROLE_ADMIN');
(5)/home/micro/nacos放文件
docker-compose -f example/standalone-derby.yaml up -d
Nacoshttp://43.139.50.164:8848/nacos
logs查看日志
消费者
第一种没有连接池
4.0.0
org.springframework.boot
spring-boot-starter-parent
2.7.14
com.qf.cloud
spring-cloud-alibaba-example
1.0.0
spring-cloud-alibaba-example
spring-cloud基础
1.8
pom
cloud-alibaba-nacos
cloud-openfeign
com.alibaba.cloud
spring-cloud-alibaba-dependencies
2021.0.5.0
pom
import
org.springframework.cloud
spring-cloud-dependencies
2021.0.5
pom
import
org.springframework.boot
spring-boot-starter-web
org.springframework.boot
spring-boot-starter
org.springframework.boot
spring-boot-starter-test
test
org.springframework.boot
spring-boot-maven-plugin
4.0.0
com.qf.cloud.nacos
cloud-alibaba-nacos
1.0.0
../pom.xml
com.qf.cloud.nacos.provider
cloud-alibaba-nacos-provider
1.0.0
cloud-alibaba-nacos-provider
spring-cloud基础
com.alibaba.cloud
spring-cloud-starter-alibaba-nacos-discovery
spring:
application:
name: nacos-provider
cloud:
nacos:
discovery:
server-addr: 43.139.50.164:8848
namespace: gz-dev
group: dev-group
username: nacos
password: nacos
service: ${spring.application.name}
server:
port: 8081
4.0.0
com.qf.cloud.openfeign
cloud-openfeign
1.0.0
../pom.xml
com.qf.cloud.openfeign.provider
cloud-feign-provider
1.0.0
cloud-feign-provider
spring-cloud基础
com.alibaba.cloud
spring-cloud-starter-alibaba-nacos-discovery
spring:
application:
name: feign-provider
cloud:
nacos:
discovery:
server-addr: 43.139.50.164:8848
namespace: gz-dev
group: dev-group
# 服务名
service: ${spring.application.name}
server:
port: 8081
package com.qf.cloud.openfeign.provider.controller;
import org.springframework.web.bind.annotation.GetMapping;
import org.springframework.web.bind.annotation.RequestMapping;
import org.springframework.web.bind.annotation.RestController;
/**
* @author liuhuitang
*/
@RestController
@RequestMapping("/provider")
public class ProviderController {
@GetMapping("/hello")
public String hello(){
return "hello provider";
}
}
4.0.0
com.qf.cloud.openfeign
cloud-openfeign
1.0.0
../pom.xml
com.qf.cloud.openfeign.consumer
cloud-feign-consumer
1.0.0
cloud-feign-consumer
spring-cloud基础
com.alibaba.cloud
spring-cloud-starter-alibaba-nacos-discovery
org.springframework.cloud
spring-cloud-starter-openfeign
org.springframework.cloud
spring-cloud-starter-loadbalancer
spring:
application:
name: feign-consumer
cloud:
nacos:
discovery:
server-addr: 43.139.50.164:8848
namespace: gz-dev
group: dev-group
# 服务名
service: ${spring.application.name}
server:
port: 8082
package com.qf.cloud.openfeign.consumer.feign;
import org.springframework.cloud.openfeign.FeignClient;
import org.springframework.web.bind.annotation.GetMapping;
/**
* 生成代理类
* @author liuhuitang
* 服务名称对应id地址+端口
*/
@FeignClient(value = "feign-provider",path = "/provider")
public interface ProviderFeignClient {
@GetMapping("/hello")
String hello();
}
package com.qf.cloud.openfeign.consumer.controller;
import com.qf.cloud.openfeign.consumer.feign.ProviderFeignClient;
import org.springframework.web.bind.annotation.GetMapping;
import org.springframework.web.bind.annotation.RequestMapping;
import org.springframework.web.bind.annotation.RestController;
import javax.annotation.Resource;
/**
* @author liuhuitang
*/
@RestController
@RequestMapping("/consumer")
public class ConsumerController {
@Resource
private ProviderFeignClient providerFeignClient;
@GetMapping("/info")
public String getProviderInfo() {
return providerFeignClient.hello();
}
}
生产者实现 api里面的方法 消费者feign那里继承api service层引用
package com.qf.cloud.openfeign.consumer.feign;
import com.qf.cloud.openfeign.api.ProviderFeignClientApi;
import org.springframework.cloud.openfeign.FeignClient;
/**
* @author liuhuitang
*/
@FeignClient(value = "${micro.services.provider.name}", path = "${micro.services.provider.path}")
public interface ProviderService extends ProviderFeignClientApi {
}
CAP定律,也称为CAP定理,是分布式计算领域的一个重要理论。它指出在一个分布式系统中,**一致性(Consistency)、可用性(Availability)、分区容错性(Partition Tolerance)这三项特性中,最多只能同时满足其中的两个**。具体来说:
1. **一致性(C)**:一致性是指分布式系统中的所有节点在同一时刻访问的数据是一致的。也就是说,当一个节点更新了数据,其他所有节点能够立即看到这个更新的结果。
2. **可用性(A)**:可用性是指分布式系统提供的服务必须一直处于可用的状态,对于每一个请求都必须给出响应,而不是无限期地等待。
3. **分区容错性(P)**:分区容错性是指在分布式系统中,即使遇到网络分区(即部分节点之间的通信中断),系统仍然能够继续工作。
在实际应用中,设计分布式系统时需要根据具体的业务需求和场景来权衡这三个特性,选择适合的分布式系统架构。例如,一些系统可能会选择牺牲一定程度的一致性来保证更高的可用性和分区容错性,而另一些系统则可能会优先考虑一致性和分区容错性。
总的来说,CAP定律是分布式系统设计中的一个重要原则,它帮助开发者理解在分布式环境中,系统的可靠性、可访问性和一致性之间的固有权衡。
整体:全局配置、局部配置
配置方式:代码配置、配置文件配置
主要配置:日志级别配置、超时机制、重试机制、网络请求库、数据压缩
LoadBalancer(2.3以上)和Ribbon(2.3及以下)(客户端、正向、发起请求时)
Spring Cloud中的LoadBalancer和Ribbon都是用于实现负载均衡的组件,它们之间存在一些差异。以下是具体分析:
- **Ribbon**:是一个由Netflix开源的客户端负载均衡器,专注于提供中间层服务(如RPC)的客户端负载均衡。它基于HTTP和TCP等协议,通常与Eureka、Consul或Zookeeper等服务注册中心结合使用。Ribbon需要开发者在代码中手动调用目标服务,提供了多种负载均衡策略(如轮询、随机等),并且支持丰富的配置项,例如超时、重试等。
- **LoadBalancer**:是Spring Cloud提供的负载均衡组件,它是Spring Cloud的原生组件,不需要像Ribbon一样需要在代码中进行服务调用,而是通过服务ID获取负载均衡器的RPC地址。LoadBalancer底层原理是默认调用Ribbon的实现,为客户端负载均衡提供了一种更为便捷的方式。
总的来说,Ribbon是一个功能丰富且灵活的负载均衡器,适用于需要高度自定义负载均衡逻辑的场景。而LoadBalancer则是一个更简单易用的选择,适合快速实现服务调用时的负载均衡需求。
upstream
模块和 proxy_pass
指令来配置负载均衡(1)定义 Upstream
(2)配置 Proxy Pass
(3)设置负载均衡策略