E-COM-NET
首页
在线工具
Layui镜像站
SUI文档
联系我们
推荐频道
Java
PHP
C++
C
C#
Python
Ruby
go语言
Scala
Servlet
Vue
MySQL
NoSQL
Redis
CSS
Oracle
SQL Server
DB2
HBase
Http
HTML5
Spring
Ajax
Jquery
JavaScript
Json
XML
NodeJs
mybatis
Hibernate
算法
设计模式
shell
数据结构
大数据
JS
消息中间件
正则表达式
Tomcat
SQL
Nginx
Shiro
Maven
Linux
flink高可用
RabbitMQ——高级篇
TTL超时机制延迟队列四、惰性队列消息堆积问题惰性队列一、MQ的常见问题消息可靠性问题:如何确保发送的消息至少被消费一次延迟消息问题:如何实现的延迟投递消息堆积问题:解决数百万的消息堆积无法及时消费的问题
高可用
问题
过✪
·
2024-01-25 06:34
微服务
rabbitmq
分布式
Oracle、MySQL数据库常规命令语法-简易记录(非常规持续更新)
呈现的是非常基础必备命令以及常规关联语法,因涉及到不同数据库其表达都会有所区别,此篇纯属做个仓库记录更非常规持续更新,专业人士可忽略,且看且珍惜…MySQL:关系型数据库、重点开源、支持大型规模、标准SQL数据语言、多平台多架构、
高可用
集群
蚊子不吸吸
·
2024-01-25 05:09
数据库
IT运维
Linux
数据库
oracle
mysql
中间件学习——J2EE中间件
这这种情况下,应用程序必须将现有的企业信息系统与可以为更多的客户提供服务的新业务功能结合起来,这些服务需要:
高可用
性,可以适应当今全球商业环境;
问题_解决_分享_讨论_最优
·
2024-01-25 04:17
Flink
重点难点:
Flink
任务综合调优(Checkpoint/反压/内存)
CheckPoint调优
Flink
中基于异步轻量级的分布式快照技术提供了Checkpoints容错机制,Checkpoints可以将同一时间点作业/算子的状态数据全局统一快照处理,包括前面提到的算子状态和键值分区状态
程序员的隐秘角落
·
2024-01-25 02:10
【大数据】
Flink
系统架构
Flink
系统架构1.
Flink
组件1.1JobManager1.2ResourceManager1.3TaskManager1.4Dispatcher2.应用部署2.1框架模式2.2库模式3.任务执行
G皮T
·
2024-01-25 02:56
#
Flink
大数据
flink
系统架构
JobManager
TaskManager
ResourceManager
JAVA的面试题四
电商行业特点(1)分布式:①垂直拆分:根据功能模块进行拆分②水平拆分:根据业务层级进行拆分(2)高并发:用户单位时间内访问服务器数量,是电商行业中面临的主要问题(3)集群:抗击高兵发的有效手段,同时集群内部实现
高可用
菜鸟程序员z
·
2024-01-25 00:51
java
开发语言
面试
Apache Calcite原理极简入门
ApacheCalcite是独立于存储与执行的SQL解析、优化引擎,广泛应用于各种离线、搜索、实时查询引擎,如Drill、Hive、Kylin、Solr、
flink
、Samza等。
longLiveData
·
2024-01-25 00:14
PiflowX-JdbcCatalog组件
JdbcCatalog组件组件说明通过JDBC协议将
Flink
连接到关系数据库,目前支持PostgresCatalog和MySQLCatalog。
PiflowX
·
2024-01-24 22:48
flink
大数据
spark
hadoop
big
data
redis - 雪崩/击穿/穿透
缓存雪崩what在某一时间段,缓存集中失效,导致请求全部走数据库,有可能搞垮数据库,使整个服务瘫痪失效原因缓存服务宕机缓存设置了相同的过期时间,导致缓存在某个时间段大量失效特点多个key同时过期解决方案搭建
高可用
的缓存服务
hflsp
·
2024-01-24 21:45
一文熟悉redis安装和字符串基本操作
NoSQL产品:redis,mongo,hbase等redis是一个内存型的nosql数据库,是采用c++语言开发的,实现了
高可用
、高IO的内存数据库。数据存储结构使用了Hash的key-va
.咖啡加剁椒.
·
2024-01-24 21:07
软件测试
redis
数据库
缓存
软件测试
自动化测试
功能测试
程序人生
标杆班级-MySQL-lesson05-存储引擎
1、简介相当于Linux文件系统,只不过比文件系统强大2、功能了解数据读写数据安全和一致性提高性能热备份自动故障恢复
高可用
方面支持等.3、存储引擎种类(笔试)3.1介绍(OracleMySQL)InnoDBMyISAMMEMORYARCHIVEFEDERATEDEXAMPLEBLACKHOLEMERGENDBCLUSTERCSV3.2
zwb_jianshu
·
2024-01-24 21:36
Kafka
高可用
集群安装
开始安装配置Kafaka1.编辑server.properties文件#############################ServerBasics##############################Theidofthebroker.Thismustbesettoauniqueintegerforeachbroker.broker.id=1#######################
NikolasNull
·
2024-01-24 19:05
kaafka的rebalance机制
Kafka的Rebalance机制是为了实现
高可用
和负载均衡而设计的。
啄sir.
·
2024-01-24 19:44
kafka
【网络安全运维】yarn
高可用
配置详解
文章目录一.架构1.RM故障转移(Failover)1.1.手动切换故障转移1.2.自动故障转移1.3.RM故障转移的客户端:ApplicationMaster和NodeManager2.恢复以前的活动RM的状态二、部署方式1.配置说明2.配置实例3.Admincommandsa.检查状态b.手动切换主备本文主要描述了:yarnHA架构细节:active/standby、故障转移的方式、故障转移客
网安导师小李
·
2024-01-24 19:42
运维
安全
网络安全
网络
yam
hadoop
MySQL集群架构(三):分库分表
分库分表前言拆分方式垂直拆分垂直拆分优点垂直拆分缺点水平拆分水平拆分优点水平拆分缺点主键策略UUIDCOMB(UUID变种)SNOWFLAKE数据库ID表Redis生成ID分片分片概念分片策略基于范围分片哈希取模分片一致性哈希分片扩容方案停机扩容平滑扩容总结前言之前介绍了mysql集群中的
高可用
双主模式
一白丁
·
2024-01-24 18:09
Mysql
【精心整理】DB2 + HADR + TSA
高可用
配置(实用)
目录前言一、概念简介二、配置过程2.1.服务器环境配置2.2.安装TSA2.3.配置TSA2.3.1.备机执行db2haicu2.3.2.主机执行db2haicu2.4.查看TSA集群状态三、常见问题问题一:DB2HADR和TSAMP故障切换是如何工作的?问题二:备机执行db2haicu创建资源时最后报错问题三:备机执行db2haicu创建资源时最后报错问题四:执行preprpnode报错问题五:
流浪字节π
·
2024-01-24 17:42
数据库
软件测试的调用接口怎么调用,逻辑是什么?
但是今天,淘宝的架构已经不再是传统的MVC结构,系统正在朝着分布式、以业务为中心、
高可用
的方向发展。今天的系统架构很复杂,系统
咖啡加剁椒.
·
2024-01-24 16:21
软件测试
自动化测试
软件测试
功能测试
程序人生
职场和发展
令人惊叹的 PostgreSQL 可伸缩性
令人惊叹的PostgreSQL可伸缩性PostgreSQL的可伸缩性1、争用2、惊群3、性能4、并发5、排队6、
高可用
评价与讨论PostgreSQL的可伸缩性现状连接池——解决高并发问题性能与瓶颈管理灵活性其他替代品我能用上
ChaITSimpleLove
·
2024-01-24 15:57
DB/数据库
postgresql
数据库
Pigsty
集群
PgBouncer/连接池
postgresql
可升缩性
win server 2012 r2双网卡绑定bond0
首先介绍一下NICTeaming的用途,简单说来就是将多个网卡绑定到一起,生成一个逻辑的网卡来提供
高可用
和带宽聚合。NIC组合的成员网卡要求能正常连接到网络。
root_10
·
2024-01-24 14:56
windows运维
服务器
windows
运维
docker篇-(docker-compose搭建
高可用
Eureka集群)
docker-compose安装
高可用
Eureka集群构建Eureka注册中心镜像搭建集群通过nginx实现负载均衡配置nginxssl支持注册product和consumer测试是否可用构建Eureka
小小白鸽
·
2024-01-24 14:20
docker
nginx
docker
eureka
spring
cloud
java
【Docker】Docker学习⑥ - 网络部分
【Docker】Docker学习⑥-网络部分六、网络部分1docker结合负载实现网站
高可用
1.1安装并配置keepalived1.2安装并配置haproxy1.3服务器启动nginx容器并验证2容器之间的互联
洁癖丶
·
2024-01-24 14:50
docker
学习
网络
Spring-Cloud系列第3篇:spring-cloud-eureka-consumer
分布式配置管理spring-cloud-eureka:服务注册与发现spring-cloud-eureka-consumer:远程服务调用和及其负载均衡spring-cloud-Hystrix:熔断器保证服务
高可用
iphone概念机
·
2024-01-24 14:49
spring-cloud
架构师的36项修炼-07
高可用
系统架构设计
本课时讲解
高可用
系统架构,如下图所示,本课时内容主要包括3个部分。&互联网系统可用性度量,即如何用指标来衡量系统的可用性,以及进行可用性管理时的一些手段。
机智阳
·
2024-01-24 13:42
java
系统架构
架构
java
后端
亚信安慧AntDB:未来数据驱动经济的重要支撑
AntDB数据库以其高性能、
高可用
性和高扩展性为特点,能够高效处理庞大的数据存储和处理需求,同时确保数
亚信安慧AntDB数据库
·
2024-01-24 12:44
数据库
antdb
Eureka注册中心
高可用
及常用配置项
一、Eureka的
高可用
搭建在实际生产项目中,为了保证服务的可用性,连续性,一般来说,都会去搭建应用的集群来保证服务
高可用
。
阁下何不踏风起
·
2024-01-24 12:01
SpringCloud
eureka
java
云原生
mysql分库负载均衡_使用Mycat实现Mysql数据库的主从复制、读写分离、分表分库、负载均衡和
高可用
...
周报,绩效考核,还包括配套的代码生成器:http://www.itproject-manager.com/Mysql集群搭建使用Mycat实现Mysql数据库的主从复制、读写分离、分表分库、负载均衡和
高可用
im陈璐
·
2024-01-24 11:30
mysql分库负载均衡
22-09-04 西安 谷粒商城(01)MySQL主从复制、MyCat读写分离、MyCat分库分表
MySQL主从复制1、主从复制原理mysql主从复制:分摊读写压力(cpu计算压力)写交给主库,读由主从分摊处理(原因是写操作较少,读操作较多),以满足在安全性与
高可用
性上的需求主从复制的目的就是:读写分离主从复制原理核心
£小羽毛
·
2024-01-24 10:58
笔记
mysql
mycat
kubernetes中设计巧妙之处之 - label & label selector
使用Label可以给对象创建多组标签,label&LabelSelector共同构成了kubernetes系统中最核心的应用模型,使得呗管理对象能够被精细的分组管理,同时实现了整个集群的
高可用
行。
Treesea2
·
2024-01-24 10:27
k8s1.27.2 最新版本二进制
高可用
部署
标签(空格分隔):kubernetes系列一:系统环境初始化1.1系统环境系统:rockyLinux8.8x64主机名与角色分配cat/etc/hosts----172.16.10.21flyfish21k8s-master/k8s-nodeetcd172.16.10.22flyfish22k8s-master/k8s-nodeetcd172.16.10.23flyfish23k8s-master
flyfish225
·
2024-01-24 10:59
K8S专栏
应用开发技术
kubernetes
docker
容器
redis
高可用
之Sentinel模式
文章目录前言1.创建联想主服务器的网络连接2.创建连向其他Sentinel的命令连接(也就是调度中心的
高可用
)3.选举领头Sentinel调度中心
高可用
4.故障转移选出新的主服务器redis服务器
高可用
如何挑选新的主服务器
倜傥村的少年
·
2024-01-24 10:24
redis
sentinel
搭建k8s集群实战(一)系统设置
Kubernetes作为容器集群系统,通过健康检查+重启策略实现了Pod故障自我修复能力,通过调度算法实现将Pod分布式部署,并保持预期副本数,根据Node失效状态自动在其他Node拉起Pod,实现了应用层的
高可用
性
xiegwei
·
2024-01-24 10:22
k8s
kubernetes
容器
云原生
kubeadm部署k8s1.27.2版本
高可用
集群(外部etcd集群带TLS认证)
文章目录环境软件版本服务器系统初始化etcd证书生成etcd集群部署负载均衡器部署部署k8s集群部署网络组件FAQ环境控制平面节点主机的配置最少是2C2G,否则kubeadminit的时候会报错主机名IP组件系统os128192.168.177.128etcd、kube-apiserver、kube-controller-manager、kube-scheduler、kubelet、kube-pr
那些、快乐。
·
2024-01-24 10:22
Kubernetes
kubernetes
etcd
容器
云原生
docker
IDEA报错:No hostname could be resolved for the IP address 127.0.0.1, using IP address as host name.
idea编辑
flink
连接kafka读取数据时报错:NohostnamecouldberesolvedfortheIPaddress127.0.0.1,usingIPaddressashostname.Localinputsplitassignment
唯一2333
·
2024-01-24 09:09
flink
kafka
idea
虚拟ip(VIP)实现原理
实现
高可用
(HA)的方式,一般采用两台机器同时完成一项功能,比如数据库服务器,平常只有一台机器对外提供服务,另一台机器作为热备,当这台机器出现故障时,自动动态切换到另一台热备的机器。
郑琨51
·
2024-01-24 09:08
计算机网络
以太网
网络
linux
负载均衡
k8s面试题
etcd是CoreOS团队发起的开源项目,是一个管理配置信息和服务发现(servicediscovery)的项目,它的目标是构建一个
高可用
的分布式键值(key-value)数据库,基于Go语言实现。
海哥python
·
2024-01-24 09:29
面试八股文
kubernetes
容器
云原生
Flink
编程——最小程序MiniProgram
最小程序MiniProgram前面我们已经搭建起了
Flink
的基础环境,这一节我们就在上一节的基础上,进行编写我们的第一个
Flink
程序,开始之前我们先看一下一个完整的
Flink
程序是什么样的
Flink
不二人生
·
2024-01-24 08:41
#
Flink
编程
flink
大数据
Spark详解(八):Spark 容错以及
高可用
性HA
所谓容错就是一个系统的部分出现错误的情况还能够持续地提供服务,不会因为一些错误而导致系统性能严重下降或出现系统瘫痪。在一个集群中出现机器故障、网络问题等常态,尤其集群达到较大规模后,很可能较频繁的出现机器故障等不能进行提供服务,因此分布性集群需要进行容错设计。1.Executor容错Spark支持多种运行模式,这些运行模型中的集群管理器会为任务分配运行资源,在运行资源中启动Executor,由Ex
MasterT-J
·
2024-01-24 07:19
Spark框架
Spark框架
Spark框架
Flink
运行架构以及容错机制
Flink
运行架构以及容错机制1.
Flink
的角色区分1.1JM1.2TM1.3SLOT2.
Flink
-Cluster模式的任务提交流程2.1
Flink
OnYarn的任务提交流程2.1.1yarn相关概念
李姓门徒
·
2024-01-24 07:42
Flink
大数据
flink
架构
大数据
【极数系列】
Flink
初相识(01)
#【极数系列】
Flink
初相识(01)引言
Flink
官网:https://
flink
.apache.org/
Flink
版本:https://
flink
.apache.org/blog/
Flink
文档:https
浅夏的猫
·
2024-01-24 07:18
极数系列
flink
大数据
java
分布式
【极数系列】
Flink
环境搭建(02)
【极数系列】
Flink
环境搭建(02)引言1.linux直接在linux上使用jdk11+
flink
1.18.0版本部署2.docker使用容器部署比较方便,一键启动停止,方便参数调整3.windows
浅夏的猫
·
2024-01-24 07:18
极数系列
flink
大数据
数据分析
【
Flink
-1.17-教程】-【四】
Flink
DataStream API(5)转换算子(Transformation)【分流】
【
Flink
-1.17-教程】-【四】
Flink
DataStreamAPI(5)转换算子(Transformation)【分流】1)使用filter简单实现2)使用侧输出流实现所谓“分流”,就是将一条数据流拆分成完全独立的两条
bmyyyyyy
·
2024-01-24 07:48
Flink
flink
java
算法
#flink-分流
#flink-侧输出流
#datastream-api
大数据
Flink
多流转换(1)—— 分流&合流
目录分流代码示例使用侧输出流合流联合(Union)连接(Connect)简单划分的话,多流转换可以分为“分流”和“合流”两大类目前分流的操作一般是通过侧输出流(sideoutput)来实现,而合流的算子比较丰富,根据不同的需求可以调用union、connect、join以及coGroup等接口进行连接合并操作分流将一条数据流拆分成完全独立的两条、甚至多条流。也就是基于一个DataStream,得到
THE WHY
·
2024-01-24 07:47
Flink
大数据
flink
java
python
大数据
flink
-java使用介绍,
flink
,java
1、环境准备文档:https://nightlies.apache.org/
flink
/
flink
-docs-release-1.18/zh/仓库:https://github.com/apache/
flink
raoxiaoya
·
2024-01-24 07:47
Java
flink
java
大数据
Flink
(十五)【
Flink
SQL Connector、savepoint、CateLog、Table API】
1、常用Connector读写之前我们已经用过了一些简单的内置连接器,比如'datagen'、'print',其它的可以查看官网:Overview|Apache
Flink
环境准备:#1.先启动hadoopmyhadoopstart
让线程再跑一会
·
2024-01-24 07:17
Flink
flink
大数据
记一次
Flink
通过Kafka写入MySQL的过程
一、前言总体思路:source-->transform-->sink,即从source获取相应的数据来源,然后进行数据转换,将数据从比较乱的格式,转换成我们需要的格式,转换处理后,然后进行sink功能,也就是将数据写入的相应的数据库DB中或者写入Hive的HDFS文件存储。思路:pom部分放到最后面。二、方案及代码实现2.1Source部分Source部分构建一个web对象用于保存数据等操作,代码
梦痕长情
·
2024-01-24 07:17
flink
kafka
mysql
spark-
flink
设计思想之吸星大法-1
Spark和
Flink
都是大数据处理框架,它们的设计思想有一些不同之处。以下是对它们设计思想的简要对比:数据模型和计算模型:Spark:Spark使用弹性分布式数据集(RDD)作为其核心数据结构。
{BOOLEAN}
·
2024-01-24 07:47
spark
flink
大数据
【极数系列】
Flink
项目入门搭建(03)
【极数系列】
Flink
项目入门搭建(03)引言gitee地址:https://gitee.com/shawsongyue/aurora.git源码直接下载可运行,模块:aurora_
flink
Flink
浅夏的猫
·
2024-01-24 07:16
极数系列
flink
大数据
java
2024-01-23(MongoDB&&ElasticSearch)
副本集可以提供冗余和
高可用
性,是所有生产部署的基础。也可以说,副本集是类似于有自动故障恢复功能的主从集群。主节点,从节点,仲裁节点。
陈xr
·
2024-01-24 06:35
随记日志
mongodb
数据库
elasticsearch
Streaming -- Operators -- Windows
本文档主要介绍在
Flink
中如何执行窗口,以及程序员如何从它提供的功能中获得最大的好处。窗口
Flink
程序的一般结构如下所示。第一个片段引用键控流,而第二个片段引用非键控流。
qing_feng
·
2024-01-24 06:33
10.
Flink
实时项目之订单维度表关联
1.维度查询在上一篇中,我们已经把订单和订单明细表join完,本文将关联订单的其他维度数据,维度关联实际上就是在流中查询存储在hbase中的数据表。但是即使通过主键的方式查询,hbase速度的查询也是不及流之间的join。外部数据源的查询常常是流式计算的性能瓶颈,所以我们在查询hbase维度数据的基础上做一些优化及封装。phoenix查询封装phoenix作为hbase的一个上层sql封装,或者叫
选手一号位
·
2024-01-24 04:46
上一页
22
23
24
25
26
27
28
29
下一页
按字母分类:
A
B
C
D
E
F
G
H
I
J
K
L
M
N
O
P
Q
R
S
T
U
V
W
X
Y
Z
其他