E-COM-NET
首页
在线工具
Layui镜像站
SUI文档
联系我们
推荐频道
Java
PHP
C++
C
C#
Python
Ruby
go语言
Scala
Servlet
Vue
MySQL
NoSQL
Redis
CSS
Oracle
SQL Server
DB2
HBase
Http
HTML5
Spring
Ajax
Jquery
JavaScript
Json
XML
NodeJs
mybatis
Hibernate
算法
设计模式
shell
数据结构
大数据
JS
消息中间件
正则表达式
Tomcat
SQL
Nginx
Shiro
Maven
Linux
Fastdfs集群
Flink CDC 与 Kafka 集成:State Snapshot 还是 Changelog?Kafka 还是 Upsert Kafka?
我们知道,尽管FlinkCDC可以越过Kafka,将关系型数据库中的数据表直接“映射”成数据湖上的一张表(例如Hudi等),但从整体架构上考虑,维护一个Kafka
集群
作为数据接入的统一管道是非常必要的,
Laurence
·
2024-02-06 08:52
大数据专题
付费专栏
flink
cdc
kafka
mysql-cdc
debezium-json
changelog
upsert
Redis核心技术与实战【学习笔记】 - 24.Redis 脑裂
简述所谓脑裂,就是指在主从
集群
中,同时有两个主节点,它们都能接收写请求。而脑裂最直接的影响就是客户端不知道该往哪个主节点写入数据,结果就是不同的客户端会往不同的主机诶点上写入数据。
陈建111
·
2024-02-06 08:43
Redis核心技术学习
redis
Redis
脑裂
Redis核心技术与实战【学习笔记】 - 24.Redis 数据分片方案选择:Codis 和 Redis Cluster
简述Redis的切片
集群
使用多个实例保存数据,能很好的应对大数据量的场景。在《4.Redis切片
集群
》中,介绍了Redis官方提供的切片
集群
方法RedisCluster。
陈建111
·
2024-02-06 08:43
Redis核心技术学习
redis
Redis
数据分片方案
Codis
Redis
Cluster
Kafka 使用手册
2.kafka基础架构3.kafka
集群
搭建4.kafka命令行操作主题命令行【topic】生产者命令行【producer】消费者命令行【consumer】5.kafka生产者生产者消息发送流程Producer
@lihewei
·
2024-02-06 08:01
kafka
分布式
ELFK日志采 - QuickStart
文章目录架构选型ELKEFLKElasticsearchES
集群
搭建常用命令Filebeat功能介绍安装步骤Filebeat配置详解filebeat常用命令Logstash功能介绍安装步骤Input插件
@lihewei
·
2024-02-06 07:25
elk
Flink面试准备
Standlone模式Standlone是Flink自带的一个分布式
集群
,它不依赖其他的资源调度框架、不依赖yarn等。充当Master角色的是JobManager。
大数据左右手
·
2024-02-06 07:25
大数据
面试
Flink
大数据
linux系统keepalived介绍以及和nginx联合使用
keepalivedkeepalived介绍nginx+keepalivedkeepalived介绍keepalived是
集群
管理中保证
集群
高可用的一个服务软件,用来防止单点故障。
丨析木丨
·
2024-02-06 07:13
linux
linux
nginx
运维
Redis(三)主从架构、Redis哨兵架构、Redis
集群
方案对比、Redis高可用
集群
搭建、Redis高可用
集群
之水平扩展
转自极客时间Redis主从架构redis主从架构搭建,配置从节点步骤:1、复制一份redis.conf文件2、将相关配置修改为如下值:port6380pidfile/var/run/redis_6380.pid#把pid进程号写入pidfile配置的文件logfile"6380.log"dir/usr/local/redis-5.0.3/data/6380#指定数据存放目录#需要注释掉bind#b
_蓝天IT_
·
2024-02-06 07:37
分布式
redis
架构
java
k8s中节点node的ROLES值是<none>
查询当前
集群
节点信息:[r
Lingoesforstudy
·
2024-02-06 07:20
k8s
kubernetes
k8s学习-Service Account和RBAC授权
1.1ServiceAccount介绍首先Kubernetes中账户区分为:UserAccounts(用户账户)和ServiceAccounts(服务账户)两种,它们的设计及用途如下:UserAccount是给kubernetes
集群
外部用户使用的
ByteX
·
2024-02-06 07:16
kubernetes
学习
容器
Redis——
集群
环境部署
一般情况下的Redis,我们都是在一台服务器上进行操作的,也就是说读、写以及备份操作都是在一台Redis服务器上进行的。随着项目访问量的增加,对Redis服务器的操作也更加频繁,虽然Redis读写速度都很快,但是一定程度上也会造成一定的延时。为了解决访问量大的问题,通常会采取的一种方式是主从(Master-Slave)复制。Master以写为主,Slave以读为主,Master更新后根据配置自动同
布道师小羊
·
2024-02-06 07:10
#
NoSQL+NewSQL
redis
数据库
缓存
Spark大数据分析与实战笔记(第二章 Spark基础-06)
文章目录每日一句正能量2.6IDEA开发WordCount程序2.6.1本地模式执行Spark程序2.6.2
集群
模式执行Spark程序每日一句正能量我们全都要从前辈和同辈学习到一些东西。
想你依然心痛
·
2024-02-06 07:38
#
Spark大数据分析与实战
spark
数据分析
笔记
k8s学习-Kubernetes Ingress
我一般以Deployment方式部署到kubernetes
集群
中
ByteX
·
2024-02-06 07:37
kubernetes
学习
容器
开源大数据
集群
部署(十)Ranger usersync部署
作者:櫰木rangerusersync部署解压包[
[email protected]
]#pwd/opt/ranger[
[email protected]
]#tar-zxvfranger-2.3.0-usersync.tar.gz-C/opt/[
[email protected]
]#cdranger-2.3.0-usersync修改配置insta
云掣YUNCHE
·
2024-02-06 07:05
开源大数据集群部署
大数据
linux k8s 源码编译及单
集群
测试
docker在线安装containerd安装二进制安装yum安装修改containder配置文件cnietcdrsyncgo设置golang代理安装CFSSL下载kubernetes代码编译启动本地单节点
集群
问题
流月up
·
2024-02-06 06:12
k8s
linux
kubernetes
k8s
源码编译
单集群
测试
SparkSQL on K8s 在网易传媒的落地实践
网易传媒在2021年成功将SparkSQL部署到了K8s
集群
,并实现与部分在线业务的混合部署,到目前已经稳定运行了一年多。
wangyishufan
·
2024-02-06 06:02
kubernetes
大数据
数据分析
Flink on k8s之historyServer
1.FlinkHistoryServer用途HistoryServer可以在Flink作业终止运行(Flink
集群
关闭)之后,还可以查询已完成作业的统计信息。
卤蛋x001
·
2024-02-06 06:54
flink
kubernetes
大数据
operator
MongoDB分片
集群
搭建
----前言mongodb分片一般用得比较少,需要较多的服务器,还有三种的角色一般把mongodb的副本集应用得好就足够用了,可搭建多套mongodb复本集mongodb分片技术mongodb副本集可以解决数据备份、读性能的问题,但由于mongodb副本集是每份数据都一模一样的,无法解决数据量过大问题mongodb分片技术能够把数据分成两份存储,假如shijiange.myuser里面有1亿条数据
ZzzkiYoumi
·
2024-02-06 06:21
MongoDB
mongodb
数据库
dba
MongoDB的分片
集群
(二) :mongodb4.x分片
集群
离线搭建&开启安全认证
相关文章:MongoDB的分片
集群
(一):基础知识在《MongoDB的分片
集群
(一):基础知识》中梳理了分片
集群
的基础知识,本文则记录分片
集群
的离线搭建,并开启
集群
的安全认证的过程。
SRE成长记
·
2024-02-06 06:45
数据库
mongodb
数据库
分片集群
数据库集群
数据库安全
Apache Hadoop
ApacheHadoop_狭义上说,Hadoop指Apache一款java语言开发的开源框架,它的核心组件有:HDFS(分布式文件系统):解决海量数据存储YARN(作业调度和
集群
资源管理的框架):解决资源任务调度
VincentLeon
·
2024-02-06 05:28
Mysql架构系列——生产常用的高可用部署模式介绍
模式高可用模式GaleraCluster是由Codership开发的MySQL多主
集群
,包含在MariaDB中,同时支持Perconaxtradb、MySQL,是一个易于使用的高可用解决方案,在数据完整性
吴代庄
·
2024-02-06 04:34
Java
mysql
架构
数据库
K8S
集群
管理平台Rancher(1):基础入门
文章目录一、Rancher概述1.1什么是Rancher1.2RancherServer功能1.3Rancher架构设计1.4Rancher和下游
集群
交互1.5Rancher相关文件1.6Rancher
鹤冲天Pro
·
2024-02-06 04:58
#
Kubernetes
kubernetes
rancher
运维
Debian11之Rancher2.7.x安装
前言Rancher为采用容器的团队提供了完整的软件堆栈,解决了跨任何基础设施架构管理多个Kubernetes
集群
的运维和安全挑战,同时为DevOps团队提供了用于运行容器化工作负载的集成工具。
大能嘚吧嘚
·
2024-02-06 04:27
Kubernetes
Linux_Debian
kubernetes
运维
EKS
集群
使用helm安装rancher
一、安装helmcurlhttps://raw.githubusercontent.com/helm/helm/master/scripts/get-helm-3|bash二、安装rancher1.安装rancher命令【我安装默认安装最新版本,实际安装的是rancher:v2.7.9版本】#创建rancher使用的namespacekubectlcreatenamespacecattle-sys
干运维小白
·
2024-02-06 03:57
rancher
K8S之Namespace的介绍和使用
Namespace理论说明Namespace实操创建、查看命名空间使用ResouceQuota对Namespace做资源限额更多ResouceQuota的使用Namespace理论说明命名空间定义K8s支持多个虚拟
集群
sissie喵~
·
2024-02-06 03:39
kubernetes
kubernetes
Spark On Yarn 运行模式
在Spark中,支持4种运行模式:1)Local:开发时使用2)Standalone:是Spark自带的,如果一个
集群
是Standalone的话,那么就需要在多台机器上同时部署Spark环境3)YARN
bandi4506
·
2024-02-06 03:02
大数据
java
Centos7.5+Ambari2.7.3+HDP3.1.0.0离线安装
就Ambari的作用来说,就是创建、管理、监视Hadoop
集群
,但是这里的Hadoop指的是Hadoop整个生态圈(例如Hive,Hbase,Sqoop,Zookeeper等),而并不仅是特指Had
WaiSaa
·
2024-02-06 02:53
java的热部署/热更新(1)背景
为什么需要热部署现阶段,线上
集群
的发布采取1.虚拟机/物理机器更新代码的方式,2.docker/k8s环境更新pod的镜像。优点显而易见,一致性好,可靠性高。但是热部署也有自己的优势:快速发布/
define_us
·
2024-02-06 02:54
java
开发语言
首次!这样搭建SpringBoot脚手架,整合OSS效果翻倍
最早我搞过FTP,然后又用过
FastDFS
,接私活的时候我用MongoDB也凑合凑合。现如今时代不同了,开始流行起了OSS。
磕代码的阿轩
·
2024-02-06 02:26
微服务监控 - 监控自己的服务
客户端库指标类型Counter(计数器)Gauge(计量器)Histogram(直方图)Summary(摘要)Demo提供metrics接口添加自己的指标小结上一篇讲解了使用Exporter监控Kubernetes
集群
应用
CatchZeng
·
2024-02-06 01:43
k8s创建并发布WordPress
⽬的演示如何在KubeSphere中创建应⽤程序(以WordPress为例)并在
集群
外访问它。任务1:创建密钥创建MySQL密钥环境变量WORDPRESS_DB_PASSWORD是连接到
凌晨里的无聊人
·
2024-02-06 01:18
K8s
kubernetes
数据库
java
k8s 实战1:WordPress搭建
文章目录第一步:部署MariaDB第二步:部署WordPress第三步:映射WordPressPod端口号,让它在
集群
外可见第四步:创建反向代理的Nginx,让我们的网站对外提供服务WordPress架构图第一步
唐僧骑白马
·
2024-02-06 01:18
k8s
kubernetes
docker
容器
Docker 可视化工具
1、Portainer概念介绍Portainer是一款轻量级的应用,它提供了图形化界面,用于方便地管理Docker环境,包括单机环境和
集群
环境。
HuaLuLemon
·
2024-02-06 01:09
docker
docker
容器
运维
Docker Compose
1、概念介绍Docker-Compose是Docker官方的开源项目,负责实现对Docker容器
集群
的快速编排。
HuaLuLemon
·
2024-02-06 01:39
docker
docker
容器
薛兆丰《北大经济学课》第九十五讲导图笔记
因为
集群
产生了规模化,需求者过去,不需要跑其它地方,自己要的东西全部要吧采购到,这就节省了大量额外的时间和精力的成本,
集群
是非常大的优势。
浪客诗心
·
2024-02-06 01:09
k8s学习(RKE+k8s+rancher2.x)成长系列之简配版环境搭建(二)
三、简配版
集群
,适用于demo环境1.
集群
架构设计主机名角色配置(核数,内存,磁盘)MasterRKE,controlplane,etcd,worker,rancher-master2C8G40GSlaver1controlplane
日复一日伐树的熊哥
·
2024-02-06 00:29
kubernetes
RKE
rancher
docker
centos
2.RocketMQ
集群
搭建与消息发送样例
1.RocketMQ
集群
搭建1.1各角色介绍mqGroup.png角色NameServer:Broker的管理者。Broker自己去上报NameServer自己的存在Broker:消息的存储者。
lambdaCC
·
2024-02-06 00:58
Redis入门指南
中间件Redis持久化机制RDB(redisdatabase)AOF(appendonlyfile)命令重复的解决办法穿透、击穿、雪崩Redis事务key过期策略数据淘汰策略Redis分布式锁Redis
集群
的方案主要有几种主从复制
屈家全
·
2024-02-05 23:37
#
Redis
redis
数据库
缓存
RabbitMQ部署指南
从本地加载在课前资料已经提供了镜像包:上传到虚拟机中后,使用命令加载镜像即可:dockerload-imq.tar1.2.安装MQ执行下面的命令来运行MQ容器:–hostnamemq1\单机可不配,但
集群
则要用
程序员老周666
·
2024-02-05 23:35
rabbitmq
分布式
浅析软件测试中的一些常见理论:杀虫剂效应、金字塔模型、缺陷
集群
性原则、软件测试活动依赖于软件测试背景、软件测试的7大基本原则
这篇文章我主要想记录学习一下在软件测试行业中的一些常见理论效应以做基本了解。一、杀虫剂效应1、杀虫剂效应介绍杀虫剂效应原本指农业中随着农药的普及使用,害虫对农药的抗药性就越来越强,农药就越来越难杀死害虫。在农场里为了对付破坏农作物的害虫,农业专家开发出了对应的杀虫剂,刚开始效果很好,但是随着时间的流逝,害虫适应了杀虫剂,产生了抗药性,这些原有的农药就越来越难杀死害虫,必须设计新型的杀虫剂来对付害虫
sinat_26916241
·
2024-02-05 23:29
功能测试
云计算-Docker Compose部署案例
什么是DockerComposeDocker-Compose项目是Docker官方的开源项目,负责实现对Docker容器
集群
的快速编排。
高高在吗
·
2024-02-05 22:49
docker
容器
运维
TOMCAT
集群
部署方案一
1、配置tomcat的server.xml文件在server.xml文件中的host节点下面增加Cluster节点2、在server.xml中修改tomcat的端口例如:tomcat118080tomcat2280803、修改项目中的web.xml文件在web.xml文件中增加节点4、配置nginx需改nginx的nginx.conf#usernobody;worker_processes1;#e
大象也会飞
·
2024-02-05 22:41
kubeadm离线一键安装K8s
集群
文章目录kubeadm离线一键安装K8s
集群
如何使用验证kubeadm离线一键安装K8s
集群
前言:安装的K8s版本为1.27.1容器运行时使用的containerd,不是使用docker。
银痕
·
2024-02-05 22:39
Kubernetes
kubernetes
docker
容器
Doris
集群
部署
二、
集群
部署2.1整体架构主机1主机2主机3FE(LEADER)FE(FOLLOWER)FE(OBSERVER)BEBEBEBROKERBROKERBROKER注意:生产环境建议FE和BE分开部署2.2
一心猿
·
2024-02-05 21:34
大数据
大数据
消息中间件之RocketMQ源码分析(五)
消费进度保存机制消费者启动时会同时启动位点管理器,RocketMQ设计了远程位点管理和本地位点管理两种位点管理方式.
集群
消费时,位点由客户端提交给Broker保存.广播消费时,位点保存在消费者本地磁盘上
coffee_babe
·
2024-02-05 20:57
消息中间件
java-rocketmq
rocketmq
java
大数据之 ZooKeeper原理及其在Hadoop和HBase中的应用
分布式应用程序可以基于ZooKeeper实现诸如数据发布/订阅、负载均衡、命名服务、分布式协调/通知、
集群
管理、Master选举、分布式锁和分布式队列等功能。简介ZooKeep
yangfhit
·
2024-02-05 20:29
ES节点丢失导致实时数据导入速度特别慢
通过logtash导数据,由于当天入的数据是0备份,节点丢失后,某些shard丢失,导致
集群
一直处于red状态。节点丢失后,该索引的导入速度直线下降。
YG_9013
·
2024-02-05 20:26
【华为OD】C卷真题 100%通过 : API
集群
负载统计 Python代码实现[思路+代码]
C++代码实现:【华为OD】C卷真题100%通过:API
集群
负载统计C++代码实现[思路+代码]-CSDN博客java代码实现:【华为OD】C卷真题100%通过:API
集群
负载统计Java代码实现[思路
五木大大
·
2024-02-05 19:28
杂谈
算法
华为od
c语言
javascript
python
java
JS
【华为OD】C卷真题 100%通过 : API
集群
负载统计 Java代码实现[思路+代码]
JS代码实现:【华为OD】C卷真题100%通过:API
集群
负载统计JS代码实现[思路+代码]-CSDN博客C++代码实现:【华为OD】C卷真题100%通过:API
集群
负载统计C++代码实现[思路+代码]
五木大大
·
2024-02-05 19:58
杂谈
华为od
c语言
java
python
JS
C++
码蚁软件
【华为OD】C卷真题 100%通过 : API
集群
负载统计 C++代码实现[思路+代码]
python代码:【华为OD】C卷真题100%通过:API
集群
负载统计Python代码实现[思路+代码]-CSDN博客C++代码实现:【华为OD】C卷真题100%通过:API
集群
负载统计C++代码实现[
五木大大
·
2024-02-05 19:57
杂谈
算法
华为od
c语言
java
python
c++
码蚁软件
上一页
21
22
23
24
25
26
27
28
下一页
按字母分类:
A
B
C
D
E
F
G
H
I
J
K
L
M
N
O
P
Q
R
S
T
U
V
W
X
Y
Z
其他