CDH6.3.2集群部署

CDH6.3.2平台kafka问题记录

最近在弄kafka数据同步，总是出问题，所以重装了好几次kafka1.第一次直接CDH平台删除后重新部署kafka，结果启动失败。清理/var/local/kafka/data文件夹下meta.properties文件就可以起来了，这个问题的原理是kafka启动时会对比meta.properties里和log.dirs文件夹里的server.properties里面的broke.id，每次重装se
李小晨同学·2024-01-05 08:41

redis集群部署

一、先部署单机部署单机的方法详见我以前写的博文：redis单机部署-CSDN博客和debian系统安装redis二、复制单机版本到集群的各节点的目录cd~mkdirredis-clustercdredis-clustermkdirredis01mkdirredis02mkdirredis03cp~/redis-6.2.14redis01cp~/redis-6.2.14redis02cp~/redi
88再见孙悟空·2024-01-05 03:39

小程序商城免费搭建之java商城 电子商务Spring Cloud+Spring Boot+二次开发+mybatis+MQ+VR全景+b2b2c

SpringBoot、Mybatis、Redis3.前端框架VUE、Uniapp、Bootstrap/H5/CSS3、IOS、Android、小程序4.核心思想分布式、微服务、云架构、模块化、原子化、持续集成、集群部署
m0_68459853·2024-01-04 19:01

Java版商城：Spring Cloud+SpringBoot b2b2c实现多商家入驻、直播带货及免费小程序商城搭建

SpringBoot、Mybatis、Redis3.前端框架VUE、Uniapp、Bootstrap/H5/CSS3、IOS、Android、小程序4.核心思想分布式、微服务、云架构、模块化、原子化、持续集成、集群部署
m0_67544708·2024-01-04 19:00

ElasticSearch 集群搭建与状态监控cerebro

为了解决存储能力上上限问题就可以用到集群部署。
Crhy、Y·2024-01-04 13:16

软件测试工程师需要掌握的理论知识（1）

Redis集群有以下几种类型:1.主从复制集群(Master-SlaveCluster)∶这是最简单的Redis集群部署方式。
w43993000·2024-01-04 11:54

超详细Zookeeper+Kafka+ELK集群部署

一、Zookeeper概述1、Zookeeper定义Zookeeper是一个开源的分布式的，为分布式框架提供协调服务的Apache项目。2、Zookeeper工作机制Zookeeper从设计模式角度来理解：是一个基于观察者模式设计的分布式服务管理框架，它负责存储和管理大家都关心的数据，然后接受观察者的注册，一旦这些数据的状态发生变化，Zookeeper就将负责通知已经在Zookeeper上注册的那
半糖不加冰520·2024-01-04 11:40

大数据StarRocks(二) StarRocks集群部署

一、生产机器资源评估1.梳理数据量，包括每天增量数据接入和全量数据接入2.数据存储时间长度（1个月/3个月/半年/1年/三年等）3.报表的SQL查询数量，SQL查询占用资源的统计，需要提前做好压测4.压测可以采用官网提供的压测工具先进行测试，根据测试数据进行资源调整，然后再要业务数据进行压测一遍最终以压测中预期结果最好的机器配置进行申请，如果公司很rich的话，直接用80c/256G的机器配置。二
运维仙人·2024-01-04 07:55

IoTDB 集群部署——windows

本文的测试环境为windowserver2016，版本包为1.1.0，jdk版本为1.8首先下载IoTDB版本包，链接地址如下https://archive.apache.org/dist/iotdb/1.1.0/apache-iotdb-1.1.0-all-bin.zip本次部署将使用1个ConfigNode和3个DataNode模式，元素的副本数为1，数据在3个DataNode中都进行存储，保
zhu1361·2024-01-04 07:54

Kafka

目录1、Kafka简要描述1.1、kafka1.2消息队列1.3、为什么需要消息队列1.4kafka架构1.5分布式模型1.6Kafka网址2、Kafka集群部署2.1环境准备2.1.1集群规划2.1.2jar
有语忆语·2024-01-04 04:59

Kafka集群部署

在Kafka集群(Cluster)中，一个Kafka节点就是一个Broker，消息由Topic来承载，可以存储在1个或多个Partition中。发布消息的应用为Producer、消费消息的应用为Consumer，多个Consumer可以促成ConsumerGroup共同消费一个Topic中的消息。概念/对象简单说明BrokerKafka节点Topic主题，用来承载消息Partition分区，用于主
Minority·2024-01-03 21:18

java版Spring Cloud Spring Boot 电商平台-技术架构分析

SpringBoot、MybatisPlus、Redis前端框架：VUE、Bootstrap/H5/CSS3、IOS、Android、小程序核心思想：分布式、微服务、云架构、模块化、原子化、持续集成、集群部署开发模式
黑骑士1203·2024-01-03 17:05

简易版前端项目离线方案-接口及页面离线缓存

崩溃等异常而无法访问的情况,就需要将接口和页面的静态资源缓存在用户的浏览器本地,这样一来,就算后端服务不可达,前端依旧能有正常的页面显示操作反馈,大部分用户无法感知到系统出现了故障.二,方案的设计2.1,前端单独集群部署这个虽然听起来高大上
笑道三千·2024-01-03 16:10

开源大数据集群部署（一）集群实施规划

作者：櫰木本次集群规划信息本次实际生产业务体量存在巨大差异，但集群规划内容相同，因此建议实际生产环境按照按照一定比例扩展即可。主机操作系统要求软件信息参数配置8C16G操作系统版本CentOSLinuxrelease7.8.2003(Core)java版本javaversion“1.8.0_281”hadoop版本hadoop3.2.4集群版本规划集群组建版本HDFS3.2.4YARN3.2.4M
云掣YUNCHE·2024-01-03 15:42

Spark大数据分析与实战笔记（第二章 Spark基础-02）

文章目录每日一句正能量章节概要2.2搭建Spark开发环境2.2.1环境准备2.2.2Spark的部署方式2.2.3Spark集群安装部署一、Spark下载二、Spark安装三、环境变量配置2.2.4SparkHA集群部署一
想你依然心痛·2024-01-03 09:14

K8S集群部署MySql

挂载MySQL数据卷在k8s集群中挂载MySQL数据卷需要安装一个NFS。在主节点安装NFSyuminstall-ynfs-utilsrpcbind在主节点创建目录mkdir-p/nfschmod777/nfs更改归属组与用户chown-Rnfsnobody:nfsnobody/nfs配置共享目录echo"/nfs*(insecure,rw,sync,no_root_squash)">/etc/e
xdpcxq1029·2024-01-03 07:27

Spark内容分享(二十三)：Spark on K8s 在茄子科技的实践

4.EMR类产品的缺陷5.传统Hadoop生态，三大组件的前世今生6.SparkonK8s的优势SparkonK8s原理介绍1.Spark的集群部署模式2.Sparkonk8s如何运行3.Spark的dynamicAllocation
之乎者也··2024-01-02 11:30

CDH 6.3.2集成flink 1.18 zookeeper版本不匹配Flink-yarn启动失败

CDH6.3.2集成flink1.18zookeeper版本不匹配Flink-yarn不能正常启动，而在CHDWeb页面，flink日志报错提示不明确，不能定位具体错误。
qq_21480329·2024-01-01 10:05

Elasticsearch-8.11.1 （2+1）HA（高可用）集群部署

目录一、环境描述二、安装ES2.1下载Elasticsearch2.2解压Elasticsearch2.3创建es服务账号/密码2.3修改服务器配置2.4配置节点2.4.1配置说明2.4.2配置高可用集群2.4.2.1maser节点服务配置2.4.2.2node1节点服务配置2.4.2.3node2节点服务配置2.4.2.3node3节点服务配置2.4.2.3node4节点服务配置2.4.3服务启
夜夜流光相皎洁_小宁·2024-01-01 06:36

Kubernetes集群部署Rook Ceph实现文件存储，对象存储，块存储

Kubernetes集群部署RookCeph部署Ceph集群1.RookCeph介绍RookCeph是Rook项目中的一个存储方案，专门针对Ceph存储系统进行了优化和封装。
大風起雲飛揚·2023-12-31 17:08

trino-435: 集群部署

二、集群部署1、集群规划节点是否为coordinatornod
玉成226·2023-12-31 13:38

Nginx and micro-service

现在假设系统后端服务是微服务架构，一共100个microservice（简称:m-s），分别部署在150台机器上（有的服务是集群部署）。这种情况下前端请求它如何调抵达自己想访问的m-s呢？
君子兰琚琚·2023-12-31 13:37

一篇掌握Elasticsearch7.10集群搭建到实战

目录一、背景二、内容概要三、基础概念四、ES版本选择Elasticsearch版本选择ES客户端SDK版本选择五、Elasticsearch多租户多租户下的架构租户的识别和路由六、ES集群搭建集群部署架构单集群示例多集群示例
南天一梦N·2023-12-30 22:49

CentOS7安装部署Zookeeper

集群角色4.特点5.环境二、正文1.部署服务器2.基础环境1）主机名2）Hosts文件3）关闭防火墙4）JDK安装部署3.单机部署1）下载和解压2）配置文件3）数据目录4）单机启动5）测试6）自启动4.集群部署
趴着喝可乐·2023-12-30 21:43

MYSQL二主二从集群部署

目录一、环境描述二、安装mysql2.1卸载mysql(如果没安装过，可忽略)2.1.1列出安装的mysql2.1.2卸载mysql2.1.3删除mysql文件目录2.1.3.1查看mysql目录2.1.3.2依次删除2.2在线安装2.2.1下载安装源2.2.2安装源rpm2.2.3加入rpm密钥2.2.4执行安装2.2.5设置开机自启动2.2.6修改密码2.2.6.1获取临时密码2.2.6.2登
夜夜流光相皎洁_小宁·2023-12-30 20:10

Spark在不同集群中的运行架构

部署在单台机器上时，既可以用本地（Local）模式运行，也可以使用伪分布式模式来运行；当以分布式集群部署的时候，可以根据自己集群的实际情况选择Standalone模式（Spark自带的模式）、YARN-Client
姚兴泉·2023-12-30 13:54

「从ES到CK 02」Clickhouse的基础知识扫盲

限于篇幅及便于分类组织，我会以一个系列文章的形式记录：01《ElasticsearchvsClickhouse》02《Clickhouse的基础知识扫盲》03《Clickhouse多分片多副本集群部署》
Pong_Kaho·2023-12-30 09:07

K8S简介(Kubernetes)

K8s是一个容器化应用提供集群部署和管理的开源工具由Google开发。
GG-0408·2023-12-29 22:34

kubesphere生产环境落地实践(二)kubekey本地化

实际上kubekey1.0.1部署kubesphere流程如下：检测依赖安装情况部署kubernetes集群部署存储插件（默认openebslocalPV）部署kubesphere如下createTasks
微凉哇·2023-12-29 21:11

给linux(centos)操作系统设置主机名的几种方式

镜像下载、域名解析、时间同步请点击阿里云开源镜像站一、前言就是我们需要集群部署hadoop,Flink时，写ip地址太长了，然后大家想的就是能不能用比如：node1,node2,node3去代替IP地址
萌褚·2023-12-29 21:13

Docker九 | Swarm mode

目录Swarm基本概念节点服务和任务创建Swarm集群创建管理节点增加工作节点查看集群部署服务新建服务查看服务服务伸缩增加服务减少服务删除服务Swarm基本概念节点节点分为管理节点(manager)和工作节点
魔法恐龙: )·2023-12-29 19:31

集群部署篇--Redis 哨兵模式

文章目录前言一、哨兵模式介绍：1.1介绍：1.2工作机制：二、哨兵模式搭建：2.1redis主从搭建：2.2setinel集群搭建：2.2.1配置：sentinel.conf：2.2.2运行容器：2.2.3查看容器的信息：2.2.4故障自动转移：2.2.5slave晋升maser：2.2.6原主节点重新启动：总结：参考：前言虽然有了Reids的主从模式，但是我们发现它的故障转移能力非常弱，所以在主
拽着尾巴的鱼儿·2023-12-29 18:24

集群部署篇--Redis 主从模式

文章目录前言Redis主从部署：1.1主从架构介绍：1.2主从架构实现：1.2.1redis安装：1.3主从架构优缺点：1.4故障转移：总结前言显然在线上环境中Redis服务不能以单机的方式运行，必须有备份，来应对服务挂掉的情况，本文通过docker完成Redis的主从模式部署；Redis主从部署：1.1主从架构介绍：Redis主从架构是一种常见的数据复制和高可用性架构设计，它包括一个主节点和多个
拽着尾巴的鱼儿·2023-12-29 18:23

集群部署篇--Redis 集群分片模式

文章目录前言一、Redis分片集群介绍1.1介绍：1.2工作机制：1.2.1节点：1.2.2槽slot：1.2.3故障转移：二、Redis分片集群搭建:2.1配置文件：2.2redis部署：2.3redis集群创建：2.4redis集群连接：总结参考：前言对于平常的业务往往使用redis的哨兵模式就可以了，虽然redis单台服务可以提供10W的并发，但是对于并发量非常大的服务来说可能还不够，所以此
拽着尾巴的鱼儿·2023-12-29 18:52

零信任 aTrust 本地集群部署

一、本地集群部署使用背景本地集群部署主要是为解决设备高可用问题，为客户提供设备容灾和扩容的能力。
慕容天成·2023-12-29 17:38

kubeSphere集群部署nacos

kubeSphere部署nacos个人环境说明执行nacos数据脚本kubeSphere添加配置创建有状态副本集修改集群配置文件创建外部访问服务访问个人环境说明由于我之前这个项目就是docker+jenkins部署的,只是现在升级到k8s+kubeSphere所有下面有些操作我可能不同,例如我的nacos配置文件就是docker里面查看复制过来,如果之前没有部署过的小伙伴,可以直接到GitHub上
孟德爱吃香菜·2023-12-29 06:48

kubeSphere集群部署ElasticSearch

kubeSphere集群部署ElasticSearch根据docker启动文件来配置修改max_map_count添加配置文件创建工作负载测试根据docker启动文件来配置dockerrun-d\--namees
孟德爱吃香菜·2023-12-29 06:41

【日志系列】什么是分布式日志系统？

现在，很多应用都是集群部署的，一次请求会因为负载均衡而被路由到不同的服务器上面，这就导致一个应用的日志会分散在不同的服务器上面。
昕宝爸爸爱编程·2023-12-29 03:12

Java技术栈 —— Redis的雪崩、穿透与击穿

实验的先导条件（Nginx+Jmeter）一、Redis缓存雪崩、缓存穿透、缓存击穿1.1雪崩1.2穿透1.3击穿二、Redis应用场景——高并发2.1单机部署的高并发问题与解决（JVM级别锁）2.2集群部署的高并发问题与解决
躬身入世，以生证道·2023-12-29 00:44

MapReduuce配置&YARN集群部署并启动(非常详细！！)

博主syst1m带你acquireknowledge！✨博客首页——syst1m的博客《CTF专栏》超级详细的解析，宝宝级教学让你从蹒跚学步到健步如飞《大数据专栏》大数据从0到秃头，从分析到决策，无所不能❕《python面向对象(人狗大战)》突破百万的阅读量，上过各种各样的官方大型专栏，python面向对象必学之一！希望本文能够给读者带来帮助，更好地理解这个问题或解决你的困惑1.部署集群概述1.1
syst1m'·2023-12-28 13:29

「Kafka」入门篇

「Kafka」入门篇基础架构Kafka快速入门集群规划集群部署官方下载地址：http://kafka.apache.org/downloads.html解压安装包：[atguigu@hadoop102software
小成同学_·2023-12-28 12:30

《千峰逆战“记录蜕变、见证奇迹”学习分享活动》2020-03-21

#千峰逆战班，SZ201刘峻#在千峰“逆战”学习第41天今天对昨天的mycat进行了回顾，初步了解mysql-galera集群部署。有时候要到达谷底，才会慢慢变好。
Mask_o·2023-12-28 11:56

quartz-深度解析

5.集群部署如何保证不重跑、不漏跑？
黑小飞·2023-12-28 08:03

【分布式任务调度】（一）XXL-JOB调度中心集群部署配置

文章目录1.概述2.代码编译2.1.代码下载2.2.初始化与编译3.集群部署3.1.服务启动3.2.反向代理4.总结1.概述XXL-JOB是一款轻量级的分布式任务调度中间件，默认支持6000个定时任务，
挥之以墨·2023-12-28 08:19

springboot整合webSocket：鉴权，心跳检测，wss请求，nginx配置、集群部署

1.首先pom引入websocketorg.springframework.bootspring-boot-starter-websocketSpringBoot和WebSocket是没有token鉴权的，需要自己定义实现WebSocket建立连接时的鉴权，websocket的实现方式就和一般博客看到的不一样了，本文自定义websocket配置：WebSocketConfigimplementsW
乘风!·2023-12-28 08:10

K8S二进制部署之定义CA证书与ETCD

制作官方颁发的证书：2、制作master端的证书（用于内部加密通讯，同时为了给与Client端颁发master签名的证书）3、制作workernode端证书CA证书机构（签发电子证书）三、K8S二进制集群部署
啊啊啊啊啊建·2023-12-28 02:31

ArgoCD

一.ArgoCDUI界面还不是很完善,很多依赖于命令行,都是无状态应用argocd多集群部署不能在一个Application内选择多个部署集群，只能通过建立多个相同Application对应不同部署目的集群方式支持
MoonSoin·2023-12-28 01:58

XXL-JOB任务分片

：单个任务和集群任务单机多任务分片集群分片任务类型单个任务：一个任务实例便可完成单机单任务：单机模式下任何路由模式都只有一个实例执行集群单任务：由路由策略(广播模式除外)选择其中一个实例完成分片任务：集群部署
牧竹子·2023-12-27 22:25

redis缓存雪崩解决方案六种

1.保持缓存层的高可用性使用Redis哨兵模式或者Redis集群部署方式，即便个别Redis节点下线，整个缓存层依然可以使用。
jayjay_liu·2023-12-27 17:11

【软件系统构架】初步理解软件系统构架

文章目录前言一、动静分离二、CDN加速三、负载均衡四、微服务五、分布式六、读写分离七、分库分表八、集群部署九、消息队列十、异步处理前言在以往的学习工作中，接触到很多概念，并且很可能都不知道干嘛，就比如OSI
我辈李想·2023-12-27 09:50
上一页 2 3 4 5 6 7 8 9 下一页
按字母分类： ABCDEFGHIJKLMNOPQRSTUVWXYZ其他