rocketMQ集群

Redis Sentinel机制与用法（七）

Master-slave的高可用方案时，假如master宕机了，Redis本身(包括它的很多客户端)都没有实现自动进行主备切换，而Redis-sentinel本身也是一个独立运行的进程，它能监控多个master-slave集群
动力节点IT教育·2024-01-09 10:04

Duboo-入门到学废【下篇】

目录1.dubbo-admin2.序列化3.超时4.重试❤️5.多版本6.负载均衡7.集群容错1.dubbo-admin1.1dubbo-admin是什么1.duboo-admin是一个基于Dubbo框架的管理平台
会敲代码的小张·2024-01-09 10:03

Raft 读请求性能分析

（一次RTT、一次磁盘写）使用LeaderLease，保证整个集群只有一个Leader，Leader接收到都请求后，记录下当前的commitIndex为readIndex，当applyIndex大于等于
sober_me·2024-01-09 09:46

通过Kuboard部署Nginx服务并映射挂载NFS服务器

这里写目录标题一、项目概述二、环境三、样式nginx运行页面nginx挂载存储页面nginx服务service页面index代理网页四、部署流程集群导入NFS服务器搭建新建nginx工作负载配置拷贝配置信息到
柒月VII·2024-01-09 09:35

ELK的搭建—Elasticsearch-8.11.3的安装及集群的搭建

es的安装及其集群的搭建一、Elasticsearch服务的安装部署1.Elasticsearch的rpm包下载2.安装Elasticsearch服务3.设置系统资源及内存大小分配4.Elasticsearch
酒米_linyx·2024-01-09 08:52

docker/华为云cce 部署nacos 2.3.0 集群模式

hub.docker.com/r/nacos/nacos-server版本nacos/nacos-server:v2.3.0-slim关键环境变量使用mysql数据源变量值备注MODEcluster启用集群模式
路过君_P·2024-01-09 08:16

ELK之集群安全认证设置

一、生成ca证书（p12文件）进入/usr/share/elasticsearch/bin安装路径中，执行./elasticsearch-certutilca一路回车[root@sgbin]#pwd/usr/share/elasticsearch/bin[root@sgbin]#lselasticsearchelasticsearch-cronevalelasticsearch-keystoree
一掬净土·2024-01-09 08:15

docker compose 搭建ES集群的详细步骤，并去掉验证，使用http访问

要使用DockerCompose搭建一个Elasticsearch集群，并配置为不使用验证，同时使用HTTP访问，你可以遵循以下步骤：步骤1:安装Docker和DockerCompose确保你的系统上已安装
MonkeyKing.sun·2024-01-09 08:45

Kafka集群部署

文章目录一、实例配置二、zookeeper集群安装三、kafka集群安装四、验证没有提示，所有机器都执行在kafka集群中引入zookeeper，主要是为了管理kafka集群的broker。
real向往·2024-01-09 08:55

hadoop分布式集群搭建

虚拟机准备虚拟机单机配置：内存4G，硬盘50G安装好linux/boot200M/swap2g/剩余*安装VMTools关闭防火墙sudoserviceiptablesstopsudochkconfigiptablesoff设置静态IP，改主机名编辑vim/etc/sysconfig/network-scripts/ifcfg-eth0改成=============================
麦田里的稻草人19994·2024-01-09 08:24

hadoop集群主从时间同步

1.时间服务器配置（必须root用户）（1）检查ntp是否安装[root@hadoop102桌面]#rpm-qa|grepntpntp-4.2.6p5-10.el6.centos.x86_64fontpackages-filesystem-1.41-1.1.el6.noarchntpdate-4.2.6p5-10.el6.centos.x86_64（2）修改ntp配置文件[root@hadoop1
麦田里的稻草人19994·2024-01-09 08:24

hadoop集群分发脚本

分发脚本xsync#!/bin/bash#1获取输入参数个数，如果没有参数，直接退出pcount=$#if((pcount==0));thenechonoargs;exit;fi#2获取文件名称#basename是去除目录后剩下的名字p1=$1fname=`basename$p1`echofname=$fname#3获取上级目录到绝对路径#dirname命令可以取给定路径的目录部分（一般指最后一个
麦田里的稻草人19994·2024-01-09 08:23

Redis发布订阅与集群

Redis发布订阅Redis发布订阅(pub/sub)是一种消息通信模式：发送者(pub)发送消息，订阅者(sub)接收消息。Redis客户端可以订阅任意数量的频道。下图展示了频道channel1，以及订阅这个频道的三个客户端——client2、client5和client1之间的关系：image.png当有新消息通过PUBLISH命令发送给频道channel1时，这个消息就会被发送给订阅它的三个
牧童US·2024-01-09 08:51

大数据之PySpark的RDD介绍

文章目录前言一、RDD简介二、RDD的特性三、RDD的特点总结前言之前的文章主要介绍Spark基础知识，例如集群角色、Spark集群运行流程等，接下来会进一步讨论Spark相对核心的知识，让我们拭目以待
敲键盘的杰克·2024-01-09 07:11

K8S API访问控制之RBAC利用

RBAC是基于角色的访问控制，使用kubeadm安装集群1.6版本以上的都默认开启了RBAC。本文主要研究集群可能存在的利用点及相对应的利用手法。
杭州默安科技·2024-01-09 07:09

k8s的集群调度

k8s的集群调度：scheduler：负责调度资源，把pod调度到node节点。预算策略优选策略1、List-watchk8s集群当中，通过list-watch的机制进行每个组件的协作，保存数据同步。
m0_70766460·2024-01-09 07:38

【K8S 云原生】Kurbernets集群的调度策略

目录一、Kubernetes的list-watch机制1、List-watch2、创建pod的过程：二、scheduler调度的过程和策略：1、简介2、预算策略：predicate3、优先策略：3.1、leastrequestedpriority：3.2、balanceresourceallocation：3.3、imagelocalitypriority：4、选择的过程：三、kubernetes
koeda（粉丝冲刺一个亿）·2024-01-09 07:07

redis服务迁移数据工具--RDM

二、迁移思路：redis服务/集群的数据迁移思路是需要新建一个配置、密码一样的redis服务/集群；在工作电脑上安装RDM工具（mac版），确保该服务器能访问新旧的redis服务/集群；登入新旧的redis
jiang0615csdn·2024-01-09 07:54

物理机搭建hive

一、修改Hadoop配置修改core-site.xml配置yarn-site.xml分发文件，然后重启集群二、Hive解压安装上传文件添加hive环境便量，source生效启动高可用集群，启动hive三
DIY……·2024-01-09 06:45

flink教程-详解flink 1.11中的新部署模式-Application模式

session模式这种模式会预先在yarn或者或者k8s上启动一个flink集群，然后将任务提交到这个集群上，这种模式，集群中的任务使用相同的资源，如果某一个任务出现了问题导致整个集群挂掉
大数据技术与应用实战·2024-01-09 06:53

PySpark & Dask 分布式集群环境搭建（Linux）

Spark分布式环境搭建_Linux版9.0具体思路：先进行单机配置，然后复制Linux虚拟机、分发配置好的框架。一、准备软件包、框架包、和系统包二、安装VMwareworkstationplayer（免费）三、Centos安装，参见centos安装文档四、配置centos7（node1节点）登录，用户名root，密码:123456查看网络IP地址，记录IP地址（当前node1节点IP：192.1
蒲魔树的种子·2024-01-09 06:04

pyspark 引入虚拟环境依赖包以及向yarn集群提交任务攻略

以虚拟环境引入project_demo项目包，并向sparkyarn提交spark任务为例：将project_demo安装到虚拟环境中1）virtualenvlocal_venv#创建虚拟环境2）sourcelocal_venv/bin/activate#运行虚拟环境3）pipinstall-Ugit+ssh://[email protected]_demo.git-ihttp://py
阿君聊风控·2024-01-09 06:33

anaconda创建虚拟环境

最近在做项目时需要提交pyspark任务到公司的Spark集群上，由于没有集群节点的相关权限，打算采用anaconda创建pyspark的虚拟环境来进行。
追梦菜鸟·2024-01-09 06:33

hadoop集群搭建、spark集群搭建、pyspark搭建（linux+window）

1、前言本文记录学习过程中Hadoop、zookeeper、spark集群搭建，主要为pyspark库服务（具体为window上pyspark环境和pyspark库，linux上spark框架、pyspark
Lfx_come on·2024-01-09 06:02

基于Docker搭建大数据集群（二）基础组件配置

主要内容jdk环境搭建scala环境搭建zookeeper部署mysql部署前提docker容器之间能免密钥登录yum源更换为阿里源安装包微云分享|tar包目录下JDK1.8.221Scala2.12.9Zookeeper3.5.5Mysql手动安装较复杂，使用yum安装一、安装包处理发送文件到容器dockercp文件地址容器ID:容器地址创建解压目录mkdir/opt/jdkmkdir/opt/
njpkhuan·2024-01-09 05:38

『HDFS』伪分布式Hadoop集群

博客引流本文是『Hadoop』MapReduce处理日志log(单机版)的旭文,maybe还有后续在搭建环境的时候发现很难搜到合适的教程，所以这篇应该会有一定受众伪分布式就是假分布式，假在哪里，假就假在他只有一台机器而不是多台机器来完成一个任务,但是他模拟了分布式的这个过程，所以伪分布式下Hadoop也就是你在一个机器上配置了hadoop的所有节点但伪分布式完成了所有分布式所必须的事件伪分布式Ha
gunjianpan·2024-01-09 04:31

31 | 误删数据后除了跑路，还能怎么办？

droptable命令，通过binlog传所有从库和级联从库，整个集群都执行一、误删行第24篇文章delete误删行，Flashback恢复，binlog拿回原库重放。
hedgehog1112·2024-01-09 03:45

Swarm 集群

Swarmmode创建Swarm集群初始化集群DockerMachine可以在数秒内创建一个虚拟的Docker主机，下面我们使用它来创建三个Docker主机，并加入到集群中。
Lucie_xxm·2024-01-09 03:19

[Kubernetes]5. k8s集群StatefulSet详解,以及数据持久化（SC PV PVC）

前面通过deployment结合service来部署无状态的应用,下面来讲解通过satefulSet结合service来部署有状态的应用一.StatefulSet详解1.有状态和无状态区别无状态：无状态(stateless)、牲畜(cattle)、无名(nameless)、可丢弃(disposable)有状态：有状态(stateful)、宠物(pet)、具有名(haviingname)、不可丢弃(
zhoupenghui168·2024-01-09 03:18

grafana+prometheus+redis_exporter监控redis数据库性能

本文使用redis_exporter监控redis集群服务，并且使用prometheus收集数据，使用grafana展示数据。
小老弟你咋回事·2024-01-09 03:15

【运维知识大神篇】运维界的超神器Kubernetes教程1（组件架构概述+手撕架构图+生产环境部署K8s+ 部署Flannel的CNI插件+K8s集群资源清单编写+部署游戏和博客镜像上K8s集群实战）

本篇文章开始给大家介绍Kubernetes的内容，听我朋友说现在10个人的团队都在研究项目上K8s了，可见其趋势和重要性，招聘岗位一搜，Linux云计算运维，百分之八九十都要求会K8s的，所以学好它至关重要，里面内容之多，逻辑之复杂，也不是别的工具能相比的，不多说了，开始今天的内容。目录K8s和Docker爱恨情仇K8s的组件架构概述（手撕架构图）K8s生产环境中部署的方式一、Docker及系统环
我是koten·2024-01-09 02:10

分布式消息队列差异化总结

本文将对Kafka、RabbitMQ、ZeroMQ、RocketMQ、ActiveMQ从17个方面综合对比作为消息队列使用时的差异。一、资料文档Kafka：资料数量中等。
为爱放弃一切·2024-01-09 01:58

Elasticsearch集群搭建、优化及实践

文章目录一、Elasticsearch集群1、Elasticsearch集群概念2、Elasticsearch集群安装3、安装Kibana4、测试集群状态二、Elasticsearch优化1、磁盘选择2
帅得真的是无敌了·2024-01-08 23:28

Elasticsearch性能优化实践

目录背景现状优化措施写性能优化按天拆分索引冷热分离服务器配置调整内存分配去掉复制分片字段设计查询小技巧索引垂直拆分成果背景公司使用es存储全链路追踪的日志数据，生产环境数据量比较大，上线之后集群频繁卡死
咦940·2024-01-08 23:57

Mac M1 上面虚拟机 搭建 k8s v 1.19.3 集群 命令参考

MacM1上面虚拟机k8sv1.19.3小白搭建集群命令参考mac系统版本M1安装虚拟机比较麻烦,只能支持centos8,镜像很大,首先要安装虚拟机,可以参考末尾链接,说实话,光下载官方虚拟机和百度网盘镜像都下载了好久
W_GJ·2024-01-08 23:38

《高性能Linux服务器构建实战》笔记

系统安全、故障排查、自动化运维、集群架构1、账号安全，安装完后可以删除的账号：adm,lp,sync,shutdown,halt,news,uucp,operator,games,gopher禁用登录功能
SkTj·2024-01-08 22:06

一图了解六种常见的负载均衡算法

随着业务流量越来越大，单台服务器无论如何优化，无论采用多好的硬件，总会有性能天花板，当单服务器的性能无法满足业务需求时，就需要把多台服务器组成集群系统提高整体的处理性能。
Elivis Hu·2024-01-08 22:24

流式湖仓增强，Hologres + Flink 构建企业级实时数仓

Hologres+Flink通过众多的丰富企业级能力，替换开源复杂的各类技术组件，减少多种技术栈学习、多种集群运维、
Elivis Hu·2024-01-08 22:52

Redis的三种集群方式+穿透与雪崩的预防和解决

Redis的三种集群方式概述1、主从复制原理从服务器连接主服务器，发送SYNC（同步）命令；主服务器接收到SYNC命名后，开始执行BGSAVE命令生成RDB文件并使用缓冲区记录此后执行的所有写命令；主服务器
java爪哇·2024-01-08 21:49

集群部署时的分布式 session 如何实现？

面试题集群部署时的分布式session如何实现？
kevin0016·2024-01-08 20:47

k8s的pod分类、核心组件、网络模型

k8s的pod分类、核心组件、网络模型k8s的pod分类自主式Pod这种Pod本身是不能自我修复的，当Pod被创建后(不论是由你直接创建还是被其他Controller)，都会被Kuberentes调度到集群的
晶核高手·2024-01-08 20:21

（一）Redis哨兵模式入门

在这种架构下，多个Redis实例被组织成一个主从复制的集群，其中有一个Redis主节点负责接收读写请求，而其他Redis从节点则负责复制主节点的数据。  
我只会发热·2024-01-08 20:49

centOS7.9部署k8s

master节点，两台work节点；centos系统版本为7.5或以上版本；我这里使用的是7.9，除此之外，还需要一些额外的条件*.每台主机至少具备2G内存；2核CPU*.一定关闭防火墙1、时间同步k8s要求集群中的节点必须精确一致
My_baixiaochun·2024-01-08 20:46

K8S的集群调度

Scheduler：负责调度资源，把pod调度到node节点，有两种策略，1：预选策略2：优先策略list-watch概念k8s集群当中，通过list-watch的机制进行每个组件的协作，保持数据同步，
2301_79410672·2024-01-08 20:15

k8s简介

版本，加入CNCF基金会2017战胜swarmmesos，成为领域老大2018CNCF首个“毕业”项目核心功能自我修复服务发现和负载均衡自动部署和回滚弹性伸缩应用场景微服务架构核心组件etcd：保存整个集群的状态
大喵哥哥666·2024-01-08 20:28

一、二进制方式 安装部署K8S

目录一、操作系统初始化1、关闭防火墙2、关闭SELinu3、关闭swap4、添加hosts5、同步系统时间二、集群搭建——使用外部Etcd集群1、自签证书2、自签EtcdSSL证书①创建CA配置文件：ca-config.json②
繁华依在·2024-01-08 18:28

java技术专家【分布式框架】Mycat2应用与实战教程（四）

5.3Docker搭建MySQL主从复制集群(双主双从)5.3.1双主双从架构介绍虽然一主一从或一主多从集群解决了并发读的问题，但由于主节点只有一台，如果主节点宕机了，则数据库的写操作便无法完成，从而无法做到高可用
不走小道·2024-01-08 16:15

java技术专家【分布式框架】Mycat2应用与实战教程（五）

文章目录6.MyCat2实现分库分表6.1分库分表概念回顾6.1.1分库操作6.1.2分表操作6.2分库分表环境准备6.2.1修改MyCat集群配置6.2.2添加数据源6.2.2添加集群配置6.3进行分库分表
不走小道·2024-01-08 16:15

开源大数据集群部署（二）集群基础环境实施准备

作者：櫰木环境准备本次使用到的二进制软件包目录为：系统初始化前提是操作系统已完成安装、各个主机之间网络互通，系统常用命令已安装，本默认这些前提条件已具备，不在阐述。1主机环境初始化安装centos系统完成后需要对主机进行初始化配置和验证工作，在所有主机上（hd1.dtstack.com-hd3）均要进行操作，并按照对应hosts修改主机名：（主机名必须为xxx.xxx.com匹配freeipa安装
云掣YUNCHE·2024-01-08 15:09

k8s的集群调度

schedule：负责调度资源，把pod调度到node节点1、List-watchk8s集群当中，通过list-watch的机制进行每个组件的协作，保持数据同步，保持数据同步，每个组件之间的解耦kubectl
小布爱吃糖.·2024-01-08 15:34
上一页 77 78 79 80 81 82 83 84 下一页
按字母分类： ABCDEFGHIJKLMNOPQRSTUVWXYZ其他