集群环境第5页

源码解析：Java本地缓存的实现代码

在集群环境下，常用的分布式缓存有Redis、Memcached等。但在某些业务场景上，可能不需要去搭建一套复杂的分布式缓存系统，在单机环境下，通常是会希望使用内部的缓存（LocalCache）。

Lemonrel·2023-11-23 10:39

Helm部署xxl-job-admin到K8S集群

本文介绍部署的环境是基于helm3.x，aws的eks集群环境假定已经安装好helm3,kubectl等工具准备xxl-job数据库以下是基于xxl-job-admin发布的2.3.0版本为基准进行部署

爱埋珊瑚海～～·2023-11-22 20:17

Airflow2.2.3 + Celery + MYSQL 8构建一个健壮的分布式调度集群

1集群环境同

云原生生态圈·2023-11-22 06:17

【生产级实践】Docker部署配置Hadoop3.x + HBase2.x实现真正分布式集群环境

一、安装DockerHadoop3.X分布式集群1、机器环境这里采用三台机器来部署分布式集群环境：192.168.1.101hadoop1（docker管理节点）192.168.1.102hadoop2192.168.1.103hadoop32

麦神-mirson·2023-11-22 04:56

iceberg学习笔记（2）—— 与Hive集成

前置知识：1.了解hadoop基础知识，并能够搭建hadoop集群2.了解hive基础知识3.Iceberg学习笔记（1）——基础知识-CSDN博客可以参考：Hadoop基础入门（1）：框架概述及集群环境搭建

THE WHY·2023-11-21 22:59

分布式架构中保证session一致

在搭建完集群环境后，不得不考虑的一个问题就是用户访问产生的session如何处理。

谦业·2023-11-21 21:13

Raft分布式一致性算法原理(选举和同步)

Raft分布式一致性算法原理(选举和同步)一.背景在集群环境下，很容易出现单节点故障的问题，那么我们就需要进行集群部署，但是当集群部署的环境下，我们如何保证工作有序的调度与通信并且保证一致性呢，当客户端发送一连串指令

leefe·2023-11-21 06:45

【OpenMPI_linux-centos7.9系统源码编译安装调用】

编译默认安装方式3.2GNU编译绑定C++和FORTRAN方式3.3Intel编译器默认安装方式3.4Intel编译绑定C++和FORTRAN方式四、★Openmpi环境加载4.1个人主机环境4.2HPC集群环境五

xyq_龙呆呆·2023-11-20 09:11

Linux多节点下MPI集群环境搭建

为什么80%的码农都做不了架构师？>>>一、MPI1.关于MPIMPI（MessagePassingInterface）是一个信息传递应用程序接口，可以用于并行计算。MPI有多种实现版本，如MPICH，CHIMP以及OpenMPI。其中最常见的的是MPICH和OpenMPI，本文使用的是MPICH。MPICH官网：http://www.mpich.org/OpenMPI官网：https://www

weixin_33725126·2023-11-20 09:41

使用 Admission Webhook 机制实现多集群资源配额控制

但随着集群规模扩大，以及任务类型的增多，我们对配额管理的规则需要进行调整：ResourceQuota针对单集群设计，但实际上，开发/生产中经常使用多集群环境。集群大

「已注销」·2023-11-20 02:29

飞鼠异地组网工具实战之访问k8s集群内部服务

飞鼠异地组网工具实战之访问k8s集群内部服务一、飞鼠异地组网工具介绍1.1飞鼠工具简介1.2飞鼠工具官网二、本次实践介绍2.1本次实践场景描述2.2本次实践前提2.3本次实践环境规划三、检查本地k8s集群环境

江湖有缘·2023-11-20 02:26

flink 什么是fink（一）flink架构

flink被设计成可以运行在所有常见的集群环境中，并以内存速度和任何规模执行计算。处理无界流和有界流任何种类的数据都是作为事件流产生的。数据可以作为无界流和有界流进行出来。

666呀·2023-11-20 01:25

Python大数据之linux学习总结——day11_ZooKeeper

且树中的每个节点可以拥有子节点ZK集群环境zookeeper概念:分布式协调服务zookeeper的服

笨小孩124·2023-11-19 20:50

k8s TLS二进制离线部署

kubernetes集群部署（TLS认证）第1章部署准备1.1组件版本&&集群环境1.1.1组件版本Kubernetes1.8.3Docker18.03.1-ceEtcd3.2.9FlanneldTLS

weixin_34268843·2023-11-19 20:31

kubernetes集群环境搭建（kubeadm方式）

1.kubernetes简介kubernetes，是一个全新的基于容器技术的分布式架构领先方案，是谷歌严格保密十几年的秘密武器----Borg系统的一个开源版本，于2014年9月发布第一个版本，2015年7月发布第一个正式版本。kubernetes的本质是一组服务器集群，它可以在集群的每个节点上运行特定的程序，来对节点中的容器进行管理。目的是实现资源管理的自动化，主要提供了如下的主要功能：自我修复

且听风呤tmj·2023-11-19 08:10

Docker安装与配置阿里云镜像加速

产生背景：开发和运维之间因为环境不同而导致的矛盾（不同的操作系统、软件环境、应用配置等）DevOps集群环境下每台服务器都配置相同的环境，太麻烦解决“在我的机器上可以正常工作”的问题Docker是一个开源的应用容器引擎

刘远山·2023-11-19 00:07

大数据开发学习笔记

本文介绍了各个大数据开发框架及数据库的学习记录链接有什么问题欢迎大家留言或者私信交流~Hadoophadoop集群搭建+hive安装_hadoop集群安装hive-CSDN博客Hadoop基础入门（1）：框架概述及集群环境搭建

THE WHY·2023-11-17 16:01

在Sprinng Boot中使用Redis充当缓存

故而在不同的服务器之间的进程会存在缓存不一致的情况，就算我们的EhCache提供了集群环境为我们提供缓存同步，但是我们在进行同步的时候是需要一定的时间的，短暂的缓存不一致仍然存在。

Miaow.Y.Hu·2023-11-17 05:35

记一次K8S部署redis过程（从集群到单机）

网上翻阅各类资料后，决定搭建一个3主3从的集群环境。后因代码使用redis集群需要更改，又重新部署单机redis。redis介绍：数据完全保存在内存中，速度非常快，可使用磁盘进行持久化。

lianglove7·2023-11-17 02:11

基于FiscoBcos v3.0.1 pro版的host网络模式集群环境搭建

fish1208·2023-11-16 23:58

Kubernetes（K8S）集群搭建基础入门教程

养歌·2023-11-16 17:32

k8s 之简介集群环境部署（一）

Kubernetes介绍kubernetes，是一个全新的基于容器技术的分布式架构领先方案，是谷歌严格保密十几年的秘密武器----Borg系统的一个开源版本，于2014年9月发布第一个版本，2015年7月发布第一个正式版本。kubernetes的本质是一组服务器集群，它可以在集群的每个节点上运行特定的程序，来对节点中的容器进行管理。目的是实现资源管理的自动化，主要提供了如下的主要功能：自我修复：一

小乐笙·2023-11-16 13:00

Redis分布式锁实现及其Redis性能优化

在分布式集群环境下，我们就需要使用分布式锁来解决数据一致性问题。分布式锁可以用Redis或zookeeper。本节我们介绍的Redis的分布式锁实现。

秋忆侬sonny·2023-11-16 04:02

Docker swarm环境下部署JMETER集群-分布式压测

Dockercomposeyuml文件编写若需要加入已经存在的网络使用的镜像介绍部署集群查看服务部署情况执行分布式压测Dockercomposeyuml文件编写本文默认你已经使用dockerswarm搭建好了docker集群环境

冷月无声@@·2023-11-15 19:02

从0开始学大数据16-ZooKeeper是如何保证数据一致性的？

在分布式系统里的多台服务器要对数据状态达成一致，其实是一件很有难度和挑战的事情，因为服务器集群环境的软硬件故障随时会发生，多台服务器对一个数据的记录保持一致，需要一些技巧和设计。

源码头·2023-11-15 15:18

Centos 服务器docker搭建mysql主从集群 redis主从集群

惊弦_·2023-11-15 13:19

hadoop 大数据集群环境配置配置hadoop配置文件 hadoop(七)

1.虚拟机的三台机器分别以hdfs存储,mapreduce计算，yarn调度三个方面进行集群配置hadoop版本3.3.4官网：Hadoop–ApacheHadoop3.3.6jdk1.8三台机器尾号为：22，23，24。（没有用hadoop102,103,104,我改为了hadoop22，hadoop23，hadoop24）2.配置22机器core-site.xmlcd$HADOOP_HOME/

不努力就种地~·2023-11-14 21:42

ZooKeeper+Kafka+ELK+Filebeat集群搭建实现大批量日志收集和展示

一、集群环境准备4c/8G/100G10.10.200.33Kafka+ZooKeeper+ES+Filebeat+ES-head4c/8G/100G10

蜜蜜不吃糖·2023-11-14 09:35

hive on spark调优学习笔记

1集群环境概述1.1集群配置概述：所用集群由5台节点构成，其中2台为master节点，用于部署HDFS的NameNode，Yarn的ResourceManager等角色，另外3台为worker节点，用于部署

一只友·2023-11-14 06:39

实战：kubeadm方式搭建k8s集群(containerd)-20211102

目录文章目录目录文档版本实验环境实验软件1、集群环境配置(all节点均要配置)1.1配置主机名1.2关闭防火墙，selinux1.3关闭swap分区1.4配置dns解析1.5将桥接的IPv4流量传递到iptables

一念一生～one·2023-11-13 15:12

Elasticsearch 外部词库文件更新

本文所使用的ES集群环境可在历史文章中获取，采用docker部署的方式。Elasticsearch是一个功能强大的搜索引擎，广泛用于构建复杂的全文搜索应用程序。

醉鱼！·2023-11-13 11:04

Flink

Flink被设计在所有常见的集群环境中运行，以内存执行速度和任意规模来执行计算。1.2Flink的重要特点1.2.1事件驱动型(Event-

不吃香菜lw·2023-11-13 11:31

k8s-实验部署 1

1、k8s集群部署更改所有主机名称和解析开启四台实验主机，k8s1仓库；k8s2集群控制节点；k8s3和k8s4集群工作节点；集群环境初始化使用k8s1作为仓库，将所有的镜像都保存在本地，不要将集群从外部走仓库搭建完成做免密

coco--hui·2023-11-12 17:32

kafka高可用集群环境搭建

kafka是分布式发布订阅消息系统Kafka作为一个集群，运行在一台或者多台服务器上.Kafka通过topic对存储的流数据进行分类。每条记录中包含一个key，一个value和一个timestamp(时间戳)。中文官方网站：http://kafka.apachecn.org/quickstart.html优点：a、高吞吐量、低延迟：kafka每秒可以处理几十万条消息，延迟最低只有几毫秒，每个top

Gฅ·2023-11-12 10:04

【Linux】ubuntu下kafka集群环境搭建

１.下载kafka正式版，本文使用kafka_2.10-0.8.2.2（在此特别说明下，kafka_2.9.2-0.8.1.1.tgz由于版本相对较低的问题，好多.sh文件时缺少的，比如kafka-topics.sh，所以建议大家在安装的时候不要使用太老的版本，问题较多，并且启动kafka-server-start的时候还报错，始终无法启动成功～）官网下载链接如下：http://kafka.apa

是原来的你吗·2023-11-12 10:04

SpringBoot整合Jedis可切换使用单机、哨兵、集群模式

前言关于Redis的哨兵环境以及集群环境的搭建过程，可移步这里:RedisCluster环境搭建https://blog.csdn.net/u014398573/article/details/127671087Redis

程序员无名·2023-11-11 11:24

Docker 学习笔记（四）-- Docker 可视化界面

Portainer是一款轻量级的应用，它提供了图形化界面，用于方便地管理Docker环境，包括单机环境和集群环境。Portainer是Docker的图形化管理工具。

稻草人0.0·2023-11-10 11:42

Flink 基础 -- 尝试Flink

Flink被设计成可以在所有常见的集群环境中运行，以内存中的速度和任何规模执行计算。Flink功能保证正确性(Correctnessguarantees)恰好一次状态一致性事件时间处理复杂的后期数据

chinusyan·2023-11-09 05:30

Kubernetes(k8s)环境部署

目录1.Kubernetes介绍1.1应用部署方式演变1.2kubernetes简介1.3kubernetes组件1.4kubernetes概念2.kubernetes集群环境搭建2.1前置知识点2.2kubeadm

赵广陆·2023-11-08 20:09

Redis主从配置、哨兵模式、集群模式

Redis集群环境搭建主从配置(基础)优点：MasterServer是以非阻塞的方式为Slaves提供服务。所以在Master-Slave同步期间，客户端仍然可以提交查询或修改请求。

jl935418600·2023-11-08 10:55

hadoop yarn资源调度

它的出现其实是为了解决第一代MapReduce编程框架的不足，提高集群环境下的资源利用率，这些资源包括内存，磁盘，网络，IO等。Hadoop2.X版本中重新设计的这个YARN集群，

习丿枫叶菊·2023-11-08 06:09

微服务架构——笔记（4）

服务发现，Eureka自我保护文章来源B站视频尚硅谷SpringCloud框架开发教程(SpringCloudAlibaba微服务分布式架构丨SpringCloud)教程本次笔记内容为支付服务提供者8001集群环境构建一

lianghaibos·2023-11-08 02:40

Docker Stack部署应用详解+Tomcat项目部署详细实战

而DockerStack只需对已有的docker-compose.yml配置文件稍加改造就可以完成Docker集群环境下的多服务编排。

aa一叶知秋aa·2023-11-08 02:45

SpringBoot整合Redis实现分布式缓存及锁的实战分享

在当前流行的微服务以及分布式集群环境下，Redis的使用场景可以说非常的广泛，能解决集群环境下系统中遇到的不少技术问题，在此列举几个使用redis经常用到的功能！

Linux小百科·2023-11-07 02:01

k8s提交spark应用消费kafka数据写入elasticsearch7

一、k8s集群环境k8s1.23版本，三个节点，容器运行时使用docker。

青春不流名·2023-11-06 23:50

Flink-简单了解及入门WordCount

Flink被设计在所有常见的集群环境中运行,以内存执行速度和任意规模来执行计算。流数据处理以及批处理的差别：流处理是更低延迟的批处理。比如设备的实时数据采集和显示、实时告警等

魔笛Love·2023-11-06 20:24

ActiveMQ-5.15基于zookeeper+levelDB的Master-Slave集群安装配置

192.168.1.11161616816162621192.168.1.11261616816162621192.168.1.11361616816162621前提条件：各服务器安装jre环境(这里装的activemq5.15.9需要jre1.8环境)zookeeper集群环境安装步骤

灯塔kg·2023-11-06 05:09

k8s调度：亲和度、容忍度

2.2、节点软亲和性三、Pod亲和度3.1、Pod硬亲和度3.2、Pod软亲和度四、污点和容忍度一、实验环境及简介1.1、实验环境基于centos7搭建的k8s集群，搭建方法见CentOS7配置k8s集群环境

Happy聪·2023-11-06 04:18

python怎么导入module_python的模块module导入

但集群环境的调度机上只有python的最基本组件而且不让装这类第三方依赖包，就只能想办法将pymysql的依赖包直接在项目中作为模块导入了。

健玮·2023-11-06 04:45

Kafka线上环境部署

Kafka线上环境部署集群环境规划操作系统选型I/O模型。

炒栗子不加糖·2023-11-05 23:25

推荐频道

集群环境