mogilefs集群部署

06 Kafka线上集群部署方案

kafka部署在linux上有什么好处网络传输效率kafka部署在linux上，可以用到linux的零拷贝提升网络传输效率，提高kafka的吞吐量。利用零拷贝可以使数据不经过用户态直接通过网卡发送给接收方，实现数据的高性能传输kafka和零拷贝技术kafka应用了两个零拷贝技术，sendfile和mmapsendfilekafka消息消费过程应用了sendfile，可以查看https://www.
ZyyIsPig·2023-09-04 06:00

java ReentrantLock 锁 await、signal的用法

背景在并发编程中，为了保证线程的原子执行，需要使用锁，jvm内可以使用synchronized和ReentrantLock，如果是集群部署，我们可以使用Redis分布式锁其他的锁后面再介绍。
SteveGao2013·2023-09-03 21:59

2022-01-12 rabbitmq集群部署（镜像模式和quorum模式）

背景实际应用场景默认集群模式，无法做到高可用性，忽略。本文只考虑使用mirrorqueue及quorumqueue，默认使用docker-compose方式部署，其他方式除安装步骤不同，配置基本一样。版本rabbitmq-3.8.3-manage1.单机部署经典镜像集群模式（mirrorqueue）获取配置资源：https://github.com/anyangdp/rabbitmq-cluste
anyangdp·2023-09-03 18:49

k8s 1.27集群部署 容器运行时为containerd

一、主机准备1.1Kubernetes1.27版本集群部署环境准备1.1.1主机操作系统说明序号操作系统及版本备注1CentOS7u91.1.2主机硬件配置说明需求CPU内存硬盘角色主机名值8C8G1024GBmasterk8s-master01
慧闲大大·2023-09-03 16:21

keepalive+nginx高可用K8S集群部署

1.准备工作1.1集群部署规划K8S集群角色节点IP节点名称OS控制节点192.168.0.180k8smaster1Centos7.9控制节点192.168.0.181k8smaster2Centos7.9
小马哥溜达·2023-09-03 16:19

K8S最新版本集群部署(v1.28) + 容器引擎Docker部署（下）

温故知新第三章Kubernetes各组件部署安装kubectl（可直接跳转到安装kubeadm章节，直接全部安装了）下载kubectl安装包执行kubectl安装验证kubectl安装kubeadm添加yum存储库配置文件kubernetes.repo安装kubeadm&kubelet&kubectl（前面安装kubectl可以放到这里一块安装）查看版本信息启动kubeletkubelet启动、查
韧小钊·2023-09-03 16:48

kafka配合ElasticStack技术栈的搭配使用

今日内容:-kafka生产环境调优;-kafka配合ElasticStack技术栈的搭配使用;-zookeeper集群部署;-zookeeper的ACL;-zookeeper的调优;-PB级别项目;-ES8
港南四大炮亡·2023-09-03 15:23

Minio笔记

存储方案2.环境搭建2.1单机部署介绍2.2单机部署（无纠删码模式）2.3通过URL地址对文件进行访问2.4使用Docker单机部署（无纠删码模式）2.5使用Docker单机部署（纠删码模式）2.6分布式集群部署介绍
贴地飞行lyh·2023-09-03 11:30

Ceph14.2.22集群部署及踩坑指南(纯内网环境，无yum源、无时间同步)

目录准备工作所需资源：本地yum源搭建其它准备工作：关闭selinux修改主机名、添加host确保时间同步开启yum安装相关的包一些ceph的命令关于第一次部署ceph，之前的话，只是新建用户，分配空间，没有自己的部署过，实际的生产运维经验也比较少，最多的也就是之前做过一次ceph到阿里云OSS的数据迁移。因为是内网环境，除了可以上传一些包之外，与外网基本是隔绝的，而且操作界面也是很不适应，本来以
大侠之运维·2023-09-03 01:50

微服务注册中心、配置中心-nacos-2.0.4集群部署

每家公司的所用到的中间件，其实都大差不差，但是就微服务注册中心来讲，经历的几家公司都不同。最开始的一家公司有用到zookeeper，其实是很老的注册中心了，上家公司有用到eurake，consul，目前的公司的大部分项目用到的都是nacos。nacos的话，注册中心和配置中心都可以实现，不再需要单独搞新的配置中心，因为最近在做一个新的项目，需要重新部署一套nacos，所以就简单记录下，其实不同的系
大侠之运维·2023-09-03 01:19

ClickHouse 21.7.3.14-2(七) 分片与集群部署

副本虽然能够提高数据的可用性，降低丢失风险，但是每台服务器实际上必须容纳全量数据，对数据的横向扩容没有解决。要解决数据水平切分的问题，需要引入分片的概念。通过分片把一份完整的数据进行切分，不同的分片分布到不同的节点上，再通过Distributed表引擎把数据拼接起来一同使用。Distributed表引擎本身不存储数据，有点类似于MyCat，成为一种中间件，通过分布式逻辑表来写入、分发、路由来操作多
_大叔_·2023-09-02 20:26

【云计算•云原生】4.云原生之什么是Kubernetes

它是一个为容器化应用提供集群部署和管理的开源工具，由
H4ppyD0g·2023-09-02 18:33

ELFK 7.17.6集群部署并收集java微服务日志；

文章目录环境准备一、Elasticsearch分布式集群部署1.设置主机名以及创建elasticsearch的目录2.下载elasticsearch-7.17.6并解压到指定目录3.部署OracleJDK
不知名运维:·2023-09-02 11:11

Hadoop 3.2.4 集群搭建详细图文教程

目录一、集群简介二、Hadoop集群部署方式三、集群安装3.1集群角色规划3.2服务器基础环境准备3.2.1环境初始化3.2.2ssh免密登录（在hadoop01上执行）3.2.3各个节点上安装JDK1.8
Stars.Sky·2023-09-02 07:01

Hadoop集群搭建(五)-集群配置文件

目录集群部署规划自定义配置文件节点格式化配置workers启动集群配置历史服务器集群部署规划hadoop102hadoop103hadoop104HDFSNameNodeDataNodeSecondaryNameNodeNataNodeYARNNodeManagerResourceManagerNodeManagerNodeManager
HUA_8376·2023-09-02 06:55

利用 egg-socket.io 内置的 socket.io-redis 集群部署socket服务

文章目录socket.io前言一、介绍配置二、使用步骤1.准备2.测试前言当一台单机的socket服务无法支撑其业务时我们需要集群部署实现请结合egg-socket.io来阅读链接一、介绍配置先看下配置文件
我叫卷卷卷呀·2023-09-02 05:43

Kubernetes(k8s)概念介绍

k8s是google在2014年开源的容器化集群部署管理系统，使用k8s可以进行容器化应用部署，它有利于应用扩展，k8s目标实施让部署容器化应用更加简洁和高效k
jakiechaipush·2023-09-01 18:39

跟着源码学IM(十一)：一套基于Netty的分布式高可用IM详细设计与实现(有源码)

引言本文将要分享的是如何从零实现一套基于Netty框架的分布式高可用IM系统，它将支持长连接网关管理、单聊、群聊、聊天记录查询、离线消息存储、消息推送、心跳、分布式唯一ID、红包、消息同步等功能，并且还支持集群部署
·2023-09-01 16:44

大数据学习06-Spark分布式集群部署

Spark完全分布式部署前期准备，每台服务器都需要配置安装Scala下载Scala安装包配置环境变量安装spark解压配置环境修改配置前期准备，每台服务器都需要配置配置好IPvim/etc/sysconfig/network-scripts/ifcfg-ens33TYPE="Ethernet"PROXY_METHOD="none"BROWSER_ONLY="no"BOOTPROTO="static
小火柴012·2023-09-01 06:22

数据平台选型

MongoDB：NoSQL，采用结构型数据存储，建议集群部署，更多的考虑到集
瓜皮肖·2023-08-31 11:38

大数据实战项目（2）-数据采集、处理、分发流程所涉及到的框架及配置

对该实战项目的介绍及所使用的各种工具等可以查看这篇博客：大数据实战项目（1）-项目简介、开发技术、工具、架构等文章目录Linux环境准备常规设置项目配置ZooKeeper分布式集群部署HadoopHA架构与部署
xl132598798·2023-08-31 08:38

1-07、Spring Cloud Alibaba 熔断(Sentinel)

为了保证其高可用，单个服务通常会集群部署。由于网络原因或者自身的原因，服务并不能保证100%可用，如果单个服务出现问题，调用这个服务就会出现线程阻塞，此时若有大量的请求涌入，Servlet容器的线程资
直冲车·2023-08-31 04:32

第四章 Kubernetes入门及集群搭建

学习目标：了解Kubernetes的起源和发展掌握如何使用kubeadm搭建Kubernetes集群查看Kubernetes集群部署状态4-1Kubernetes的起源和发展Kubernetes的起源Kubernetes
InsaneLoafer·2023-08-31 02:32

基于Docker的Elasticsearch集群部署

本文是基于ES5.6.3和Docker的集群部署、配置说明，如有错误或更好的建议请指正节点类型Master节点（主节点）node.master:truenode.data:false这样配置的节点为master
epicGeek·2023-08-30 23:36

elasticsearch之十集群部署及分布式内部机制

个人专题目录1.es内部机制1.1es分布式基础es对复杂分布式机制的透明隐藏特性分布式机制：分布式数据存储及共享。分片机制：数据存储到哪个分片，副本数据写入。集群发现机制：clusterdiscovery。新启动es实例，自动加入集群。shard负载均衡：大量数据写入及查询，es会将数据平均分配。shard副本：新增副本数，分片重分配。Elasticsearch的垂直扩容与水平扩容垂直扩容：使用
Java及SpringBoot·2023-08-30 19:28

七、Kafka-Kraft 模式

目录7.1Kafka-Kraft架构7.2Kafka-Kraft集群部署7.1Kafka-Kraft架构左图为Kafka现有架构，元数据在zookeeper中，运行时动态选举controller，由controller
小晨想好好学习·2023-08-30 07:08

分部署存储Ceph

文章目录Ceph一.deploy-ceph部署1.系统环境初始化1.1修改主机名，DNS解析1.2时间同步1.3配置apt基础源与ceph源1.4关闭selinux与防火墙1.5创建ceph集群部署用户
张现伟的成长之路·2023-08-30 06:46

Flink on yarn 不废话集群部署

文章目录Flinkonyarn集群部署前言先安装好yarn集群，在我们这个环境中使用的是CDH6.3，也就是基于hadoop3.0的大数据生态环境flink部署1.包下载2.将所下载的包放置/opt/flink
病妖·2023-08-30 00:42

Flink on yarn 集群部署

Flink要求它使用的Hadoop集群必须是要添加Kerberos和SASL认证的。环境准备Hadoop集群的机器有三台，选择其中一台作为Master主机名IP角色master192.168.0.121主集群slave1192.168.0.111从集群slave2192.168.0.222从集群确保每台主机的DNS解析正确，主机之间可以ping通,主机之间可以免密ssh，hosts配置192.16
YoungJacker·2023-08-30 00:40

使用 Perl 来开发 Nginx 的模块

Perl来开发Nginx的模块.比如可以做一些个性的设置,防盗链,SSI,Header替换之类一些特别的作用.另外,我们还可以使用Nginx加Perl来做一些动态的程序的处理.我近来就想使用这个来开发Mogilefs
JophyYao·2023-08-29 23:02

Swarm集群搭建( docker安装、docker-compose安装、portainer可视化安装、基本使用命令总结、项目集群部署案例)

docker安装、docker-compose安装、Swarm集群搭建、portainer可视化安装、和项目部署案例四台服务器，我这里选用四台虚拟机1核2G，系统centos7，ip：192.168.10.104、192.168.10.105、192.168.10.106、192.168.10.107一、环境准备三台服务器都执行以下命令1、关闭防火墙或者开放相应端口#关闭防火墙systemctls
李潘杜若·2023-08-29 11:28

Anolis 8.6 下 Redis 7.2.0 集群搭建和配置

搭建和集群配置一.Redis下载与单机部署1.Redis下载2.虚拟机配置3.Redis单机源码安装和测试4.Java单机连接测试1.Pom依赖2.配置文件3.启动类4.配置类5.单元测试6.测试结果二.Redis集群部署
猪悟道·2023-08-29 09:38

【SpringCloudAlibaba】Nacos服务注册和配置中心配合nginx负载

文章目录概述注册中心POMYML启动类CAP配置中心POMYML启动类ConfigClientControllerNacos中的匹配规则三种方案加载配置示例集群部署概述部署模式修改derby为mysql
Lucky_Turtle·2023-08-28 16:52

mysql集群部署

mysql集群部署一、软件准备MySQL版本采用5.6.35，通过Oracle官方网站下载也可以直接从HTTP文件服务器上获取：生产环境：wgethttp://download.cloud.pub/mysql
wangol·2023-08-28 16:30

K8S最新版本集群部署(v1.28) + 容器引擎Docker部署（上）

kubectl确认系统架构关闭防火墙、swap、selinux通过curl下载kubectl上一集：win11+vmware17+centos7.9环境搭建*️⃣主目录：温故知新专栏下一集：K8S最新版本集群部署
韧小钊·2023-08-28 10:46

java版商城之直播带货 直播订单 Spring Cloud+SpringBoot+mybatis+uniapp b2b2c o2o 多商家入驻商城 直播带货商城 电子商务商城免费搭建 bbc

SpringBoot、Mybatis、Redis3.前端框架VUE、Uniapp、Bootstrap/H5/CSS3、IOS、Android、小程序4.核心思想分布式、微服务、云架构、模块化、原子化、持续集成、集群部署
m0_72864708·2023-08-28 09:41

mongodb 分片集群部署

文章目录mongodb分片部署二进制安装三台config配置shard分片安装shard1安装shard2安装shard3安装mongos安装数据库、集合启用分片创建集群认证文件创建集群用户部署常见问题mongodb分片部署二进制安装mkdir-p/data/mongodbtarxvfmongodb-linux-x86_64-rhel70-3.6.17.tgzmvmongodb-linux-x86
好名字都被别人用了·2023-08-28 09:58

微服务系统面经之二: 以秒杀系统为例

16微服务与集群部署16.1一个微服务一般会采用集群部署吗？对于一个微服务是否采用集群部署，这完全取决于具体的业务需求和系统规模。
xxx_520s·2023-08-28 07:33

0201hdfs集群部署-hadoop-大数据学习

文章目录1前言2集群规划3hadoop安装包上传与安装3.1上传解压4hadoop配置5从节点同步和环境变量配置6创建用户7集群启动8问题集8.1InvalidURIforNameNodeaddress(checkfs.defaultFS):file:///hasnoauthority.结语1前言下面我们配置下单namenode节点hadoop集群，使用vmware虚拟机环境搭建。vmware虚拟
gaog2zh·2023-08-28 06:31

Redis——集群部署实战

前言在当今，大多数后端开发项目中，Redis的重要性可能比关系型数据库还要重要！主要体现在以下几个方面：性能：redis的底层实现逻辑让其天生支持高并发，因此可以很好地利用redis进行性能优化（比如首页加载、热点数据加载等）；高可用：redis支持多机数据库协同工作（主从、哨兵、集群），让其具备高可用特性；功能丰富：如果对于redis的实现设计稍有研究就会发现，其特有的数据结构+算法让其能支持丰
兵临奇点·2023-08-27 12:43

单机(win10)使用Docker搭建Redis集群（Redis Sentinel 集群部署）

搭建过程参考：使用Docker搭建Redis集群（RedisSentinel集群部署）概述Redis集群可以在一组redis节点之间实现高可用性和sharding。
泠泠儿·2023-08-27 03:51

达梦数据库DEM搭建及使用（使用DEM搭建达梦数据守护集群）

DEM不仅包含了传统桌面工具、管理工具Manager和数据迁移工具DTS等的功能，还提供了集群部署、监控和告警的功能。DEM以Web应用的方式提供数据库管理、监控
保定公民·2023-08-26 13:11

DM8主备集群部署

目录前言一、虚拟机设置1.环境规划1.1网卡规划二、操作系统版本安装1.准备工作1.1配置yum源1.4挂载磁盘1.5用户资源限制1.6设置环境变量2.安装数据库软件3.使用dminit工具初始化实例4.主库脱机备份4.1遇到问题4.2备份成功5.备库还原6.配置实例的配置文件dm.ini7.配置MAL系统配置文件dmmal.ini8.配置守护进程配置文件dmwatcher.ini9.以Mount
DM_lh·2023-08-26 13:40

达梦8数据库dm8集群部署之DW集群Linux(主备自切)

安装前准备集群规划A机器B机器业务IP10.16.216.80(217没有配置暂时使用216网段)10.16.216.81心跳IP10.16.217.1010.16.217.11实例名NBSJ_01NBSJ_02实例端口52365236MAL端口6114161142MAL守护进程端口5214152142守护进程端口3314133142OGUID453331守护组GRP1安装目录/dmsoft/dm
EndNiI·2023-08-26 13:10

FastDFS

Tracker、Storage都可以实现集群部署，Tracker的每个节点地位平等，而Storage可以分为多个组，每个组之间保存的文件是不同的，组内部分为多个成员，每个成员保存的内容是一样，组成员地位
LetKing·2023-08-26 06:16

干货！带你了解为什么那么多开源项目都是用Redis!

它支持多种集群部署，辅助项目达到更高的性能。二、Redis的结构Redis数据类型分
编程侠Java·2023-08-26 04:12

源码详解分布式锁redisson实现原理

文章目录一、简介二、工程引入配置三、加锁操作四、原理分析五、方案优缺点一、简介现在项目一般都是使用分布式集群部署，对后台业务数据的某些操作需要考虑加锁的问题，而jdk的synchronize加锁机制已经不适合做集群部署的操作
清云青云·2023-08-26 02:50

基于k8s+prometheus实现双vip可监控Web高可用集群

规划整个项目的拓扑结构和项目的思维导图二、修改好各个主机的主机名，并配置好每台机器的ip地址、网关和dns等2.1修改每个主机的ip地址和主机名2.2关闭firewalld和selinux三、使用k8s实现Web集群部署
宛如清风03·2023-08-25 20:12

java版商城之直播带货 直播订单 Spring Cloud+SpringBoot+mybatis+uniapp b2b2c o2o 多商家入驻商城 直播带货商城 电子商务商城免费搭建 bbc

SpringBoot、Mybatis、Redis3.前端框架VUE、Uniapp、Bootstrap/H5/CSS3、IOS、Android、小程序4.核心思想分布式、微服务、云架构、模块化、原子化、持续集成、集群部署
微服务技术分享·2023-08-25 17:27

fastdfs集群部署

环境介绍：此次搭建使用两台服务器搭建，将TrackerServer和StorageServer各部署在一台集群上，10.35.32.81fastdfs10.35.32.82fastdfs1，下载相关程序包https://github.com/happyfish100/下载fastdfslibfastcommonfastdfs-nginx-module5.11fastdfs-nginx-module
雨煮夕阳·2023-08-25 12:29
上一页 19 20 21 22 23 24 25 26 下一页
按字母分类： ABCDEFGHIJKLMNOPQRSTUVWXYZ其他