大数据生态圈集群搭建

Flink集群搭建

1安装包下载根据自己的环境下载相应的flink安装包：https://flink.apache.org/downloads.html下载的版本要与自己的scala版本一致，我安装的scala版本为2.11，所以要下载对应scala2.11版本的flink我使用的环境linux-CentOS7.9、Scala-2.11.6、jdk-1.8、flink-1.7.2-bin-hadoop27-scala
NemoonFish·2023-12-15 12:20

【深入剖析K8s】第四章 K8S集群搭建与配置

使用kubeadm工具来部署K8SK8S部署利器:kubeadm2017年一个独立的部署工具才终于诞生名叫kubeadm。这个项目的目标就是要让用户能够通过如下两条指令部署—个Kubernetes集群:#创建一个Master节点kubeadminit#将一个Node节点加入当前集群Kubeadmjoinkubeadm的工作原理直接在宿主机上运行kubelet,然后使用容器部署其他Kubemetes
偶入编程深似海·2023-12-15 08:20

Hadoop集群搭建

https://www.zybuluo.com/DFFuture/note/6268991.查看hostname修改主机名sudogedit/etc/hostname重启reboot2.编辑hostsudogedit/etc/hosts删除127.0.1.1那一行，并添加：192.168.86.140ubuntu1192.168.86.143ubuntu2192.168.86.144ubuntu3
摩V羯座·2023-12-15 06:50

基于Kubernetes Jenkins CICD（项目实战）

基于KubernetesJenkinsCICD一、在Kubernetes安装Jenkins优点目前很多公司采用Jenkins集群搭建复合需求的CI/CD流程，但是会存在一些问题主Master发生单点故障时
正在输入中…………·2023-12-15 05:25

kubeadm搭建单master多node的k8s集群--小白文，图文教程

参考文献K8S基础知识与集群搭建kubeadm搭建单master多node的k8s集群—主要参考这个博客，但是有坑，故贴出我自己的过程，坑会少很多注意：集群配置是：一台master：zabbixagent-k8smaster
喔就是哦噢喔·2023-12-15 04:16

RabbitMQ搭建集群环境、配置镜像集群、负载均衡

RabbitMQ集群搭建Linux安装RabbitMQ下载安装基本操作命令开启管理界面及配置RabbitMQ集群搭建确定rabbitmq安装目录启动第一个节点启动第二个节点停止命令创建集群查看集群集群管理
CodeDevMaster·2023-12-15 02:30

代码操作redis集群报错：(error) MOVED 解决方法

记录一下今天搭建完本地redis集群以后，使用C++代码测试redis集群搭建是否成功。
美丽的欣情·2023-12-14 23:22

kafka入门：简介、使用场景、设计原理、主要配置及集群搭建（转）

李克华云计算高级群:292870151195907286交流：Hadoop、NoSQL、分布式、lucene、solr、nutchkafka入门：简介、使用场景、设计原理、主要配置及集群搭建（转）问题导读
weixin_34185320·2023-12-14 22:18

ELK（五）—集群搭建

写目录ip规划ElasticSearch集群集群节点搭建集群es切片和副本切片（Shard）：副本（Replica）：故障转移postman创建索引的情况直接在面板中创建索引总结ip规划ip名称服务192.168.150.190elk_masterelasticsearch192.168.150.189elk_node1192.168.150.188elk_node2ElasticSearch集群
哈密猿·2023-12-14 16:35

【运维】Kafka高可用： KRaft（不依赖zookeeper）集群搭建

文章目录一.kafkakraft集群介绍1.KRaft架构2.Controller服务器3.ProcessRoles4.QuorumVoters5.kraft的工作原理ing二.集群安装1.安装1.1.配置1.2.格式化2.启动测试2.1.启功节点服务2.2.测试本文主要介绍了kafkaraft集群架构：与旧架构的不同点，有哪些优势，哪些问题架构成员有哪些，怎么规划。三节点集群安装、启动与测试一.
roman_日积跬步-终至千里·2023-12-14 13:33

docker集群的详解以及超详细搭建

1.多容器位于同一主机2.多容器位于不同主机二、介绍三、特性四、概念1.节点nodes2.服务(service)和任务(task)3.负载均衡五、docker网络1.overlay网络六、docker集群搭建
理想万岁万万岁·2023-12-07 01:01

kafka集群搭建

https://blog.csdn.net/weixin_50642075/article/details/109613621?spm=1001.2101.3001.6650.1&utm_medium=distribute.pc_relevant.none-task-blog-2%7Edefault%7ECTRLIST%7Edefault-1-109613621-blog-124907414.pc
c_gentle·2023-12-06 20:37

【redis缓存高可用集群】

文章目录Redis集群方案比较Redis高可用集群搭建Redis集群原理分析Redis集群节点间的通信机制哨兵leader选举流程Redis集群方案比较在redis3.0以前的版本要实现集群一般是借助哨兵
向前再向前·2023-12-06 09:32

【完整记录】使用kubeadm部署kubernetes集群踩坑记录及解决方案

文章目录搭建集群过程中遇到的问题及解决方案1.现有网上的kubernetes集群搭建教程中的kubeadm配置文件版本过老导致出现以下报错：2.kubeadminit过程中pull镜像超时3.kubeadminit
wangs_·2023-12-05 19:56

Centos7+Redis6.0.5集群搭建（哨兵）

Centos7+Redis6.0.5集群搭建（哨兵）我们已经介绍了Redis的主从复制，想必大家对redis已经有一个概念了，那么问题来了，如果redis主从复制的master服务器挂掉了，那么整体redis
石头-豆豆·2023-12-05 14:41

Linux Redis集群搭建和设置Redis集群密码

服务器列表：192.168.1.13192.168.1.14192.168.1.15192.168.1.16192.168.1.17192.168.1.18开放Redis6379端口和总线端口16379firewall-cmd--zone=public--add-port=6379/tcp--permanentfirewall-cmd--zone=public--add-port=16379/tc
Meta39·2023-12-05 14:10

Redis 集群搭建 哨兵模式搭建

文章目录Redisversion6.0.5集群搭建下载文件环境安装解压编译配置文件启动关闭密码设置Redisversion6.0.5集群搭建下载文件下载命令url可找官网复制wgethttp://download.redis.io
一码归一码@·2023-12-05 14:40

Hadoop大数据集群搭建（超详细）

使用了几个学期的实验手册，应该没有啥大问题了，现在分享给大家，希望对你学习hadoop有用实验环境：Vmwareworkstation+CentOS7+Hadoop3.1.3目录第一步：安装虚拟机第二步：虚拟机克隆第三步：网络配置第四步：ssh服务配置第五步：安装JDK第六步：安装Hadoop第七步：Hadoop集群配置第八步：格式化文件系统第九步：启动和关闭hadoop集群第十步：通过UI界面查
小飞飞V5·2023-12-05 08:49

clickhouse + chproxy 集群搭建

《clickhouse+chproxy集群搭建》----集群规划集群架构其中Distribute是指创建分布式表的机器，在此文章中是将Distrihttps://www.jianshu.com/p/9498fedcfee7
架构师联盟·2023-12-04 18:55

分布式集群架构方案

保护知识产权，本文参考了如下博客文章pxc集群搭建https://www.jianshu.com/p/eae6b12c1cd5haproxy负载均衡https://blog.csdn.net/qq_2110831
樵夫有桥·2023-12-04 16:33

大数据生态圈及分布式文件系统HDFS实践-part1

Hadoop入门第一章大数据概述1.1大数据概念“人类正在从IT时代走向DT时代”。大数据（BigData）：指的是传统数据处理应用软件不足以处理（存储和计算）它们的大而复杂的数据集。主要解决，海量数据的存储和海量数据的运算问题。1.2大数据特征容量大，种类多，速度快，价值高1、容量（Volume）：数据的大小决定所考虑的数据的价值和潜在的信息微博，5亿用户，每天上亿条微博朋友圈，10亿用户，每天
落叶飘雪2014·2023-12-04 15:40

redis集群玩法全过程笔记（redis7+版本）

集群之分片redis集群之哈希取余分区算法redis集群之一致性哈希算法redis集群之哈希槽分区算法redis集群之为什么哈希槽数是16384redis集群之分片不保证一致性redis集群之三主三从集群搭建
肥学·2023-12-04 09:00

深入理解 Kafka 集群搭建与管理

ApacheKafka作为分布式流处理平台的核心，其集群搭建与管理是确保高可用性和高性能的关键。
晓之以理的喵~~·2023-12-04 07:42

docker配置redis主从、哨兵集群

docker配置redis主从、哨兵集群搭建redis主从准备工作在/usr/local/software/redis/文件夹下建立如下的文件夹、文件root@localhostredis]#mkdir-p6379
DecemberZero2·2023-12-04 05:23

二、ZooKeeper集群搭建

解压2.3第三步：修改配置文件2.4第四步：添加myid配置2.5第五步：安装包分发并修改myid的值2.6第六步：三台机器启动zookeeper服务2.7配置Path环境变量1、概述Zookeeper集群搭建指的是
geek@z·2023-12-03 09:52

Zabbix HA高可用集群搭建

ZabbixHA高可用集群搭建ZabbixHA高可用集群搭建一、Zabbix高可用集群（ZabbixHA）二、部署Zabbix高可用集群1、两个服务端配置1.1主节点ZabbixServer配置1.2备节点
KK小草莓·2023-12-03 06:38

ZooKeeper集群搭建

一.zookeeper官网http://zookeeper.apache.org/releases.html下载稳定版本v3.6.3：https://www.apache.org/dyn/closer.lua/zookeeper/zookeeper-3.6.3/apache-zookeeper-3.6.3-bin.tar.gz介绍：ZooKeeper集群中的所有机器通过一个Leader选举过程来选
时光故事·2023-12-03 05:54

zookeeper实操课程Acl 访问权限控制，命令行测试

阅读本文之前，请先阅读----zookeeper单机伪集群搭建简单记录（实操课程系列）。
香至-人生万事须自为，跬步江山即寥廓。·2023-12-03 00:02

ZooKeeper的分布式锁---客户端命令行测试（实操课程）

阅读本文之前，请先阅读----zookeeper单机伪集群搭建简单记录（实操课程系列）。
香至-人生万事须自为，跬步江山即寥廓。·2023-12-03 00:00

hadoop学习笔记——NO.4_HADOOP集群搭建与使用初步

HADOOP集群搭建与使用初步HADOOP集群搭建集群简介HADOOP集群具体来说包含两个集群：HDFS集群和YARN集群，两者逻辑上分离，但物理上常在一起HDFS集群：负责海量数据的存储，集群中的角色主要有
蔡茂昌·2023-12-02 19:20

RocketMQ集群搭建

目标：熟悉RocketMQ的各模块搭建流程，部署一个测试集群。1个nameserver，两个master。环境：两台虚拟机，java环境，mvn虚拟机1启动一个nameserver+1个broker。虚拟机2启动一个broker。主要参考：https://rocketmq.apache.org/docs/quick-start/主要操作命令上面文档中都有虚拟机1启动broker命令：nohupsh
运动书生·2023-12-02 13:34

K8S集群搭建redis集群的步骤

在Kubernetes（K8s）集群上搭建Redis集群涉及多个步骤，包括创建配置文件、部署StatefulSets和设置网络。以下是一个基本指南：1.准备Redis配置文件首先，创建一个Redis配置文件（redis.conf），这将被用作ConfigMap来配置Redis实例。例如，你可以开始于一个简单的配置，并根据需要进行调整。port6379cluster-enabledyescluste
MonkeyKing_sunyuhua·2023-12-02 10:52

Redis高可用集群架构

高可用集群搭建redis集群需要至少三个mas
kk_0910·2023-12-02 06:27

zookeeper分布式先进先出队列 （实操课程）

阅读本文之前，请先阅读----zookeeper单机伪集群搭建简单记录（实操课程系列）zookeeper客户端常用命令简单记录（实操课程系列--watcher功能测试）（发布订阅功能测试）。
香至-人生万事须自为，跬步江山即寥廓。·2023-12-02 05:17

zookeeper心跳检测 （实操课程）

阅读本文之前，请先阅读----zookeeper单机伪集群搭建简单记录（实操课程系列）zookeeper客户端常用命令简单记录（实操课程系列--watcher功能测试）（发布订阅功能测试）。
香至-人生万事须自为，跬步江山即寥廓。·2023-12-02 05:37

Rocket-集群搭建

搭建RocketMQ可视化管理服务RocketMQ的社区就提供了一个图形化的管理控制台Dashboard，可以用可视化的方式直接观测并管理RocketMQ的运行过程。Dashboard服务并不在RocketMQ的运行包中，需要到RocketMQ的官网下载页面单独下载。这里只提供了源码，并没有提供直接运行的jar包。将源码下载下来后，需要解压并进入对应的目录，使用maven进行编译。mvnclean
有梦想的年轻人6174·2023-12-01 19:54

redis(七) - redis 集群搭建

一、创建配置文件1、创建一个myredis文件夹：mkdir/myredis2、复制一个原生的redis.conf配置文件到myredis文件夹cp/etc/redis.conf/myredis/redis.conf3、在myredis文件夹中创建9个redis配置文件：由redis+port.conf表示不同port的配置文件redis6379.confredis6380.confredis63
热爱码字·2023-12-01 18:50

高可用elasticsearch集群搭建

目录一、环境准备二、机器配置2.1创建用户2.2修改用户权限2.3解析主机名2.4优化最大文件数2.5优化最大进程数2.6优化虚拟内存2.7重载配置三、部署3.1创建文件夹并赋予权限3.2解压安装包并赋予权限3.3配置环境变量3.4创建数据、证书存放目录并赋予权限3.5签发证书3.6设置集群多节点HTTP证书3.7解压证书并分发给其他节点3.8配置文件修改配置3.9配置文件下发给其他节点并修改3.
季风泯灭的季节·2023-12-01 16:21

hadoop完全分布式搭建

文章目录集群部署规划服务器准备Mobaxterm远程登录实验前准备安装软件工具关闭防火墙安装JDK和Hadoop创建软件包目录解压软件包配置环境变量集群搭建先创建HDFS工作目录和LOG目录配置集群配置环境配置
撕得失败的标签·2023-12-01 12:24

zookeeper 客户端常用命令简单记录（实操课程系列--watcher功能测试）（发布订阅功能测试）

阅读本文之前，请先阅读----zookeeper单机伪集群搭建简单记录（实操课程系列）1、命令行工具切换到zookeeper的bin目录下面，执行命令zkCli.cmd-server127.0.0.1:
香至-人生万事须自为，跬步江山即寥廓。·2023-12-01 11:49

CentOS7搭建Kafka集群

目录一、Kafka单机【依赖单机的单节点Zookeeper】二、KafKa集群搭建三、KafkaManager（web页面管理）的搭建四、使用本地客户端测试MQ基本操作首先kafka的配置信息等信息依赖
it_lihongmin·2023-12-01 08:08

HDFS详解

HDFS架构剖析HDFS，HadoopDistributeFileSystem（Hadoop分布式文件系统）的简称，它是Hadoop核心组件之一，是大数据生态圈最底层的分布式存储服务。
liuhanyuu·2023-11-30 20:09

基于Docker搭建RabbitMQ集群(多台服务器)

前言:本文章这次主要是基于docker在多台服务器下搭建的普通集群环境,镜像集群以及集群搭建后通过nginx负载和keepalived实现HA会另出一篇文章进行详细介绍。
Bejpse·2023-11-30 17:48

Hyper-v虚拟机Hadoop集群搭建

大数据Hadoop简介Hadoop是一个由Apache基金会所开发的分布式系统基础架构。Hadoop实现了一个分布式文件系统（HadoopDistributedFileSystem），简称HDFS。(海量数据存储)HDFS为海量的数据提供了存储，而MapReduce**分布式计算**则为海量的数据提供了计算总结：用Java开发HDFS–解决大数据存储问题MapReduce–解决大数据计算问题HDF
真.电脑人·2023-11-30 16:16

【SpringCloud Alibaba系列】一文全面解析Zookeeper安装、常用命令、JavaAPI操作、Watch事件监听、分布式锁、集群搭建、核心理论

文章目录Zookeeper一、简介二、应用场景三、设计目标四、数据模型五、单机安装六、命令操作1.服务端常用命令2.客户端常用命令3.创建临时顺序结点七、JavaAPI操作1.Curator介绍2.建立连接3.添加结点4.查询结点5.设置结点6.删除结点7.Watch事件监听（1）NodeCache（2）PathChildrenCache（3）TreeCache8.分布式锁（1）概念（2）Zook
蓝染-惣右介·2023-11-30 15:36

电商平台数据仓库搭建02-Hadoop集群搭建

1，项目说明本项目来源于github电商平台数据仓库搭建。项目为个人学习记录，项目代码及文件可访问电商平台数据仓库搭建获得。2，项目准备虚拟机准备虚拟机开发工具为VMware15。本次项目我自己使用的CentOS版本为CentOS7。虚拟机需要配置3台，分别为Hadoop102，Hadoop103，Hadoop104。配置ssh、jdk1.vm-tools，并创建新用户hadoop并配置root权
王小磊~·2023-11-30 13:04

Apache Airflow (十四) ：Airflow分布式集群搭建及测试

博主个人B栈地址：豹哥教你大数据的个人空间-豹哥教你大数据个人主页-哔哩哔哩视频目录1.节点规划2.airflow集群搭建步骤3.初始化Airflow4.创建管理员用户信息5.配置SchedulerHA6
IT贫道·2023-11-30 11:01

Hadoop-HDFS详解与HA，完全分布式集群搭建(细到令人发指的教程)

前言本篇篇幅较长，有许多集群搭建干货，和枯燥乏味但是面试可能问到的理论知识。思来想去不知道怎样才能鼓励自己加油学习，想想要面对的生活还是假吧意思打开学习视频吧。
毫无感情的dj·2023-11-30 10:06

[Docker]十二.Docker consul集群搭建、微服务部署,Consul集群+Swarm集群部署微服务实战

一.Dockerconsul集群搭建Consul是Go语言写的开源的服务发现软件，Consul具有服务发现、健康检查、服务治理、微服务熔断处理等功能,在微服务中讲过如何搭建consul集群，接下来看看在
zhoupenghui168·2023-11-30 07:12

Spark集群安装（On Yarn）

说明：基于已经搭建完成的Hadoop集群，关于Hadoop集群搭建，可参考：https://blog.csdn.net/weixin_37901366/article/details/13017066一
maplea2012·2023-11-30 03:55
上一页 4 5 6 7 8 9 10 11 下一页
按字母分类： ABCDEFGHIJKLMNOPQRSTUVWXYZ其他