bigdata集群搭建

zookeeper使用场景、集群搭建、选举原理

简介：ApacheZooKeeper是一项致力于开发和维护开源服务器的工作，它能够实现高度可靠的分布式协调。ZooKeeper是一个集中的服务，用于维护配置信息、命名（服务注册和发现）、提供分布式同步以及提供组服务。应用场景概述：提供了文件系统（存储信息）和通知机制（watch）命名服务naming(注册中心)常见的就是一些分布式服务框架（如RPC、RMI）中的服务地址列表，通过使用命名服务，客户
...狂风...·2023-11-24 14:02

Nacos+Docker+Mysql快速集群搭建

目录说明安装docker创建mysql数据库拉取docker镜像nacos一些说明点创建docker容器访问集群结束语说明简单记录一下三台云ECS快速docker方式创建nacos集群。Nacos版本2.0.2，里面的一些注意点一并记录三台ECS，充当三个节点主机内网IP说明172.20.167.254node1172.20.168.0node2172.20.167.255node3安装docke
小时候的阳光·2023-11-24 13:05

Redis笔记进阶篇：万字长文-整理Redis，各种知识点，建议收藏

五、Redis的事务六、Redis的监控七、Redis的配置文件八、Redis的持久化8.1、fork()系统调用8.2、RDB8.3、AOF8.4、RDB和AOF的选择九、发布订阅十、主从复制十一、集群搭建及小实验
马小屑·2023-11-24 13:31

【大数据】Docker部署HMS(Hive Metastore Service)并使用Trino访问Minio

本文参考链接置顶：Presto使用Docker独立运行HiveStandaloneMetastore管理MinIO（S3）_hiveminio_BigDataToAI的博客-CSDN博客一.背景团队要升级大数据架构
秦拿希·2023-11-24 11:35

kubernetes基础介绍及静态pod模式集群搭建

kubernetes基础介绍容器运行的根本：文件系统是静态的，容器运行真正靠的是文件系统树映射之下的我们所要启动的进程树为根本骨架进行运行的。系统向PID发送终止信，PID号为1的进程结束，容器退出运行转为停滞状态。namespace名称空间隔离系统：mount,pid,network,uts,user,ipc,controlgroup(cgp),time容器通信：bridge:桥接口，二层虚拟网
清楸·2023-11-24 09:28

minio单机、集群搭建、Spring Boot集成，详细步骤

一、单机minio搭建1.下载rpm包下载地址：https://dl.min.io/server/minio/release/linux-amd64/2.安装rpm-ivhminio-20220504074527.0.0.x86_64.rpm修改/etc/systemd/system/minio.service文件#启动的用户和用户组User=rootGroup=root#配置文件地址Enviro
一个人也很酷·2023-11-24 05:21

1.19-1.20写作课词汇

proportion=percentage比例consumption消耗量burglary入室行窃data数据bigdata大数据calls通话量linegraph折线图table表格piechart饼状图
skadoosh945·2023-11-24 05:05

nacos集群搭建

Nacos集群搭建1.集群结构图官方给出的Nacos集群图：其中包含3个nacos节点，然后一个负载均衡器代理3个Nacos。这里负载均衡器可以使用nginx。
(￣(工)￣)霸天下·2023-11-23 22:03

k8s安装loadbalancer

目录前言准备安装metallb访问测试前言k8s集群搭建参考：https://blog.csdn.net/centrl/article/details/134291473准备查看kube-proxy的strictARP
墨家先生·2023-11-23 21:25

k8s部署harbor

目录前言安装验证安装配置containerd（所有服务器）unbuntu22.04添加CA证书（所有服务器）测试前言k8s集群搭建参考：https://blog.csdn.net/centrl/article
墨家先生·2023-11-23 21:25

k8s整合helm3

目录前言前期准备安装功能测试前言k8s集群搭建参考：https://blog.csdn.net/centrl/article/details/134291473前期准备和k8s版本对应关系：https:
墨家先生·2023-11-23 21:54

k8s安装nfs

目录前言集群架构kmaster安装nfs服务kworker安装nfs-commonk8s安装nfs客户端配置程序功能验证验证配置前言k8s集群搭建参考：https://blog.csdn.net/centrl
墨家先生·2023-11-23 21:54

k8s安装jenkins

目录前言安装前言k8s集群搭建参考：https://blog.csdn.net/centrl/article/details/134291473整合helm参考：https://blog.csdn.net
墨家先生·2023-11-23 21:50

Spring Cloud学习（十一）【深入Elasticsearch 分布式搜索引擎03】

RestAPI实现聚合自动补全拼音分词器自定义分词器自动补全查询completionsuggester查询RestAPI实现自动补全数据同步数据同步思路分析实现elasticsearch与数据库数据同步集群搭建
sweetheart7-7·2023-11-23 16:44

伪分布式系列 - 第三篇 - spark-2.4.3环境搭建on hadoop3.2.0

已经搭建好,下面我们将进行sparkonyarn搭建下载并配置scala,我们选择scala-2.12.8/这个版本即可,下载解压scala即可配置环境#scalaexportSCALA_HOME=/opt/bigdata
rolin-刘瑞·2023-11-23 15:22

Spark---集群搭建

Standalone集群搭建与SparkonYarn配置1、StandaloneStandalone集群是Spark自带的资源调度框架，支持分布式搭建，这里建议搭建Standalone节点数为3台，1台
30岁老阿姨·2023-11-23 11:24

【超详细】手把手教你搭建MongoDB集群搭建

fileMongoDB集群搭建MongoDB集群简介mongodb集群搭建的方式有三种：主从备份（Master-Slave）模式，或者叫主从复制模式。
博学谷狂野架构师·2023-11-23 06:51

MQ集群搭建

以下所有的服务器地址为当前所使用的服务器IP地址。以下所有的路径需要改为当前所安装的路径。1.环境准备两台linux服务器（CentOS7）openJDK1.8maven非必须ssh工具finalshell部署结构如下：2.搭建步骤2.1首先两台服务器都需要下载rocketMq。包为rocketmq-all-4.6.1-bin-release.zip，下载好后使用unzip命令进行解压，并重命名为
困困困困困困小凯·2023-11-23 04:51

六、Big Data Tools安装

1、安装在Jetbrains的任意一款产品中，均可安装BigDataTools这个插件。
弦之森·2023-11-22 22:11

Hbase2.1 集群搭建

>Hbase在大数据的体系中扮演着DB角色，不得不说是重要的一员，在上一篇，大猪已经给大家演示了[Hadoop3.2集群搭建](https://www.jianshu.com/p/3182aaff918d
kikiki5·2023-11-22 18:30

GZ033 大数据应用开发赛题第10套

2023年全国职业院校技能大赛赛题第10套赛项名称：大数据应用开发英文名称：BigDataApplicationDevelopment赛项组别：高等职业教育组赛项编号：GZ033背景描述工业互联网是工业全要素
嘿哈小将·2023-11-22 16:47

GZ033 大数据应用开发赛题第09套

2023年全国职业院校技能大赛赛题第09套赛项名称：大数据应用开发英文名称：BigDataApplicationDevelopment赛项组别：高等职业教育组赛项编号：GZ033背景描述工业互联网是工业全要素
嘿哈小将·2023-11-22 16:11

大数据全系技术知识概览

大数据（bigdata），指无法在一定时间范围内用常规软件工具进行捕捉、管理和处理的数据集合，是需要新处理模式才能具有更强的决策力、洞察发现力和流程优化能力的海量、高增长率和多样化的信息资产。
金罗老师·2023-11-22 10:25

大数据全系技术概览

大数据（bigdata），指无法在一定时间范围内用常规软件工具进行捕捉、管理和处理的数据集合，是需要新处理模式才能具有更强的决策力、洞察发现力和流程优化能力的海量、高增长率和多样化的信息资产。
金罗老师·2023-11-22 10:24

zk集群+Kafka集群搭建,开启kafka-manager控制台

去官网下载zk和kafkahttps://zookeeper.apache.org/releases.html#downloadhttp://kafka.apache.org/downloads三体服务器,每台服务器设置ip别名分别为kafka1,kafka2,kafka31.先安装zookeeper集群下载完成后解压到/opt/目录下进入conf目录下cpzoo_sample.cfgzoo.cf
Source_·2023-11-22 10:33

MySQL高可用性：主从复制、读写分离与集群搭建

本文将深入探讨MySQL的主从复制、读写分离以及集群搭建，为实现高可用性提供详细指南。1.主从复制（Master-SlaveReplication）1.1什么是主从复制？
二狗plus·2023-11-22 09:22

clickhouse部署

目录前置要求注意事项单机搭建1创建目录2启动docker镜像服务3使用client连接clickhouse服务4查询clickhouse状态集群搭建1添加配置文件配置文件目录结构conf目录下文件文件内容
佳捷·2023-11-22 06:52

Apache Airflow (十三) ：Airflow分布式集群搭建及使用-原因及

博主个人B栈地址：豹哥教你大数据的个人空间-豹哥教你大数据个人主页-哔哩哔哩视频目录1.Airflow分布式集群搭建原因2.Airflow分布式集群其他扩展2.1扩展Worker节点2.2扩展Master
IT贫道·2023-11-22 06:42

k8s node节点无法互联容器网络

集群搭建完成后启动测试podnginxkubectlcreatedeploymytest--image=nginx-replicas=3--port=80defaultnginx-74d589986c-c24551
程序猿-琉川·2023-11-22 05:46

K8S集群搭建(多master多node节点)

目录一部署环境关闭防火墙设置主机名hostname，管理节点设置主机名为master配置hosts主机名解析配置免密登陆关闭交换分区配置内核参数，将桥接的IPv4流量传递到iptables的链开启ipvs二配置软件源升级centos系统内核配置时间同步安装docker服务以及K8S查看docker服务和K8S服务是否起来配置docker加速三通过keepalived+nginx实现k8sapise
机灵的小小子·2023-11-22 05:15

kubeadm部署kubernetes集群

Kubernetes集群搭建Kubernetes是由谷歌开源的Docker容器集群管理系统，为容器化的应用提供了资源调度、部署运行、服务发现、扩容及缩容等一整套功能。
242030·2023-11-22 02:57

Docker 搭建 Redis 集群

RedisCluster模式搭建步骤1、创建网卡2、Redis配置3、运行容器4、创建集群5、查看集群信息6、运行测试redis集群搭建常见三种方式：主从复制、Sentinel（哨兵）模式、Cluster
david6969xin·2023-11-22 02:23

Docker 搭建redis集群

文章目录创建配置文件的脚本启动6个redis容器的脚本集群搭建创建配置文件的脚本forportin$(seq16);\do\mkdir-p/mydata/redis/node-${port}/conftouch
weixin_45773632·2023-11-22 02:52

CentOS 搭建Kafka集群

Kafka官网下载kafkawgethttps://downloads.apache.org/kafka/3.1.0/kafka_2.12-3.1.0.tgz2、安装ZookeeperZookeeper集群搭建可以不使用
前尘忆梦Memory·2023-11-21 22:47

redis高可用集群搭建

上篇博客记录了哨兵模式的集群搭建，今天搭建高可用的redis集群以及两种集群架构的对比。
Butterfly(Papillon)·2023-11-21 20:47

Mysql数据库之MHA集群

，学的越多，之前的就越容易忘记，没事写写也挺好，一来积累自己的知识和阅历，二来以后忘记了，还能翻回来自己找找．唯一的受限条件就是我这个人有点懒，希望可以坚持下来．这是我的第一篇博客，只是很基础的数据库集群搭建
一个菜鸟水平的运维民工·2023-11-21 19:12

Redis非关系型数据库集群搭建

redis非关系型数据库在以往的项目中经常使用到，一直没有时间写一篇关于redis数据库使用心得！什么是redis?Redis是一个开源的使用ANSIC语言编写、支持网络、可基于内存亦可持久化的日志型、Key-Value数据库！redis数据库的数据类型？redis数据库有5中数据库类型，分别是String(字符串)、list(链表)、Hash(哈希值)、set(集合)、zset(有序集合)red
技术旅人·2023-11-21 14:39

Docker容器编排

文章目录基本概念DockerComposeSwarm分布式NodeTaskservice集群搭建弹性伸缩基本概念针对容器生命周期的管理，对容器生命周期进行更方便更快捷的方式进行管理。
Lum1n0us·2023-11-21 13:30

GZ033 大数据应用开发赛题第08套

2023年全国职业院校技能大赛赛题第08套赛项名称：大数据应用开发英文名称：BigDataApplicationDevelopment赛项组别：高等职业教育组赛项编号：GZ033背景描述工业互联网是工业全要素
嘿哈小将·2023-11-21 12:39

GZ033 大数据应用开发赛题第06套

2023年全国职业院校技能大赛赛题第06套赛项名称：大数据应用开发英文名称：BigDataApplicationDevelopment赛项组别：高等职业教育组赛项编号：GZ033背景描述大数据时代背景下
嘿哈小将·2023-11-21 12:38

GZ033 大数据应用开发赛题第05套

2023年全国职业院校技能大赛赛题第05套赛项名称：大数据应用开发英文名称：BigDataApplicationDevelopment赛项组别：高等职业教育组赛项编号：GZ033背景描述工业互联网是工业全要素
嘿哈小将·2023-11-21 12:08

GZ033 大数据应用开发赛题第07套

2023年全国职业院校技能大赛赛题第07套赛项名称：大数据应用开发英文名称：BigDataApplicationDevelopment赛项组别：高等职业教育组赛项编号：GZ033背景描述大数据时代背景下
嘿哈小将·2023-11-21 12:27

微服务系列：服务调用 Spring Cloud 之 OpenFeign 详细入门

微服务系列：SpringCloudAlibaba之Nacos注册中心微服务系列：SpringCloudAlibaba之Nacos配置中心微服务系列：SpringCloudAlibaba之Nacos集群搭建继上面几篇
程序猿秃头之路·2023-11-21 10:39

Zookeeper实现分布式队列

Zookeeper不适合存储大数据量存储，官方并不推荐作为队列使用，但由于实现简单，集群搭建较为便利，因此在一些吞吐量不高的小型系统中还是比较好用的。
jockerwu·2023-11-21 05:15

IELTS雅思口语基本对话答案

·I’mcurrentlyanAItestengineerworkingforabigdatacompanyInShanghai.3.Whydidyouchoosethatjob?
极客与宽客·2023-11-21 03:41

Hadoop伪分布式集群搭建

一、切换到root用户su-root二、关闭selinux：vim/etc/selinux/configSELINUX=disabled三、切换到hadoop用户，配置免密登陆。cd进入hadoop用户的家目录ssh-keygen-trsa[输入完后连按4个回车]sshnode100[yes，输入hadoop用户的密码]ssh-copy-idnode100[输入hadoop用户的密码]四、解压安装
皮卡丘要进化·2023-11-21 02:13

hive01--hive的安装及配置

如果hadoop没有安装的请参考：hadoop01--Hadoop伪分布式集群搭建_码到成龚的博客-CSDN博客hive不像hadoop，Kafka，zookeeper那样需要搭建集群，我们只需要在两个安装即可
码到成龚·2023-11-20 20:58

非遗进入“大数据时代”

灵玖软件：www.lingjoin.com大数据论坛：www.bigdatabbs.com“蜿蜒山路，车行其间，远望层峦叠嶂，溪流潺潺，近看古朴村落，袅袅炊烟……”一幅辽阔的图景由远及近，一个恬淡的画外音传出其间
cigang4063·2023-11-20 16:29

k8s的高可用集群搭建，详细过程实战版

kubernetes高可用集群的搭建前面介绍过了k8s单master节点的安装部署今天介绍一下k8s高可用集群搭建环境准备：vip：192.168.121.99keeplivemaster01：192.168.121.153centos7master02
aa一叶知秋aa·2023-11-20 15:45

HDFS完全分布式集群搭建与配置及常见问题总结

思路：1.准备3台虚拟机（静态IP，IP映射，主机名称，防火墙关闭，普通用户创建等等）2.安装JDK，配置环境变量3.安装Hadoop，配置环境变量4.配置免密登录5.编写同步脚本，配置集群(前三步已完成)搭建集群步骤1.首先要关闭防火墙systemctlstopfirewalldsystemctldisablefirewalldsystemctlstatusfirewalld2.还要关闭SELi
HUNG4050·2023-11-20 12:03
上一页 9 10 11 12 13 14 15 16 下一页
按字母分类： ABCDEFGHIJKLMNOPQRSTUVWXYZ其他