E-COM-NET
首页
在线工具
Layui镜像站
SUI文档
联系我们
推荐频道
Java
PHP
C++
C
C#
Python
Ruby
go语言
Scala
Servlet
Vue
MySQL
NoSQL
Redis
CSS
Oracle
SQL Server
DB2
HBase
Http
HTML5
Spring
Ajax
Jquery
JavaScript
Json
XML
NodeJs
mybatis
Hibernate
算法
设计模式
shell
数据结构
大数据
JS
消息中间件
正则表达式
Tomcat
SQL
Nginx
Shiro
Maven
Linux
bigdata集群搭建
【已解决】HBase 2.2.6 集群部署后,从节点未启动 HRegionServer
而启动之前的HBase2.4.11则完成正常,我就有点怀疑是不是HBase2.2.6
集群搭建
有什么特殊的地方?
mba1398
·
2023-11-26 19:06
hbase
大数据
第03期:ClickHouse 之
集群搭建
以及数据复制
本期作者:邓亚运37互娱高级DBA,负责公司MySQL,Redis,Hadoop,Clickhouse集群的管理和维护。前面的文章简单的介绍了ClickHouse(第01期),以及也进行了简单的性能测试(第02期)。本期说说集群的搭建以及数据复制,如果复制数据需要zookeeper配合。环境:1)3台机器。我这里是3台虚拟机,都安装了clickhouse。2)绑定hosts,其实不绑定也没关系,配
爱可生开源社区
·
2023-11-26 15:45
kafka-2.
集群搭建
,topic+partition消费逻辑梳理
kafka
集群搭建
这里博主用的kafka2.6.0https://archive.apache.org/dist/kafka/2.6.0/kafka_2.13-2.6.0.tgz上传服务器解压安装$tar-xzfkafka
飘然渡沧海
·
2023-11-26 12:33
kafka
kafka
zookeeper
分布式
架构
Redis分片集群
文章目录Redis分片
集群搭建
分片集群散列插槽插槽原理小结集群伸缩需求分析创建新的redis实例添加新节点到redis转移插槽故障转移自动故障转移手动故障转移RedisTemplate访问分片集群Redis
过去日记
·
2023-11-26 12:13
redis
redis
数据库
缓存
笔记
es的api使用
packagecom.bcht.
bigdata
.dsjmh.api.utils;importcom.bcht.
bigdata
.common.entity.ESIndexConfig;importorg.apache.http.HttpHost
夏末将至LL
·
2023-11-26 12:41
EleasticSearch
elasticsearc
elasticsearch 冷热分离
集群搭建
——筑梦之路
冷热分离架构介绍冷热分离是目前ES非常火的一个架构,它充分的利用的集群机器的优劣来实现资源的调度分配。ES集群的索引写入及查询速度主要依赖于磁盘的IO速度,冷热数据分离的关键点为使用固态磁盘存储数据。若全部使用固态,成本过高,且存放冷数据较为浪费,因而使用普通机械磁盘与固态磁盘混搭,可做到资源充分利用,性能大幅提升的目标。因此我们可以将实时数据(5天内)存储到热节点中,历史数据(5天前)的存储到冷
筑梦之路
·
2023-11-26 04:37
linux系统运维
数据库技术
虚拟化
elasticsearch
big
data
分布式
Docker进阶Compose——swarm集群
文章目录Docker基础回顾DockerComposeCompose安装Compose初体验Compose配置编写规则使用Compose一键部署WP博客实战:自己编写微服务上线DockerSwarm
集群搭建
环境准备
xixihaha_coder
·
2023-11-25 21:15
Docker
docker
容器
运维
【Docker之Swarm详细讲解&Swarm
集群搭建
&管理节点&工作节点&Raft一致性协议&overlay网络&Docker结合Swarm部署WordPress个人博客实战】
一.知识回顾之前的内容都帮你整理好了,在这里哟!【0.Docker相关目录文章整理,可自行查看,包含多节内容】【1.Docker详细安装部署&阿里镜像地址配置】【2.Docker架构&&架构角色概念&&角色作用】【3.Docker命令详细讲解&实操演示】【4.Docker镜像文件&加载原理&生产中重新制作并提交镜像文件&案例演示】【5.Docker数据卷&数据卷容器&DockerFile执行流程】
硕风和炜
·
2023-11-25 21:38
Docker
Docker
Swarm集群搭建
Raft一致性协议工作管理节点
WordPress个人博客实战
overlay网络
Spring Cloud Alibaba系列(6)之:nacos
集群搭建
传送门SpringCloudAlibaba系列之nacos:(1)安装SpringCloudAlibaba系列之nacos:(2)单机模式支持mysqlSpringCloudAlibaba系列之nacos:(3)服务注册发现SpringCloudAlibaba系列之nacos:(4)配置管理SpringCloudAlibaba系列之(5):nacos源码本地环境搭建为什么要搭建本地Nacos集群环
kobe_t
·
2023-11-25 17:26
#
SpringCloud
Alibaba
java
基于CentOS7的CDH6.3.2完全分布式
集群搭建
【上】
主要参考:【CDH实战01】基于CentOS7的CDH6.3.2完全分布式
集群搭建
【上】【CDH实战02】基于CentOS7的CDH6.3.2完全分布式
集群搭建
【下】如何从0开始学习大数据技术2020年
HansBigData
·
2023-11-25 14:18
分布式
linux
hadoop
Docker Swarm总结+基础、
集群搭建
维护、安全以及集群容灾(1/3)
博主介绍:Java领域优质创作者,博客之星城市赛道TOP20、专注于前端流行技术框架、Java后端技术领域、项目实战运维以及GIS地理信息领域。文末获取源码下载地址精彩专栏推荐订阅欢迎点赞收藏评论拍砖........【DockerSwarm总结】《容器技术Docker+K8S专栏》✅【uniapp+uinicloud多用户社区博客实战项目】《完整开发文档-从零到完整项目》✅【Springcloud
hhzz
·
2023-11-25 13:17
容器技术
Docker+K8S
docker
java
eureka
本地k8s
集群搭建
保姆级教程(2)-装机Alpine
装机Alpine1安装Alpine1.1登录默认用户:root,无密码1.2输入setup-alpine,回车1.3设置键盘语言输入:cn,回车继续输入:cn,回车1.4设置主机名输入:k8smaster,回车1.5初始化网卡信息几个选项都默认回车,回车到设置密码1.6设置密码密码需要输入两次1.7设置时区1、输入:Asia,回车2、输入:Shanghai,回车1.8设置安装包镜像源选择要安装的工
幸福指北
·
2023-11-25 13:43
Devops
Linux/Unix
ssh
linux
kubernetes
云原生
devops
Rancher+K8S+Docker
集群搭建
Rancher+K8S+Docker
集群搭建
Ubuntu安装准备工作:准备VMware+Ubuntu(ubuntu-18.04.5-live-server-amd64.iso)1.1虚拟机安装步骤不做赘述
纠结已成歌e
·
2023-11-25 12:38
docker
ubuntu
linux
centos
redis专题:redis的主从、哨兵、集群架构的配置和部署详情、以及问题分析
3.redis哨兵高可用架构3.1redis哨兵架构搭建步骤3.2哨兵的主要作用3.3哨兵leader选举流程4.redis集群高可用架构4.1redis高可用
集群搭建
4.2redis集群的槽位存储
知识分子_
·
2023-11-25 10:06
redis
redis
架构
bootstrap
Zookeeper+Hadoop+Hbase+Hive+Kylin+Nginx
集群搭建
Zookeeper+Hadoop+Hbase+Hive+Kylin+Nginx
集群搭建
一、虚拟机安装Centos71.准备工作2.centos7安装过程3.关闭防火墙(关键)二、安装jdk1.卸载镜像自带
桃橙柳
·
2023-11-25 09:15
大数据生态安装
大数据
hadoop
linux
hdfs
centos
ElasticSearch
集群搭建
ES
集群搭建
(ES-7.12.0)Linux系统参数配置#文件句柄vi/etc/security/limits.conf*softnofile65536*hardnofile65536*softnproc2048
EvanDeveloper
·
2023-11-25 08:09
elasticsearch
es
MySQL数据库主从
集群搭建
快捷查看指令ctrl+f进行搜索会直接定位到需要的知识点和命令讲解(如有不正确的地方欢迎各位小伙伴在评论区提意见,博主会及时修改)MySQL数据库主从
集群搭建
主从复制,是用来建立一个和主数据库完全一样的数据库环境
寂冄
·
2023-11-25 07:43
MySQL
数据库
数据库
mysql
架构
安装nvidia-docker2报错E: Unable to locate package nvidia-docker2
一、Ubuntu18.04安装nvidia-docker2安装时参考的博客如下:https://blog.csdn.net/
BigData
_Mining/article/details/99681168
申请二进制
·
2023-11-25 06:19
docker
linux
ubuntu
python
java
1. spark源码分析(基于yarn cluster模式)-任务提交
一般采用如下模式提交任务:park-submit--classxxxxx--name'test_xxxx'--masteryarn-cluster--queueyarn-test--principalad-
bigdata
-test
Leo Han
·
2023-11-25 01:45
大数据
spark
scala
big
data
yarn
手把手带你实现分布式缓存 Redis
集群搭建
!
来源:https://www.cnblogs.com/esofar/p/10486621.html作者:EsofarRedis集群简介RedisCluster即Redis集群,是Redis官方在3.0版本推出的一套分布式存储方案。完全去中心化,由多个节点组成,所有节点彼此互联。Redis客户端可以直接连接任何一节点获取集群中的键值对,不需要中间代理,如果该节点不存在用户所指定的键值,其内部会自动把
码农小光
·
2023-11-24 19:09
zookeeper使用场景、
集群搭建
、选举原理
简介:ApacheZooKeeper是一项致力于开发和维护开源服务器的工作,它能够实现高度可靠的分布式协调。ZooKeeper是一个集中的服务,用于维护配置信息、命名(服务注册和发现)、提供分布式同步以及提供组服务。应用场景概述:提供了文件系统(存储信息)和通知机制(watch)命名服务naming(注册中心)常见的就是一些分布式服务框架(如RPC、RMI)中的服务地址列表,通过使用命名服务,客户
...狂风...
·
2023-11-24 14:02
zookeeper
Linux
java-zookeeper
zookeeper
分布式
Nacos+Docker+Mysql快速
集群搭建
目录说明安装docker创建mysql数据库拉取docker镜像nacos一些说明点创建docker容器访问集群结束语说明简单记录一下三台云ECS快速docker方式创建nacos集群。Nacos版本2.0.2,里面的一些注意点一并记录三台ECS,充当三个节点主机内网IP说明172.20.167.254node1172.20.168.0node2172.20.167.255node3安装docke
小时候的阳光
·
2023-11-24 13:05
运维
docker
mysql
nacos
集群
Redis笔记进阶篇:万字长文-整理Redis,各种知识点,建议收藏
五、Redis的事务六、Redis的监控七、Redis的配置文件八、Redis的持久化8.1、fork()系统调用8.2、RDB8.3、AOF8.4、RDB和AOF的选择九、发布订阅十、主从复制十一、
集群搭建
及小实验
马小屑
·
2023-11-24 13:31
redis
redis
缓存
数据库
【大数据】Docker部署HMS(Hive Metastore Service)并使用Trino访问Minio
本文参考链接置顶:Presto使用Docker独立运行HiveStandaloneMetastore管理MinIO(S3)_hiveminio_
BigData
ToAI的博客-CSDN博客一.背景团队要升级大数据架构
秦拿希
·
2023-11-24 11:35
docker
容器
hive
trino
minio
kubernetes基础介绍及静态pod模式
集群搭建
kubernetes基础介绍容器运行的根本:文件系统是静态的,容器运行真正靠的是文件系统树映射之下的我们所要启动的进程树为根本骨架进行运行的。系统向PID发送终止信,PID号为1的进程结束,容器退出运行转为停滞状态。namespace名称空间隔离系统:mount,pid,network,uts,user,ipc,controlgroup(cgp),time容器通信:bridge:桥接口,二层虚拟网
清楸
·
2023-11-24 09:28
kubernetes
docker
容器
linux
云原生
minio单机、
集群搭建
、Spring Boot集成,详细步骤
一、单机minio搭建1.下载rpm包下载地址:https://dl.min.io/server/minio/release/linux-amd64/2.安装rpm-ivhminio-20220504074527.0.0.x86_64.rpm修改/etc/systemd/system/minio.service文件#启动的用户和用户组User=rootGroup=root#配置文件地址Enviro
一个人也很酷
·
2023-11-24 05:21
Java
linux
spring
boot
minio
1.19-1.20写作课词汇
proportion=percentage比例consumption消耗量burglary入室行窃data数据
bigdata
大数据calls通话量linegraph折线图table表格piechart饼状图
skadoosh945
·
2023-11-24 05:05
nacos
集群搭建
Nacos
集群搭建
1.集群结构图官方给出的Nacos集群图:其中包含3个nacos节点,然后一个负载均衡器代理3个Nacos。这里负载均衡器可以使用nginx。
( ̄(工) ̄)霸天下
·
2023-11-23 22:03
微服务
微服务
springcloud
注册中心
nacos
k8s安装loadbalancer
目录前言准备安装metallb访问测试前言k8s
集群搭建
参考:https://blog.csdn.net/centrl/article/details/134291473准备查看kube-proxy的strictARP
墨家先生
·
2023-11-23 21:25
k8s
kubernetes
k8s部署harbor
目录前言安装验证安装配置containerd(所有服务器)unbuntu22.04添加CA证书(所有服务器)测试前言k8s
集群搭建
参考:https://blog.csdn.net/centrl/article
墨家先生
·
2023-11-23 21:25
k8s
kubernetes
k8s整合helm3
目录前言前期准备安装功能测试前言k8s
集群搭建
参考:https://blog.csdn.net/centrl/article/details/134291473前期准备和k8s版本对应关系:https:
墨家先生
·
2023-11-23 21:54
k8s
kubernetes
容器
云原生
k8s安装nfs
目录前言集群架构kmaster安装nfs服务kworker安装nfs-commonk8s安装nfs客户端配置程序功能验证验证配置前言k8s
集群搭建
参考:https://blog.csdn.net/centrl
墨家先生
·
2023-11-23 21:54
k8s
kubernetes
k8s安装jenkins
目录前言安装前言k8s
集群搭建
参考:https://blog.csdn.net/centrl/article/details/134291473整合helm参考:https://blog.csdn.net
墨家先生
·
2023-11-23 21:50
k8s
kubernetes
jenkins
java
Spring Cloud学习(十一)【深入Elasticsearch 分布式搜索引擎03】
RestAPI实现聚合自动补全拼音分词器自定义分词器自动补全查询completionsuggester查询RestAPI实现自动补全数据同步数据同步思路分析实现elasticsearch与数据库数据同步
集群搭建
sweetheart7-7
·
2023-11-23 16:44
数据聚合
自动补全
数据同步
elasticsearch集群
分布式搜索引擎
伪分布式系列 - 第三篇 - spark-2.4.3环境搭建on hadoop3.2.0
已经搭建好,下面我们将进行sparkonyarn搭建下载并配置scala,我们选择scala-2.12.8/这个版本即可,下载解压scala即可配置环境#scalaexportSCALA_HOME=/opt/
bigdata
rolin-刘瑞
·
2023-11-23 15:22
spark
大数据生态搭建系列
hadoop
spark
Spark---
集群搭建
Standalone
集群搭建
与SparkonYarn配置1、StandaloneStandalone集群是Spark自带的资源调度框架,支持分布式搭建,这里建议搭建Standalone节点数为3台,1台
30岁老阿姨
·
2023-11-23 11:24
Spark
spark
大数据
分布式
【超详细】手把手教你搭建MongoDB
集群搭建
fileMongoDB
集群搭建
MongoDB集群简介mongodb
集群搭建
的方式有三种:主从备份(Master-Slave)模式,或者叫主从复制模式。
博学谷狂野架构师
·
2023-11-23 06:51
MQ
集群搭建
以下所有的服务器地址为当前所使用的服务器IP地址。以下所有的路径需要改为当前所安装的路径。1.环境准备两台linux服务器(CentOS7)openJDK1.8maven非必须ssh工具finalshell部署结构如下:2.搭建步骤2.1首先两台服务器都需要下载rocketMq。包为rocketmq-all-4.6.1-bin-release.zip,下载好后使用unzip命令进行解压,并重命名为
困困困困困困小凯
·
2023-11-23 04:51
六、Big Data Tools安装
1、安装在Jetbrains的任意一款产品中,均可安装
BigData
Tools这个插件。
弦之森
·
2023-11-22 22:11
Hadoop
大数据
Hbase2.1
集群搭建
>Hbase在大数据的体系中扮演着DB角色,不得不说是重要的一员,在上一篇,大猪已经给大家演示了[Hadoop3.2
集群搭建
](https://www.jianshu.com/p/3182aaff918d
kikiki5
·
2023-11-22 18:30
GZ033 大数据应用开发赛题第10套
2023年全国职业院校技能大赛赛题第10套赛项名称:大数据应用开发英文名称:
BigData
ApplicationDevelopment赛项组别:高等职业教育组赛项编号:GZ033背景描述工业互联网是工业全要素
嘿哈小将
·
2023-11-22 16:47
大数据应用开发赛项
大数据
hadoop
flume
flink
spark
GZ033 大数据应用开发赛题第09套
2023年全国职业院校技能大赛赛题第09套赛项名称:大数据应用开发英文名称:
BigData
ApplicationDevelopment赛项组别:高等职业教育组赛项编号:GZ033背景描述工业互联网是工业全要素
嘿哈小将
·
2023-11-22 16:11
大数据应用开发赛项
大数据
hadoop
flink
spark
flume
大数据全系技术知识概览
大数据(
bigdata
),指无法在一定时间范围内用常规软件工具进行捕捉、管理和处理的数据集合,是需要新处理模式才能具有更强的决策力、洞察发现力和流程优化能力的海量、高增长率和多样化的信息资产。
金罗老师
·
2023-11-22 10:25
大数据
大数据开发
大数据学习
spark
人工智能
编程开发
大数据分析
hadoop
大数据
大数据学习
大数据开发
大数据技术
大数据入门
大数据全系技术概览
大数据(
bigdata
),指无法在一定时间范围内用常规软件工具进行捕捉、管理和处理的数据集合,是需要新处理模式才能具有更强的决策力、洞察发现力和流程优化能力的海量、高增长率和多样化的信息资产。
金罗老师
·
2023-11-22 10:24
大数据
大数据开发
大数据学习
人工智能
编程开发
大数据分析
hadoop
spark
大数据学习
大数据开发
大数据入门
数据分析
zk集群+Kafka
集群搭建
,开启kafka-manager控制台
去官网下载zk和kafkahttps://zookeeper.apache.org/releases.html#downloadhttp://kafka.apache.org/downloads三体服务器,每台服务器设置ip别名分别为kafka1,kafka2,kafka31.先安装zookeeper集群下载完成后解压到/opt/目录下进入conf目录下cpzoo_sample.cfgzoo.cf
Source_
·
2023-11-22 10:33
MySQL高可用性:主从复制、读写分离与
集群搭建
本文将深入探讨MySQL的主从复制、读写分离以及
集群搭建
,为实现高可用性提供详细指南。1.主从复制(Master-SlaveReplication)1.1什么是主从复制?
二狗plus
·
2023-11-22 09:22
MySQL
mysql
clickhouse部署
目录前置要求注意事项单机搭建1创建目录2启动docker镜像服务3使用client连接clickhouse服务4查询clickhouse状态
集群搭建
1添加配置文件配置文件目录结构conf目录下文件文件内容
佳捷
·
2023-11-22 06:52
总结
clickhouse
docker
运维
Apache Airflow (十三) :Airflow分布式
集群搭建
及使用-原因及
博主个人B栈地址:豹哥教你大数据的个人空间-豹哥教你大数据个人主页-哔哩哔哩视频目录1.Airflow分布式
集群搭建
原因2.Airflow分布式集群其他扩展2.1扩展Worker节点2.2扩展Master
IT贫道
·
2023-11-22 06:42
任务流调度工具
airflow
k8s node节点无法互联容器网络
集群搭建
完成后启动测试podnginxkubectlcreatedeploymytest--image=nginx-replicas=3--port=80defaultnginx-74d589986c-c24551
程序猿-琉川
·
2023-11-22 05:46
网络
kubernetes
docker
K8S
集群搭建
(多master多node节点)
目录一部署环境关闭防火墙设置主机名hostname,管理节点设置主机名为master配置hosts主机名解析配置免密登陆关闭交换分区配置内核参数,将桥接的IPv4流量传递到iptables的链开启ipvs二配置软件源升级centos系统内核配置时间同步安装docker服务以及K8S查看docker服务和K8S服务是否起来配置docker加速三通过keepalived+nginx实现k8sapise
机灵的小小子
·
2023-11-22 05:15
Docker
K8S
kubernetes
大数据
运维
服务器
docker
上一页
10
11
12
13
14
15
16
17
下一页
按字母分类:
A
B
C
D
E
F
G
H
I
J
K
L
M
N
O
P
Q
R
S
T
U
V
W
X
Y
Z
其他