E-COM-NET
首页
在线工具
Layui镜像站
SUI文档
联系我们
推荐频道
Java
PHP
C++
C
C#
Python
Ruby
go语言
Scala
Servlet
Vue
MySQL
NoSQL
Redis
CSS
Oracle
SQL Server
DB2
HBase
Http
HTML5
Spring
Ajax
Jquery
JavaScript
Json
XML
NodeJs
mybatis
Hibernate
算法
设计模式
shell
数据结构
大数据
JS
消息中间件
正则表达式
Tomcat
SQL
Nginx
Shiro
Maven
Linux
minio集群搭建
redis持久化储存(RDB、AOF)和主从复制
redis持久化储存(RDB、AOF)和主从复制一、持久化储存RDB触发方式优势与劣势AOFAOF持久化流程频率设置优势与劣势二、主从复制概念准备工作薪火相传反客为主哨兵模式设置哨兵哨兵服务
集群搭建
使用命令启动集群服务命令故障恢复优点
见面吃火锅
·
2023-11-18 22:13
redis
redis
数据库
缓存
Linux系统Redis的
集群搭建
redis的
集群搭建
此案例在3台虚拟机上每台机搭建一个master主节点和一个slave从节点,共3个master节点,3个slave从节点,共计6个redis节点;(集群至少需要存在3个主节点,如果只有
云·泽
·
2023-11-18 18:44
#
redis
redis
java
redis大全
redis-cli常用命令redis常用命令redis数据结构redis数据结构redis持久化存储持久化存储redis事务redis事务redis管道管道redis7
集群搭建
集群redis常见问题以及解决方案常见问题以及解决方案
BACKWASH2038
·
2023-11-17 18:22
redis大全
redis
数据库
缓存
大数据开发学习笔记
前言:本文介绍了各个大数据开发框架及数据库的学习记录链接有什么问题欢迎大家留言或者私信交流~Hadoophadoop
集群搭建
+hive安装_hadoop集群安装hive-CSDN博客Hadoop基础入门
THE WHY
·
2023-11-17 16:01
大数据
大数据
学习
笔记
【腾讯云 TDSQL-C Serverless 产品测评】Serverless集群高可用测评
【腾讯云TDSQL-CServerless产品测评】Serverless集群高可用测评一、前言二、Serverless介绍三、TDSQL-CServerlessMysql介绍四、集群可用性测试4.1、
集群搭建
请你不要再迷恋哥
·
2023-11-17 11:16
1024程序员节
Milvus Standalone安装
前提条件:1.系统可以使用centos2.系统已经安装docker和docker-compose3.milvus版本这里选择2.3.1由于milvus依赖etcd和
minio
,因此需要先启动这2个组件。
大数据00
·
2023-11-17 06:40
安装
milvus
eureka
云原生
大数据系列-Hadoop
集群搭建
(2)集群配置
上篇已经把Hadoop安装到各虚拟机(大数据系列-Hadoop
集群搭建
(1)),本篇通过认识Hadoop,规划虚拟机部署。
zhm6422107
·
2023-11-17 03:59
大数据
hadoop
big
data
hdfs
4hadoopHDFS
集群搭建
-伪分布式模式
hadoop旧版网址:http://hadoop.apache.org/old/2.6.5版本ssh协议在免密登陆其他机器的时候,不会加载其他机器的环境变量。就是不会加载/etc/profile文件在免密登陆别的机器时,如果需要环境变量可以先加载环境变量,然后在执行命令。例如:
[email protected]
’source/etc/profile;echo$PATH’即可伪分布式模式:单
没有女朋友的程序员
·
2023-11-17 03:28
大数据开发
大数据分布式
集群搭建
(5)
下面我们来操作大数据中的重头戏Hadoop1.HADOOP背景介绍1.1什么是HADOOP1.HADOOP是apache旗下的一套开源软件平台2.HADOOP提供的功能:利用服务器集群,根据用户的自定义业务逻辑,对海量数据进行分布式处理3.HADOOP的核心组件有A.HDFS(分布式文件系统)B.YARN(运算资源调度系统)C.MAPREDUCE(分布式运算编程框架)4.广义上来说,HADOOP通
KongX_B
·
2023-11-17 03:25
大数据
大数据
hadoop
分布式
集群
九、Nacos
集群搭建
Nacos
集群搭建
1.集群结构图官方给出的Nacos集群图:其中包含3个nacos节点,然后一个负载均衡器代理3个Nacos。这里负载均衡器可以使用nginx。
qing_ti_xx
·
2023-11-17 03:00
微服务学习
oracle
数据库
k8s
集群搭建
(ubuntu 20.04 + k8s 1.28.3 + calico + containerd1.7.8)
环境&需求服务器:10.235.165.21k8s-master10.235.165.22k8s-slave110.235.165.23k8s-slave2OS版本:root@vms131:~#lsb_release-aNoLSBmodulesareavailable.DistributorID:UbuntuDescription:Ubuntu20.04.5LTSRelease:20.04Code
zpsimon
·
2023-11-16 22:10
kubernetes
ubuntu
容器
elasticsearch
集群搭建
elasticsearchARM架构
集群搭建
一、搭建环境搭建服务器IP环境es版本号路径20.10.0.xxCentOSLinuxrelease7.9.2009(AltArch)elasticsearch
xjl_bk
·
2023-11-16 21:11
ES集群搭建
elasticsearch
etl
4. hdfs高可用
集群搭建
简介前面把hadoop机器已经准备好了,zk
集群搭建
好了,本本就是开始搭建hdfs环境hadoop环境准备创建hadoop用户三台机器都创建hadoop用户useraddhadoop-d/home/hadoopecho
shura1014
·
2023-11-16 20:11
hadoop
hdfs
hadoop
大数据
K8S
集群搭建
一、基础环境搭建1、前置要求一台或多台机器,操作系统CentOS7.x-86_x64硬件配置:2GB或更多RAM,2个CPU或更多CPU,硬盘30GB或更多集群中所有机器之间网络互通可以访问外网,需要拉取镜像禁止swap分区2、部署步骤1、在所有的节点上安装Docker和kubeadm2、部署KubernetesMaster3、部署容器网络插件4、部署KubernetesNode,将节点加入Kub
拾 -.-
·
2023-11-16 17:33
容器化技术
Kubernetes(K8S)
集群搭建
基础入门教程
上一篇文章讲了K8s相关组件知识点,这篇文章主要是搭建一个Master节点和多个Node节点的集群环境。Kubernetes(K8s)基本概念前期准备1、准备3台centos7或者更高版本的虚拟机,主要用来安装K8s集群,下面是3台虚拟机的配置情况:IP操作系统主机名称配置网络192.168.2.124centos7.9k8s-master4vCPU/8G内存/20G硬盘NAT或者桥接模式192.
养歌
·
2023-11-16 17:32
Kubernetes(K8s)
kubernetes
运维
容器
搭建kubernetes_k8s
集群搭建
kubernetes_k8s主要内容1、kubernetes简介(1)kubernetes基本介绍(2)k8s集群架构组件(3)k8s核心概念2、kubernetes
集群搭建
(1)搭建k8s集群部署方式
羽帝
·
2023-11-16 17:02
linux进阶
kubernetes
linux
docker
容器
docker+k8s本地搭建集群,并用Dashboard实现集群的图像界面
docker+k8s本地搭建k8s集群的搭建有二进制方式和kubeadm方式,kubeadm方式搭建比较简单,但二进制方式有助于帮助理解
集群搭建
过程中更加细节的部分,本文采用kubeadm方式,有兴趣和能力的同学看完本篇后可以去了解二进制方式
weixin_44806034
·
2023-11-16 17:31
linux
docker
kubernetes
2 二进制方式搭建K8S集群
本文介绍基于二进制方式,进行单Master、多Master的K8S
集群搭建
全过程。经本人手动测试无误后整理成下文,建议先查看目录详情了解整体流程,后进行实操。
银河猎户悬臂
·
2023-11-16 17:01
Kubernetes
k8s
kubernetes
轻量高可用的 K8s
集群搭建
方案:MicroK8s
MicroK8s是CNCF认证的Kubernetes发行版,由Ubuntu背后的商业公司Canonical开发和维护。它和完整版的Kubernetes一样支持高可用特性(HA),支持快速组建K8s集群。适合用于边缘计算、IoT、以及使用KubeFlow的MLOps机器学习场景。当然,也适合用于开发者本地环境,以轻量的资源消耗、简单的运维成本获得几乎完整的Kubernetes生态体验。本篇文章,我们
soulteary
·
2023-11-16 17:00
为了不折腾而去折腾的那些事
kubernetes
docker
容器
microk8s
ubuntu
k8s
集群搭建
k8s
集群搭建
虚拟机环境准备vagrant初始化三台sentos/7环境(需要先安装vagrant)Vagrantfile文件:Vagrant.configure("2")do|config|(1..3
TakeMyHandNow
·
2023-11-16 17:57
网络
linux
运维
【k8s
集群搭建
(二):基于虚拟机的linux的k8s
集群搭建
_超详细_可视化界面Dashboard安装_记录全过程踩坑记录及解决方法】
在master执行#根据在线配置文件创建资源kubectlapply-fhttps://raw.githubusercontent.com/kubernetes/dashboard/v2.3.1/aio/deploy/recommended.yaml设置访问端口#修改配置文件找到type,将ClusterIP改成NodePortkubectleditsvckubernetes-dashboard-
2020. 12.13
·
2023-11-16 17:55
k8s
Docker
kubernetes
linux
容器
rabbitmq
集群搭建
RabbitMQ集群介绍RabbitMQ集群是一组RabbitMQ节点(broker)的集合,它们一起工作以提供高可用性和可伸缩性服务。RabbitMQ集群中的节点可以在同一物理服务器或不同的物理服务器上运行。RabbitMQ集群的工作原理是,每个节点在一个虚拟主机中提供服务,并通过网络进行通信和数据同步。当一个节点在集群中宕机时,其他节点可以接管其未处理的消息和队列,并尝试恢复数据同步,从而确保
liuyunshengsir
·
2023-11-16 15:53
hadoop
rabbitmq
分布式
K8S
集群搭建
1、搭建清单2台linux服务器(一个master节点,一个node节点),建议搭3台(一个master,两个node)我使用的是腾讯云,节点与节点使用公网IP通信确保2台服务器都安装了docker2、服务器前置工作如果是本机启动多个linux虚拟机,可忽略建议学习阶段关闭防火墙及安全策略如果需要添加安全组端口放行,我这里附上我的端口放行列表放行端口如下:8080:选择性放行,这个在证书会使用到,
睡竹
·
2023-11-16 12:30
云原生
docker
kubernetes学习
kubernetes
容器
云原生
达梦
集群搭建
一、数据库安装###(一)安装前准备版本准备[root@localhost~]#uname-aLinuxlocalhost.localdomain3.10.0-1160.el7.x86_64#1SMPMonOct1916:18:59UTC2020x86_64x86_64x86_64GNU/Linux将镜像文件传到/opt目录下[root@localhost100~]#cd/opt/[root@lo
EOPG
·
2023-11-16 10:54
运维
达梦数据库
数据库
linux
运维
redis-5.0.8主从
集群搭建
、不重启修改配置文件
一、环境准备192.168.5.100redis-01192.168.5.101redis-02192.168.5.102redis-03关闭防火墙、能够通网二、安装redis[root@localhost~]#wgethttp://download.redis.io/releases/redis-5.0.8.tar.gz[root@localhost~]#tarxfredis-5.0.8.tar
我还能再学点
·
2023-11-16 07:13
redis
数据库
缓存
大数据Hadoop之——部署hadoop+hive+Mysql环境(Linux)
目录一、JDK的安装1、安装jdk2、配置Java环境变量3、加载环境变量4、进行校验二、hadoop的
集群搭建
1、hadoop的下载安装2、配置文件设置2.1.配置hadoop-env.sh2.2.配置
爱吃面的猫
·
2023-11-16 06:51
大数据
笔记
从零开始,掌握Nacos搭建的艺术(单点、集群、docker-compose)
:你只管努力,剩下的交给时间:小破站从零开始,掌握Nacos前言:前提:建表语句第一:单节点搭建:第二:
集群搭建
:第三:使用docker-compose搭建目录结构Docker-compose.ymlconf.d
一只牛博
·
2023-11-16 04:43
分布式
nacos
【
minio
离线安装教程】
Linux-arm64版本
minio
离线安装教程一、下载
minio
二、上传服务器三、创建目录四、添加可执行权限五、创建
minio
运行用户六、创建
minio
配置文件七、启动服务八、浏览器访问
minio
服务验证是否成功一
花海海
·
2023-11-15 18:03
Linux
服务器
minio
服务器
linux
ubuntu
bash
使用 docker-compose 简单部署
minio
单机开发调试用version:'3'services:
minio
:image:
minio
/
minio
:RELEASE.2021-04-18T19-26-29Zcontainer_name:
minio
Serverports
yssa1125001
·
2023-11-15 17:09
springcloud
分布式开发
docker
容器
minio
compose
文件服务器
docker-compose 部署
minio
├──conf├──data└──docker-compose.yml2、docker-compose.yml脚本version:'3'services:
minio
:image:
minio
/
minio
:
灰鹭
·
2023-11-15 17:39
docker
docker
服务器
运维
docker-compose部署
minio
并创建bucket
文章目录1.docker-compose.yaml2.部署3.卸载4.验证1.docker-compose.yamlmkdir-p/root/i/docker-compose/
minio
&&cd/root
wnfee
·
2023-11-15 17:37
minio
docker-compose
minio
docker-compose
腾讯云部署docker-compose
minio
分布式集群部署
先看效果图腾讯云部署先开放端口:190001900190009001大概的目录是这样:先创建好目录docker-compose.yam:#指定的docker-compos的版本,这个需要和docker版本相适配,对应关系参考https://docs.docker.com/compose/compose-file/compose-file-v3/version:‘3.8’Settingsandcon
qq_32617639
·
2023-11-15 17:36
java
docker
docker-compose 部署单机、多机
minio
一、介绍
MinIO
是对象存储服务。它基于ApacheLicense开源协议,兼容AmazonS3云存储接口。适合存储非结构化数据,如图片,音频,视频,日志等。对象文件最大可以达到5TB。
Xinyi7777
·
2023-11-15 17:04
存储技术
linux
centos
docker
容器
负载均衡
docker-compose部署
minio
1、
minio
登录密码和访问端口默认密码:adminadmin123456访问端口:80012、创建挂载目录mkdir-p/home/volumes/
minio
/datacd/home/volumeschmod777
!@123
·
2023-11-15 17:34
docker-compose
docker
运维
Docker---Docker-compose安装部署
MinIO
存储服务
Docker-compose安装部署
MinIO
存储服务目录Docker-compose安装部署
MinIO
存储服务一、环境准备二、启动容器并访问一、环境准备拉取
minio
的docker镜像:dockerpull
minio
--山海--
·
2023-11-15 17:33
Docker
docker-compose
minio
容器
Docker-
minio
部署
1.创建目录创建文件目录,用来存放配置和上传文件目录(1)
Minio
外部挂载的配置文件(/mydata/
minio
/config)(2)存储上传文件的目录(/mydata/
minio
/data)mkdir-p
梦想的边缘
·
2023-11-15 17:02
docker
容器
运维
【CEPH-初识篇】Ceph 详细介绍,一篇解决 Ceph
集群搭建
, 三大存储使用
文章目录前言简介(理论篇)逻辑结构数据存储原理三大存储RADOSGW(对象网关)BRD(块存储)CEPHFS(文件存储)所有组件结合起来POOL、PG简介组件结合搭建ceph(操作篇)1、基础配置2、创建ceph集群3、部署mgr管理服务4、部署osd使用ceph一、cephfs文件系统二、块存储三、对象存储使用S3访问RGW使用命令行方式操作rgw参考资料前言你好,我是无名小歌。今天给大家分享一
秋意零
·
2023-11-15 15:46
#
Linux
云原生
linux
云计算
运维
k8s安装ingress-nginx
目录前言准备helm安装包修改values.yaml安装ingress测试功能前言k8s
集群搭建
参考:https://blog.csdn.net/centrl/article/details/134291473
墨家先生
·
2023-11-15 14:20
k8s
kubernetes
RabbitMQ+keepalived+haproxy搭建高可用集群
RabbitMQ+keepalived+haproxy搭建高可用集群一、集群简介1.1RabbitMQ集群1.2集群架构二、RabbitMQ
集群搭建
RabbitMQ普通集群模式2.1环境准备2.2host
哒不死的小小强
·
2023-11-15 07:45
java-rabbitmq
rabbitmq
java
keepalived+haproxy+redis-cluster 高可用负载均衡redis
集群搭建
搭建高可用redis-cluster集群KeepAlived+Redis+Haproxy实现主从热备、负载均衡、秒级切换实战Redis+Keepalived+Haproxy的集群架构,分别用六个端口,实现多路复用,最终实现主从热备、负载均衡、秒级切换。一、部署Redis集群1、环境一台虚拟机模拟6个节点,创建出3master、3salve环境redis1:192.168.182.120:(6001
Bejpse
·
2023-11-15 07:42
java
java
后端
AWS-S3通用存储操作,操作
minio
、oss、cos等所有兼容s3协议的云存储(含有大文件分片上传实现)
一、介绍通用存储操作common包,支持所有兼容amazon-s3协议的云存储,如
minio
、oss、cos等,以后客户用啥云储存一套代码都能搞定了,真棒~二、代码结构三、代码实现3.1pom.xmlsay-common-ossaws-java-sdk-s3com.amazonaws
say荣帅
·
2023-11-15 07:06
minio
Java
aws
spring
java
通用存储操作
大文件分片上传
Ubuntu22.04 Hadoop3.3.4 jdk18.02 安装配置
3.3.4_x_y_z423的博客-CSDN博客(112条消息)hadoop3.3.4集群安装部署_hwbays的博客-CSDN博客加倍推荐,Hadoop集群配置内容讲的及其详细基于docker的hadoop
集群搭建
一
落非
·
2023-11-15 05:15
hadoop
大数据
分布式
大数据技术栈-Hadoop3.3.4-完全分布式
集群搭建
部署-centos7(完全超详细-小白注释版)虚拟机安装+平台部署
目录环境条件:1、安装虚拟机(已安装好虚拟机的可跳转至二、安装JDK与Hadoop)(1)直接新建一台虚拟机(2)首次启用虚拟机,进行安装一、集群前置环境搭建(三台机器分别设置hostname、网卡(ip)配置、ssh免密登录)1、查看一下本机与虚拟机的网卡和ip信息(1)首先,查看本机的网卡配置,使用cmd查看ipconfg,找到VMware的虚拟网卡,查看ip(2)查看虚拟机的网卡配置和网络信
Hao.715
·
2023-11-15 05:43
大数据技术栈
大数据
分布式
java
hadoop
运维
Amazon S3 对象存储Java API操作记录(
Minio
与S3 SDK两种实现)
缘起今年(2023年)2月的时候做了个适配AmazonS3对象存储接口的需求,由于4月份自学考试临近,一直在备考就拖着没总结记录下,开发联调过程中也出现过一些奇葩的问题,最近人刚从考试缓过来顺手记录一下。S3对象存储的基本概念S3是什么?AmazonS3(SimpleStorageService)对象存储出现得比较早且使用简单的RESTfulAPI,于是成为了对象存储服务(ObjectStorag
东北小狐狸-Hellxz
·
2023-11-15 03:34
#
Java
EE
java
Amazon
S3
对象存储
OSS
解决Nginx代理
MinIO
出现Access Denied
通过nginx代理访问
minio
文件地址时出现了AccessDenied的错误我的访问地址:http://ab.ac.ad.cn:10001/group2/2023/10/23/3_20231023101203A001
焚目圣僧渡众生
·
2023-11-15 03:47
重点栏
nginx
运维
nginx 报 413 Request Entity Too Large
这里上传
minio
文件时,通过nginx代理,发现抛出了413RequestEntityTooLarge的异常,异常信息:io.
minio
.errors.InvalidResponseException
焚目圣僧渡众生
·
2023-11-15 03:47
异常记录
nginx
运维
【k8s
集群搭建
(一):基于虚拟机的linux的k8s
集群搭建
_超详细_解决并记录全过程步骤以及自己的踩坑记录】
虚拟机准备3台Linux系统k8s集群安装每一台机器需要安装以下内容:docker:容器运行环境kubelet:控制机器中所有资源bubelctl:命令行kubeladm:初始化集群的工具Docker安装安装一些必要的包,yum-util提供yum-config-manager功能,另两个是devicemapper驱动依赖#yuminstall-yyum-utilsyuminstall-yyum-
2020. 12.13
·
2023-11-15 02:50
k8s
Docker
kubernetes
linux
容器
基于SpringBoot的文件在线预览
基于SpringBoot的文件在线预览kkFileView简介Windows安装Linux安装kkfileview和
MinIO
结合使用kkfileview的配置kkFileView简介kkFileView
mry6
·
2023-11-14 14:06
工具
ZooKeeper+Kafka+ELK+Filebeat
集群搭建
实现大批量日志收集和展示
大致流程:将nginx服务器(web-filebeat)的日志通过filebeat收集之后,存储到缓存服务器kafka,之后logstash到kafka服务器上取出相应日志,经过处理后写入到elasticsearch服务器并在kibana上展示。一、集群环境准备4c/8G/100G10.10.200.33Kafka+ZooKeeper+ES+Filebeat+ES-head4c/8G/100G10
蜜蜜不吃糖
·
2023-11-14 09:35
zookeeper
kafka
elk
Elasticsearch
集群搭建
本次
集群搭建
基于Elasticsearch7.8.1下载地址(Elastic中文社区):https://elasticsearch.cn/download/#seg-12一、节点规划ES服务器节点分配192.168.0.01master192.168.0.02slave192.168.0.03slave192.168.0.04slave192.168.0.05slave
Dream答案
·
2023-11-14 00:50
Elasticsearch
elasticsearch
大数据
搜索引擎
上一页
15
16
17
18
19
20
21
22
下一页
按字母分类:
A
B
C
D
E
F
G
H
I
J
K
L
M
N
O
P
Q
R
S
T
U
V
W
X
Y
Z
其他