E-COM-NET
首页
在线工具
Layui镜像站
SUI文档
联系我们
推荐频道
Java
PHP
C++
C
C#
Python
Ruby
go语言
Scala
Servlet
Vue
MySQL
NoSQL
Redis
CSS
Oracle
SQL Server
DB2
HBase
Http
HTML5
Spring
Ajax
Jquery
JavaScript
Json
XML
NodeJs
mybatis
Hibernate
算法
设计模式
shell
数据结构
大数据
JS
消息中间件
正则表达式
Tomcat
SQL
Nginx
Shiro
Maven
Linux
minio集群搭建
【学习笔记】
minIO
分布式文件服务系统
MinIO
一、概述1.1
minIO
是什么?
MinIO
是专门为海量数据存储、人工智能、大数据分析而设计的对象存储系统。
Xcong_Zhu
·
2023-10-13 13:14
学习笔记
学习
笔记
分布式
MinIO
SXSSFWorkbook-
MinIo
-大数据-流式导出
文章目录前言业务现状架构思路技术细节生成摘要IDSXSSFWorkbook
MinIo
mybatis流查询PipedInputStream保存到
minio
总结前言由于业务涉及到数据比较大,用户对导出功能使用频繁
ShayneLee8
·
2023-10-13 07:02
java
大数据
minio
SXSSFWorkbook
管道流
开源对象存储工具
Minio
的使用(Java)
本文章仅作为个人笔记官方网站/官方文档/个人demo
minio
部署docker(对外公开9000端口,实例名为
minio
,挂载本地/data目录)dockerrun--name
minio
-v/data:
草丛里的黄盖
·
2023-10-13 05:59
Linux 搭建redis集群(centos7.8+redis6.*)
redis
集群搭建
主要步骤如下:安装单机版redis;创建集群redis配置信息启动集群一、Linux搭建redis单机本实例选用redis版本6.2.6,具体搭建参考我的另外一篇实例;Linux搭建redis6
李贝尔
·
2023-10-13 02:46
互联网
#
redis
redis
linux
【
minio
】How to secure access to
MinIO
server with TLS?
MinIO
快速入门指南https://docs.min.io/cn/
minio
-quickstart-guideEnterprise-GradeCloudStoragewithNGINXPlusand
Minio
https
Bogon
·
2023-10-13 01:29
WSL+vscode配置
minio
b环境
WSLWindowsSubsystemforLinux入门:安装+配置图形界面+中文环境+vscode·wu-kan2.获取源码找个位置GitBash然后拉取代码gitclonehttps://github.com/oceanbase/
minio
b.git3
liangchaaaaa
·
2023-10-13 01:53
OceanBase
miniob
vscode
ide
编辑器
windows下redis搭建集群
windows下redis的
集群搭建
(三主三从)所需资料百度网盘全部存在,依次执行就好链接:https://pan.baidu.com/s/1BCyL4G71AXczBSBbbppe0g提取码:ABCC
一只小山雀
·
2023-10-13 01:01
redis
windows
ruby
Redis3.0 Cluster Redis
集群搭建
一、介绍Redis集群是一个提供在多个Redis间节点间共享数据的程序集.redis3.0以前,只支持主从同步的,如果主的挂了,写入就成问题了。而官方的RedisCluster出来后就可以很好帮我们解决这个问题;可以做到节点的自动发现、集群容错slave->master、人为操纵分片(slots)等等RedisCluster架构架构细节:(1)、所有的redis节点彼此互联(PING-PONG机制
孤天浪雨
·
2023-10-13 01:59
Redis
redis
集群
redis集群
redis-cluster
Windows下Redis3.0
集群搭建
redis版本:Redis-x64-3.0.504复制相同文件修改文件夹下redis.windows.conf文件配置(注意:主有密码,从必须有密码且跟主相同)修改端口:主库:端口号6379从库1:修改端口号为6380从库2:修改端口号为6381在从库中添加从属信息slaveof127.0.0.16379注意:有关slaveof的配置只是配置从服务器,主服务器不需要配置开启尝试:测试主从模式:新开
愚人钊呀
·
2023-10-13 01:23
Redis
redis
数据库
缓存
基于Docker搭建RabbitMQ集群(多台服务器)
前言:本文章这次主要是基于docker在多台服务器下搭建的普通集群环境,镜像集群以及
集群搭建
后通过nginx负载和keepalived实现HA会另出一篇文章进行详细介绍。
小前端而已
·
2023-10-12 22:50
java
java
后端
hadoop 3.x大数据
集群搭建
系列7-安装Hudi
文章目录编译环境准备一.下载并解压hudi二.maven的下载和配置2.1maven的下载和解压2.2添加环境变量到/etc/profile中2.3修改为阿里镜像三.编译hudi3.1修改pom文件3.2修改源码兼容hadoop33.3手动安装Kafka依赖3.4解决spark模块依赖冲突3.4.1修改hudi-spark-bundle的pom文件3.4.2修改hudi-utilities-bun
只是甲
·
2023-10-12 15:59
大数据和数据仓库
#
Hadoop大数据平台
hadoop
大数据
hdfs
K8S云计算系列-(2)
Kubernetes平台配置实战部署Kubernetes云计算平台,至少准备两台服务器,服务器CPU至少2C,内存4G,环境如下所示:KubernetesMaster节点:192.168.1.146Kubernetes
Minio
n
java_prinln
·
2023-10-12 11:16
kubernetes
云计算
容器
C#操作
minio
需要的动态dll依赖
c#操作
minio
时,需要dll动态依赖包
Minio
.dll,操作如下:首先登陆https://www.nuget.org/packages/
Minio
,查找合适的版本,然后下载nupkg文件下载完成后
csdnlebin
·
2023-10-12 08:14
c#
开发语言
consul
集群搭建
consul有agentclient和server两种模式,通过3台server模式进行集群下载安装准备3台服务器192.168.0.150/192.168.0.151/192.168.0.152如下命令启动3个节点#!/bin/bashnohup./consulagent-server-bootstrap-expect=3-data-dir=/data/consul-node=192.168.0
slicn
·
2023-10-12 08:14
java的amazonaws接口出现无法执行http请求:管道中断
java使用amazonaws的接口上传文件到
minio
出现以下异常:com.amazonaws.SdkClientException:UnabletoexecuteHTTPrequest:Brokenpipe
csdnlebin
·
2023-10-12 08:07
java
开发语言
Hadoop分布式
集群搭建
教程
目录前言环境准备一、创建虚拟机二、虚拟机网络配置三、克隆虚拟机四、Linux系统配置五、Hadoop的部署配置六、Hadoop集群的启动前言大数据课程需要搭建Hadoop分布式集群,在这里记录一下搭建过程环境准备搭建Haoop分布式集群所需环境:VMware:VMware-workstation-full-17.0.2-21581411CentOS:CentOS-7-x86_64-DVD-2003
韭菜盖饭
·
2023-10-12 05:12
大数据
分布式
hadoop
大数据
MySQL 主从
集群搭建
MySQL主从集群数据库主从概念、优点、用途主从数据库是什么意思呢,主是主库的意思,从是从库的意思。数据库主库对外提供读写的操作,从库对外提供读的操作。数据库为什么需要主从架构呢?高可用,实时灾备,用于故障切换。比如主库挂了,可以切从库。读写分离,提供查询服务,减少主库压力,提升性能备份数据,避免影响业务。主从复制介绍(1)MySQL数据库默认是支持主从复制的,不需要借助于其他的技术,我们只需要在
PleeCh
·
2023-10-12 04:15
linux
mysql
MySQL
集群搭建
(2)-主主从模式
https://segmentfault.com/a/1190000017050180让我们继续MySQL
集群搭建
之旅,大部分MySQL的集群都是采用主主从的经典模式,这也是部署高可用集群的基础。
yygr
·
2023-10-12 04:45
数据库
mysql
数据库基础:mysql主从
集群搭建
(4)查看一下主库的状态showmasterstatus\G;需要注意的是:如果没有上面第3步操作,执行showmasterstatus\G;会报错,如下图:file:表示同步的bin-log信息从哪个文件开始;position:表示从file的哪个位置开始;binlog_do_db:表示同步哪一个库在后面的slave配置中,这三个结果都需要使用到。4.Slave(6.85)节点配置配置从库(1)
Javaesandyou
·
2023-10-12 04:44
java
程序人生
mysql
mysql优化
架构师
RocketMQ学习笔记
RocketMQ学习笔记一、下载安装1.1官网下载官网地址:http://rocketmq.apache.org下载地址:https://rocketmq.apache.org/download/1.2
集群搭建
神雕大侠mu
·
2023-10-12 04:33
rocketMQ
rocketmq
学习
笔记
计数器按照,商品起订量和最小包装量,选择步数和校验
eg:商品起订量:1,最小包装量:20根据最小包装量选择步数:step="goodSkuList.miniPachingQuantity"根据起订量默认最小值:min="goodSkuList.
miniO
rderQuantity"goodSkuList
鱼 空
·
2023-10-12 04:23
vue.js
javascript
前端
Kafka在linux中的安装
Kafka集群部署概述环境准备JDK安装Docker环境安装Kafka
集群搭建
(ZK模式)zookeeper
集群搭建
zookeeper部署情况准备工作下载安装包解压安装包创建数据存放目录创建配置文件编辑配置文件配置
我就是我352
·
2023-10-12 02:10
消息中间件
kafka
linux
分布式
分布式文件服务器——Windows环境
MinIO
的三种部署模式
上节简单聊到
MinIO
:分布式文件存储服务——初识
MinIO
-CSDN博客,但没具化,本节开始展开在Windows环境下
MinIO
的三种部署模式:单机单节点、单机纠删码、集群模式。
流沙QS
·
2023-10-12 01:48
分布式存储
分布式
服务器
分布式文件服务器——初识
MinIO
开篇
MinIO
——开源优秀的分布式对象存储系统。适用于AI的高性能分布式云存储
MinIO
提供高性能、与S3兼容的对象存储系统,让你自己能够构建自己的私有云储存服务。
流沙QS
·
2023-10-12 01:14
分布式存储
分布式
服务器
zookeeper 详解及
集群搭建
一、Zookeeper安装包下载地址:https://download.csdn.net/download/weixin_45894220/87020758关于zookeeperZooKeeper是一个分布式的,开放源码的分布式应用程序协调服务,它包含一个简单的原语集,分布式应用程序可以基于它实现同步服务,配置维护和命名服务等。Zookeeper是hadoop的一个子项目,其发展历程无需赘述。在分
被生活耽误的旅行者
·
2023-10-11 23:43
linux
zookeeper
zookeeper
linux
分布式
Zookeeper
集群搭建
及使用
什么是zookeeperzookeeper是一个开源的分布式,基于观察者模式的分布式服务管理框架。使用场景统一配置管理、统一命名服务、统一集群管理、软负载均衡、服务器节点动态上下线等统一配置管理:将配置信息写入zookeeper的一个znode中,各个服务端监听这个znode,znode中内容经过修改,zookeeper将会通知各个服务器统一命名服务:对服务/应用进行统一命名,便于识别统一集群管理
优优优优呐
·
2023-10-11 23:13
java
分布式
zookeeper
java
Zookeeper入门详解、
集群搭建
以及源码解析(一)
1、Zookeeper入门1.1、概述Zookeeper是一个开源的分布式的,为分布式框架提供协调服务的Apache项目。1.2、特点Zookeeper:一个领导者(Leader),多个跟随者(Follower)组成的集群。集群中只要有半数以上节点存活,Zookeeper集群就能正常服务。所以Zookeeper适合安装奇数台服务器。全局数据一致:每个Server保存一份相同的数据副本,Client
后端技术那点事
·
2023-10-11 23:36
Zookeeper系列
大数据系列
zookeeper
分布式
集群部署
zookeeper集群
zookeeper
集群搭建
及Shell操作
zookeeper
集群搭建
及Shell操作一、搭建准备二、修改配置三、启动步骤四、客户端的基本操作五、常用的shell操作命令六、zookeeper的watch机制七、zookeeper集群leader
半吊子Kyle
·
2023-10-11 23:31
zookeeper
大数据
ZooKeeper 安装并实现
集群搭建
0.集群结构服务器IPhostname节点说明192.168.31.101master主节点192.168.31.102slave1从节点192.168.31.103slave2从节点下面的安装与配置操作需要在三台虚拟机上都执行一遍,这里的虚拟机上安装的是centOS7版本。1.安装JDKZooKeeper要求运行在JDK环境上,JDK安装教程可参考CentOS7.x安装JDK1.82.下载Zoo
Java知者
·
2023-10-11 23:29
centos
java-zookeeper
zookeeper
ZooKeeper集群环境搭建及客户端使用
ZooKeeper
集群搭建
(三台机器为例)上传并解压到/usr/local目录下:tar-zxvfzookeeper-3.4.13.tar.gz-C/usr/local重命名:mvzookeeper-3.4.13
Future_LL
·
2023-10-11 23:28
ZooKeeper
zookeeper节点数据类型介绍及
集群搭建
一、zookeeper介绍zookeeper官网:ApacheZooKeeperzookeeper是一个分布式协调框架,保证的是CP,即一致性和分区容错性;zookeeper是一个分布式文件存储系统,文件节点可以存储数据,监听子文件节点等可以实现数据的集群管理、统一命名服务、分布式配置管理、分布式消息队列、分布式锁、分布式协调等功能二、zookeeper安装和基本命令1、zookeeper安装下载
高如风
·
2023-10-11 23:27
zookeeper
zookeeper
linux
分布式
minio
部署,搭建
先下载:
MinIO
|Codeanddownloadstocreatehighperformanceobjectstorage启动命令:nohup.
夏微凉秋微暖
·
2023-10-11 20:21
java
eureka
postman
minio
使用golang-gin-
minio
jdk 进行文件下载(多种方法)
不废话上代码controller层:funcDownloadFileHandler(c*gin.Context){taskid:=c.Query("taskid")fmt.Println(taskid)id,err:=strconv.Atoi(taskid)iferr!=nil{}err,data:=logic.Downloadfile(id)iferr!=nil{}fmt.Println(len
MetaverseMan
·
2023-10-11 17:33
minio
golang
gin
开发语言
MinIO
的安装与使用
文章目录1.
MINIO
是什么?2.
MINIO
安装3.启动脚本4.打开
MINIO
页面5.MC命令6.
MINIO
备份脚本1.
MINIO
是什么?
薄荷街的兔比先生
·
2023-10-11 16:50
minio
spark集成hadoop
hadoop环境搭建请参考hadoop3.2.2
集群搭建
环境centos7、jdk1.8.0_311、scala-2.12.15、zookeeper-3.6.3、hadoop3.2.2、spark-3.2.1
0x12A2A7F
·
2023-10-11 16:07
spark
hadoop
big
data
redis6高可用
集群搭建
最近发现redis的内存空间不够实用了,发现是服务器太旧了导致乱七八糟的都占了不少存储和内存。而且服务器的性能也比较差。但是服务器还是蛮多的(5台左右),如果说换新的又可惜。所以找了一种redis集群的搭建方式来部署redis高可用集群环境。以下就是搭建的过程。给自己做一个总结和笔记。准备环境1.redis-6.0.52.三台服务器10.172.246.231、10.172.246.232、10.
_小石头啊
·
2023-10-11 15:36
基于rancher的K8s
集群搭建
(可实现CICD部署)
一、环境搭建序号软件版本链接账号密码1GitlabV14.6.1http://ip/root1234562Harborv2.5.3http://ip:port/harbor/projectsadmin1234563rancherv2.6.3https://ip:port/dashboard/homeadmin123456序号地址名称备注1192...182K8s-codegitlab安装位置219
ld丹业余分享
·
2023-10-11 14:51
kubernetes
rancher
docker
VIP01-RocketMQ整体理解与快速实战
RocketMQ3.1启动NameServer3.2启动Broker3.3命令行快速验证3.4关闭RocketMQ服务三、RocketMQ集群架构1、RocketMQ集群中的各个角色2、RocketMQ
集群搭建
liuhehe321
·
2023-10-11 14:04
rocketmq
rabbitmq
通过ECS中Nginx反向代理到阿里云OSS内网,浏览器直接显示图片和文本
公司以前是自建
MinIO
文件服务,后面决定全部上云使用阿里云oss。出于一下几个目的决定使用nginx反向代理到阿里云oss。
North-java
·
2023-10-11 11:51
服务器
nginx
阿里云
oss
反向代理
Zookeeper(二)实战-客户端使用
文章目录前言一、Zookeeper的Java客户端1.Zookeeper分布式配置中心使用2.Zookeeper的JavaAPI使用二、使用Curator客户端1.创建节点三、Zookeeper集群模式概念
集群搭建
前言本文主要讲解
剩下的远方
·
2023-10-11 10:48
Zookeeper
java
zookeeper
后端
RabbitMQ实战
queueDeclare方法queueBind方法exchangeBind方法发送消息basicPublish方法消费消息推模式拉模式RabbitMQ进阶持久化生产者确认消费端要点消息传输保障RabbitMQ运维
集群搭建
集群迁移集群监控跨越集群限制
陈晨_软件五千言
·
2023-10-11 10:17
技术学习
java
队列
rabbitmq
Kafka学习笔记(六)· 高级应用~集群~监控
独立模式-文件系统3、SpringBootKafka1、添加pom文件2、添加application.properties3、消息的发送4、消息的接收5、Kafka事务的支持九、集群管理1、集群使用场景2、
集群搭建
发抖吧小喵喵
·
2023-10-11 09:11
java
消息队列MQ
kafka
SpringBoot 对接
MinIO
实现文件上传下载删除
前言
MinIO
是一个开源的对象存储服务器,它可以存储大容量非结构化的数据,例如图片、音频、视频、日志文件、备份数据和容器/虚拟机镜像等。
凉了的凉茶
·
2023-10-11 04:49
spring
boot
后端
java
全新 centos 安装docker下的
minio
googlecloud创建虚拟机,并设置root和密码访问,配置dns1为8.8.8.8,接着重启机器shutdown-rnow连接机器34.96.247.202,用户名root,密码Javateam0安装docker先安装驱动sudoyuminstall-yyum-utils\device-mapper-persistent-data\lvm2再配置稳定的仓库sudoyum-config-man
loquito
·
2023-10-11 02:18
spring boot整合
Minio
MinIO
安装
MinIo
#先创建
minio
文件存放的位置mkdir-p/opt/docker/
minio
/data#启动并指定端口dockerrun\-p9000:9000\-p5001:5001\--
过去日记
·
2023-10-10 22:40
Spring
Boot整合
spring
boot
后端
hadoop安装
集群搭建
准备工作:1,创建一台虚拟机,安装javajdk这里选择1.82,给虚拟机并配置好静态IP地址一:Javajdk安装1.1检查安装环境,是否已安装其他版本的jdk,有的话卸载。#查看系统JDK进程[root@hadoop102~]#rpm-qa|grepjdkjava-1.7.0-openjdk-1.7.0.45-2.4.3.3.el6.x86_64java-1.6.0-openjdk-1.6.0
lingdu6633
·
2023-10-10 22:01
大数据
大数据
minio
安装与数据迁移
minio
安装与数据迁移一、
minio
安装1.下载二进制文件
minio
2.将
minio
上传到服务器并授予可执行权限3.创建用户4.启动
minio
5.查看
minio
启动状态6.访问并创建桶二、数据迁移1.
CxyGxm
·
2023-10-10 20:07
linux
服务器
bash
linux安装和简单使用
minio
client | mc命令
的系统执行下载命令(个人喜欢将安装资源下载至/opt/local/目录下)wgethttps://dl.min.io/client/mc/release/linux-amd64/mc-P/opt/local/
minio
Wenger Lee
·
2023-10-10 20:07
Linux
minio
linux
运维
服务器
minio
文件服务器设置密码,Linux搭建
minio
集群
方式一:4台服务器(或虚拟机)搭建
minio
集群1.1、准备4台服务器(或虚拟机),并在对应机器上面创建/data{num}文件夹192.168.31.128/data0192.168.31.129/data1192.168.31.130
性主神
·
2023-10-10 20:35
minio文件服务器设置密码
使用
minio
与腾讯cos文件上传下载
废话不多多,直接上代码第一步、引入相应包com.qcloudcos_api5.6.61io.
minio
minio
8.2.1第二步、写cos与
minio
相关配置类/***@author重庆阿汤哥*@Description
重庆阿汤哥
·
2023-10-10 20:04
JAVA
docker
java
spring
boot
上一页
25
26
27
28
29
30
31
32
下一页
按字母分类:
A
B
C
D
E
F
G
H
I
J
K
L
M
N
O
P
Q
R
S
T
U
V
W
X
Y
Z
其他