E-COM-NET
首页
在线工具
Layui镜像站
SUI文档
联系我们
推荐频道
Java
PHP
C++
C
C#
Python
Ruby
go语言
Scala
Servlet
Vue
MySQL
NoSQL
Redis
CSS
Oracle
SQL Server
DB2
HBase
Http
HTML5
Spring
Ajax
Jquery
JavaScript
Json
XML
NodeJs
mybatis
Hibernate
算法
设计模式
shell
数据结构
大数据
JS
消息中间件
正则表达式
Tomcat
SQL
Nginx
Shiro
Maven
Linux
minio集群搭建
对象存储遍历文件url漏洞处理
当你用http://
minio
_out_url/bucket_path/访问时,会得到一个超大的XML,原来
minio
的桶有一个listObjects的功能,默认最多1000条记录,这就意味着,如果你打开永久下载链接模式
日月星城2
·
2024-02-05 18:56
运维知识
java
对象存储高可用部署
#
Minio
分布式docker部署##一.前置条件-服务器已安装docker和docker-compose(略)-服务器能访问外网或docker镜像已预拉取好(略)-服务器时间差不能超过15分钟,可用NTP
日月星城2
·
2024-02-05 18:56
运维知识
nginx
服务器
linux
Kafka2.13
集群搭建
并配置hosts172.17.0.2 node0172.17.0.3 node1172.17.0.4 node2在其中一台服务器中搭建Zookeeper(单机或集群都可以)Zookeeper
集群搭建
参考链接下载
咩哥无敌
·
2024-02-05 17:57
kafka
kafka
zookeeper
分布式
6.Linux虚拟机下的Hadoop
集群搭建
之完全分布式配置
Hadoop及相关组件搭建指导WeChat:h19396218469hadoop-3.1.3jdk-8u162-linux-x64本案例软件包:链接:https://pan.baidu.com/s/1ighxbTNAWqobGpsX0qkD8w提取码:lkjh(若链接失效在下面评论,我会及时更新)一、配置Hadoop集群主节点1.进入目标文件夹。cd/usr/local/hadoop/etc/ha
学习BigData
·
2024-02-05 13:01
关于Hadoop的学习笔记
hadoop
分布式
linux
4.Linux虚拟机下的Hadoop
集群搭建
之Xshell及Xftp的使用和SSH服务配置
Hadoop及相关组件搭建指导WeChat:h19396218469本案例软件包:链接:https://pan.baidu.com/s/1ighxbTNAWqobGpsX0qkD8w提取码:lkjh(若链接失效在下面评论,我会及时更新)一、Xshell和Xftp的使用在这里我们首先要了解两个软件,一个是Xshell另一个是Xftp。1.Xshell是一个强大的安全终端模拟软件,它支持SSH1,SS
学习BigData
·
2024-02-05 13:31
关于Hadoop的学习笔记
linux
hadoop
ssh
微服务入门篇:Nacos注册中心(Nacos安装,快速入门,多级存储,负载均衡,环境隔离,配置管理,热更新,
集群搭建
,nginx反向代理)
目录1.Nacos安装1.官网下载2.解压到本地3.启动nacos2.Nacos快速入门1.在父工程中导入nacos依赖2.给子项目添加客户端依赖3.修改对应服务的配置文件4.启动服务,查看nacos发现情况3.Nacos服务多级存储模型4.NacosRule负载均衡5.服务实例的权重设置6.环境隔离(namespace)7.Nacos和Eureka的对比1.临时实例和非临时实例2.Nacos与e
JungleiRim
·
2024-02-05 10:39
微服务学习
微服务
负载均衡
架构
kafka高可用
集群搭建
kafka高可用
集群搭建
说明这篇博文主要是为了后面的elk做准备,我们这里搭建一个kafka集群,使用2个节点,还是前面的节点。主要是为了后面做数据缓冲。
憧憬blog
·
2024-02-05 09:40
分布式
kafka
java
zookeeper
linux
docker 安装
minio
MinIO
是一款高性能、分布式的对象存储系统.它是一款软件产品,可以100%的运行在标准硬件。即X86等低成本机器也能够很好的运行
MinIO
。
会飞的大鱼吃小鱼
·
2024-02-05 08:29
docker
docker
容器
运维
Nacos 集群
Nacos
集群搭建
1.集群结构图官方给出的Nacos集群图:其中包含3个nacos节点,然后一个负载均衡器代理3个Nacos。这里负载均衡器可以使用nginx。
漠丶小翁
·
2024-02-05 04:12
Hadoop
集群搭建
以下是一个基本的Hadoop
集群搭建
流程,假设你已经有了一些基础的Linux操作系统知识,并且准备在多台机器上搭建一个简单的Hadoop集群。
终将老去的穷苦程序员
·
2024-02-04 19:53
hadoop
飞腾Ubantu22.04.3安装OpenNebula测试
2.官网github地址下载解压存放在服务器上:https://github.com/OpenNebula/
minio
ne/blob/master文件目录:3.安装依赖包sudoapt-yinstallg
奋斗的小菜菜
·
2024-02-04 14:11
运维
linux
运维
linux
SpringBoot 整合
Minio
上传文件
Minio
上传文件如果不使用云服务的话,需要本地搭建,一般选择FastDFS但是FastDFS安装比较复杂,今天了解一款安装使用更简单的存储系统
MinIO
MinIO
是一款高性能、分布式的对象存储系统.它是一款软件产品
Java码农
·
2024-02-04 12:53
大数据入门--zookeeper(一)--
集群搭建
与常用指令
Zookeeper单机搭建下载官方安装包#解压tar-zxvfzookeeper-3.4.5.tar.gz-C/opt/module/#配置zoo.conf,只需要将conf/zoo_sample.conf重命名为zoo.conf即可mvconf/zoo_sample.cfgconf/zoo.cfg#启动bin/zkServer.shstart#查询状态bin/zkServer.shstatus#
许中宝
·
2024-02-04 11:40
大数据
zookeeper
大数据
zookeeper
Hbase2.1
集群搭建
>Hbase在大数据的体系中扮演着DB角色,不得不说是重要的一员,在上一篇,大猪已经给大家演示了[Hadoop3.2
集群搭建
](https://www.jianshu.com/p/3182aaff918d
kikiki4
·
2024-02-04 11:08
nacos
集群搭建
Nacos
集群搭建
1.集群结构图官方给出的Nacos集群图:其中包含3个nacos节点,然后一个负载均衡器代理3个Nacos。这里负载均衡器可以使用nginx。
程序媛9688
·
2024-02-04 07:04
oracle
数据库
RabbitMQ
集群搭建
1.规划节点192.168.200.4---rabbitmq1---RabbitMQ磁盘节点192.168.200.5—rabbitmq2—RabbitMQ内存节点192.168.200.6—rabbitmq3—RabbitMQ内存节点使用OpenStack平台创建三台云主机进行实验,云主机镜像使用提供的CentOS_7.5_x86_64_XD.qcow2镜像,flavor使用1核/2G内存/20
曹博Blog
·
2024-02-04 05:54
Linux
rabbitmq
ruby
centos
MinIO
很强-让我放弃FastDFS拥抱
MinIO
的8个理由
直到我发现了
MinIO
,我决定放弃FastDFS。关于
MinIO
的使用方法,我就不说了。大家去看
MinIO
官网地址:docs.min.io/cn/,非常详细。
字母哥课堂
·
2024-02-03 16:53
Fabric CA 1.4 官方文档中文版
链接:FabricCA中文文档目录概述FabricCA概述快速上手安装前提条件安装软件使用FabricCA命令行配置软件FabricCA服务器初始化服务器启动服务器配置数据库配置LDAP搭建
集群搭建
多个
编程狂魔
·
2024-02-03 15:23
kubernetes
集群搭建
( kubeadm 方式 )
1、前置知识点目前生产部署kubernetes集群主要有两种方式,kubeadm方式和二进制方式,其中kubeadm方式比较方便快捷,kubeadm是一个K8s部署工具,提供kubeadminit和kubeadmjoin,用于快速部署kubernetes集群。官方地址:https://kubernetes.io/docs/reference/setup-tools/kubeadm/kubeadm/
無法複制
·
2024-02-03 08:41
kubernetes
Kafka
集群搭建
Kafka集群是把状态保存在Zookeeper中的,首先要搭建Zookeeper集群。本期是分享Kafka,若想看zookeeper搭建请看:zookeeper搭建(单机模式和集群模式)-CSDN博客1.下载压缩包链接:https://pan.baidu.com/s/1zxJRd13rgHfJexP-Jbl36g提取码:lcmi当然,您也可以从官网下载2.解压tar-zxvf/opt/softwa
莫噶
·
2024-02-02 14:30
搭建
kafka
分布式
Kafka
集群搭建
1、前提条件1、部署Kafka
集群搭建
需要服务器至少3台,奇数台2、Kafka的安装需要java环境,jdk1.83、Kafka安装包版本:kafka_2.11-0.10.0.1.tar.gz4、假设3
那小子、真烦
·
2024-02-02 14:30
KAFKA
kafka
分布式
zookeeper
kafka
集群搭建
本文将记录使用kafka镜像,分别在两种场景下搭建3节点集群:1.在一台机器上使用容器方式安装kafka集群;2.在三台机器上使用容器方式安装kafka集群。此次使用的是wurstmeister的,下载量是比较大的。使用下面命令下载:dockerpullwurstmeister/kafka:2.13-2.8.1先介绍第一种方式:1.在宿主机分别建立3个kafka容器ENV参数文件,改文件配置容器启
topswim
·
2024-02-02 14:30
kafka
zookeeper
分布式
第96讲:MySQL高可用集群MHA的核心概念以及
集群搭建
文章目录1.MHA高可用数据库集群的核心概念1.1.主从复制架构的演变1.2.MHA简介以及架构1.3.MHA的软件结构1.4.MHAManager组件的启动过程1.5.MHA高可用集群的原理2.搭建MHA高可用数据库集群2.1.环境架构简介2.2.搭建基于GTID的主从复制集群2.2.1.在三台服务器中分别搭建MySQL实例2.2.2.配置基于GTID的主从复制集群2.2.3.查看集群各节点的状
Jiangxl~
·
2024-02-02 13:43
mysql
数据库
云计算
运维
数据结构
redis 6.x
集群搭建
redis6
集群搭建
安装文件下载redis-6.2.6.tar.gz编译tar-zxvfredis-6.2.6.tar.gzcdredis-6.2.6/makeMALLOC=libcmakeinstallPREFIX
tmaczt
·
2024-02-02 12:55
linux
redis
bootstrap
数据库
详细分析Java中的
Minio
类各API(附win配置安装)(全)
目录前言1.Window配置2.存储桶的基本方法3.存储对象的基本方法3.1上传对象3.1.1putObject3.1.2uploadObject3.2操作对象3.2.1getPresignedObjectUrl3.2.2getPresignedPostFormData3.2.3listObjects3.2.4copyObject3.2.5downloadObject3.2.6removeObje
码农研究僧
·
2024-02-02 11:56
java
java
Oss
Minio
Logstash 7.7.1版本安装&系统梳理
前言上一篇文章介绍了《ElasticSearch7.7.1
集群搭建
&Kibana安装》,今天说一下Logstash的安卓和配置;Logstash是一个开源的数据收集引擎,具有实时管道功能。
卢卡上学
·
2024-02-02 11:28
灯塔架构知识体系
日志采集
logstash
监控系统
业务监控
中间件
关于Redis Cluster集群运维与核心原理
关于RedisCluster集群运维与核心原理1、Redis集群方案比较哨兵模式高可用集群模式2、Redis高可用
集群搭建
3、Java操作redis集群1、Redis客户端Jedis操作2、集群的SpringBoot
秋天的一亩三分地
·
2024-02-02 10:00
redis
运维
分布式
事件驱动架构:使用Flask实现
MinIO
事件通知Webhooks
MinIO
的事件通知可能一开始看起来并不激动人心,但一旦掌握了它们的力量,它们就能照亮您存储桶内的动态。事件通知是一个全面、高效的对象存储系统中的关键组件。
MinIO官方账号
·
2024-02-02 08:35
MinIO
docker
k8s
硬件架构
flask
python
redis
集群搭建
说明:创建6个redis节点,这里为了方便演示,直接使用了docker容器。1.创建6个node节点创建6个文件目录mkdir/wjmao/redis-17001/mkdir/wjmao/redis-17002/mkdir/wjmao/redis-17003/mkdir/wjmao/redis-17004/mkdir/wjmao/redis-17005/mkdir/wjmao/redis-1700
星迹m
·
2024-02-02 05:38
rabbitmq
集群搭建
方法
RabbitMQ
集群搭建
方法这里展示的是多机集群的部署,如果机器受限,可以选择单机集群部署,详细可以参考《RabbitMQ单机多实例配置》。
SkTj
·
2024-02-02 01:31
ZK(ZooKeeper)分布式锁实现
不知道如何搭建的,可以看我之前ZooKeeper
集群搭建
:Zookeeper集群部署的那
牧小农
·
2024-02-02 01:52
Docker多节点部署
Minio
分布式文件系统并测试
`env/
minio
.env`3.`docker-compose-
minio
.yml`三、测试四、Java测试1.引入依赖2.增删改一、前提准备准备如下文件夹和文件.
木子dn
·
2024-02-02 01:07
Server架构
#
分布式文件系统
docker
容器
hdfs
FastApi中UploadFile如何支持多次读取
错误代码如下asyncdefcreate_task(db:Session,model_uid:str,user_name:str,task_type:str,test_file:UploadFile):
MinIO
Accessor.put_object
sunshine2853
·
2024-02-01 21:56
fastapi
UploadFile
Zookeeper单机版/伪
集群搭建
在同一台机器(即伪集群)上,启动三个zookeeper,三个分别使用不同的配置文件Zookeeper的单机版安装从官网上下载zookeeper的安装包1准备:安装之前请自行安装jdk(如java8)2使用wget命令或者xshelleditplus工具远程上传tar包到Linux(1)使用wget命令下载zookeeper安装包到linux环境下命令:wgethttp://archive.apac
我不是吴彦祖i
·
2024-02-01 20:43
linux
zookeeper
linux
apache
jdk1.8
zookeeper搭建(单机模式和集群模式)
目录单机模式:
集群搭建
:单机模式:1.新建data和logs目录(data目录用来存放数据库快照,logs目录用来存放日志文件)[root@masterdev]#mkdir-p/home/apps/zookeeper
莫噶
·
2024-02-01 20:11
搭建
zookeeper
linux
分布式
详解SpringCloud微服务技术栈:深入ElasticSearch(4)——ES集群
)——数据同步(酒店管理项目)订阅专栏:微服务技术全家桶希望文章对你们有所帮助ElasticSearch本身就是分布式的,在这里将要讨论如何用3个docker容器来模拟实现ElasticSearch的
集群搭建
布布要成为最负责的男人
·
2024-02-01 03:42
微服务技术全家桶
spring
cloud
微服务
elasticsearch
集群
分布式
java
SpringBoot中集成
Minio
高性能分布式存储文件服务入门
Minio
Minio
是基于Go语言编写的对象存储服务,适合于存储大容量非结构化的数据,例如图片、音频、视频、日志文件、备份数据和容器/虚拟机镜像等,而一个对象文件可以是任意大小,从几kb到最大5T不等。
霸道流氓气质
·
2024-01-31 16:17
SpringBoot
spring
boot
分布式
后端
zookeeper curator 伪集群 - 安装 -配置 - 秒懂
zookeeper的伪装
集群搭建
疯狂创客圈Java分布式聊天室【亿级流量】实战系列之-22【博客园总入口】文章目录zookeeper的伪装
集群搭建
写在前面1.1.
40岁资深老架构师尼恩
·
2024-01-31 09:19
java
高可用pxc+rocketmq+es+redis+
minio
+keepalive+haproxy 实操
文章很长,建议收藏起来慢慢读!总目录博客园版为您奉上珍贵的学习资源:免费赠送:《尼恩Java面试宝典》持续更新+史上最全+面试必备2000页+面试必备+大厂必备+涨薪必备免费赠送经典图书:《Java高并发核心编程(卷1)》面试必备+大厂必备+涨薪必备加尼恩免费领免费赠送经典图书:《Java高并发核心编程(卷2)》面试必备+大厂必备+涨薪必备加尼恩免费领免费赠送经典图书:《NettyZookeepe
40岁资深老架构师尼恩
·
2024-01-31 09:01
java
elasticsearch
redis
java
SpringBoot集成
Minio
入门教程
一.
minio
介绍
MinIO
是一个基于ApacheLicensev2.0开源协议的对象存储服务。
AskHarries
·
2024-01-31 08:32
spring
boot
后端
java
spring
【大数据入门核心技术-Tez】(三)Tez与Hive整合
一、准备工作1、Hadoop和Hive安装【大数据入门核心技术-Hadoop】(五)Hadoop3.2.1非高可用
集群搭建
【大数据入门核心技术-Hadoop】(六)Hadoop3.2.1高可用
集群搭建
【
forest_long
·
2024-01-31 08:06
大数据技术入门到21天通关
hive
大数据
hadoop
hbase
mapreduce
构建高效可靠的消息队列系统:设计与实现
目录一、引言二、设计目标2.1、高可用性1.
集群搭建
1.1DockerCompose配置示例2.容错和恢复2.1异常检测与自动故障迁移2.2SpringBoot代码示例3.心跳检测4.优雅关闭2.2、持久性
喔的 喔的嘛呀
·
2024-01-31 07:31
数据库
minio
配置https【docker启动】
生成私钥opensslgenpkey-algorithmRSA-outserver.key生成CSRopensslreq-new-keyserver.key-outserver.csr生成证书opensslx509-req-inserver.csr-signkeyserver.key-outserver.crt修改将servier.key和server.crt放在某个文件夹中,后面会挂在到mini
HardCorePlayer
·
2024-01-31 06:50
云原生
Zookeeper实现分布式队列
Zookeeper不适合大数据量存储,官方并不推荐作为队列使用,但由于实现简单,
集群搭建
较为便利,因此在一些吞吐量不高的小型系统中
山鸟与鱼!
·
2024-01-31 05:33
分布式中间件
分布式
zookeeper
后端
java
spring
boot
Hbase2.1
集群搭建
>Hbase在大数据的体系中扮演着DB角色,不得不说是重要的一员,在上一篇,大猪已经给大家演示了[Hadoop3.2
集群搭建
](https://www.jianshu.com/p/3182aaff918d
kikiki5
·
2024-01-31 05:41
mongodb java spring_MongoDB和Java(4):Spring Data整合MongoDB(XML配置)
最近花了一些时间学习了下MongoDB数据库,感觉还是比较全面系统的,涉及了软件安装、客户端操作、安全认证、副本集和分布式
集群搭建
,以及使用SpringData连接MongoDB进行数据操作,收获很大。
務酒者
·
2024-01-31 02:03
mongodb
java
spring
三、ElasticSearch
集群搭建
实战
本篇ES
集群搭建
主要是在LinuxVM上,未使用Docker方式,ES版本为7.10,选择7.10版本原因可以看往期文章介绍。
南天一梦N
·
2024-01-31 02:29
中间件技术
elasticsearch
java
spring
搜索引擎
全文检索
ElasticSearch 7.4集群部署 启用x-pack验证 Kibana7.4用户管理
一.es7.4
集群搭建
1.1下载es以及修改相应配置1.1.1节点规划内网ip节点192.168.18.126node-1192.168.18.125node-2192.168.18.133node-31.1.2
Cocktail_py
·
2024-01-31 02:28
Elasticsearch
elasticsearch
四、ES集群安全策略设置 X-pack
本文主要是结合ES
集群搭建
时使用,并且适用于ES7.x以上版本背景及安全策略方案对比ES7.x以下版本默认几乎没有任何安全策略,如果集群IP、端口被暴露,在可访问的情况下任何用户都可以对索引进行管理以及数据的增删改查等
南天一梦N
·
2024-01-31 02:57
中间件技术
elasticsearch
jenkins
大数据
从公有云对象存储迁移到回私有化
MinIO
需要了解的所有信息
我们上一篇文章《如何从AWSS3遣返到
MinIO
》的反响非常出色-我们已经接到了数十个企业的电话,要求我们提供遣返建议。
MinIO官方账号
·
2024-01-30 22:18
MinIO
docker
数据湖
k8s
python
上一页
1
2
3
4
5
6
7
8
下一页
按字母分类:
A
B
C
D
E
F
G
H
I
J
K
L
M
N
O
P
Q
R
S
T
U
V
W
X
Y
Z
其他