E-COM-NET
首页
在线工具
Layui镜像站
SUI文档
联系我们
推荐频道
Java
PHP
C++
C
C#
Python
Ruby
go语言
Scala
Servlet
Vue
MySQL
NoSQL
Redis
CSS
Oracle
SQL Server
DB2
HBase
Http
HTML5
Spring
Ajax
Jquery
JavaScript
Json
XML
NodeJs
mybatis
Hibernate
算法
设计模式
shell
数据结构
大数据
JS
消息中间件
正则表达式
Tomcat
SQL
Nginx
Shiro
Maven
Linux
minio集群部署
Flink笔记02——单词计数wc和
集群部署
前言在上一篇文章Flink笔记01——入门篇讲述了Flink的一些基础知识后,这篇博客,我们结合日常开发,主要介绍一些Flink的基础编程和框架搭建。第一个Flink代码相信学过MRSpark的同学编写的第一个程序都是单词计数wordcount,同理这里南国也是以单词计数作为开始。开发环境(由于之前的博客很多时候忘记描述这个步骤,作为该系列的基础篇,这次尽可能的在每个地方描述细致。)开发IDE采用
提灯寻梦在南国
·
2023-10-14 00:54
大数据
Flink
流计算单词计数
Standalone
Flink
on
Yarn
HA
Slot和paralism
Flink on k8s容器日志生成原理及与Yarn部署时的日志生成模式对比
在使用过程中针对日志模块发现,在k8s的容器中,flink的系统日志只有jobmanager.log/taskmanager.log两个,而当时在使用Yarn
集群部署
时,flink的日志会有多个,比如:
JermeryBesian
·
2023-10-14 00:38
flink
kubernetes
大数据
Linux学习笔记——HBase集群安装部署
5.11、大数据NoSQL数据库HBase
集群部署
5.11.1、简介HBase是一种分布式、可扩展、支持海量数据存储的NoSQL数据库。
kxttmx
·
2023-10-13 23:20
hbase
linux
学习
集群化
hadoop
Hbase
集群部署
HBASE介绍–HBase–HadoopDatabase,是一个高可靠性、高性能、面向列、可伸缩、实时读写的分布式数据库–利用HadoopHDFS作为其文件存储系统,利用HadoopMapReduce来处理HBase中的海量数据,利用Zookeeper作为其分布式协同服务–主要用来存储非结构化和半结构化的松散数据(列存NoSQL数据库)Hbase的架构图如下所示1、Client包含访问HBase的
Best_Liu~
·
2023-10-13 23:49
hbase
hadoop
大数据
大数据NoSQL数据库HBase
集群部署
目录1.简介2.安装1.HBase依赖Zookeeper、JDK、Hadoop(HDFS),请确保已经完成前面2.【node1执行】下载HBase安装包3.【node1执行】,修改配置文件,修改conf/hbase-env.sh文件4.【node1执行】,修改配置文件,修改conf/hbase-site.xml文件5.【node1执行】,修改配置文件,修改conf/regionservers文件6
时光の尘
·
2023-10-13 23:17
Linux学习
大数据
nosql
hbase
java
分布式
服务器
Flink-安装部署及部署模式介绍
2.StandaloneCluster
集群部署
Flink自带了集群模式Standalone,这个模式对软件有些要求:1.安装Java1.8或者更高版本2.集群各个节点需要s
安然烟火
·
2023-10-13 23:12
flink
flink
商城免费搭建之java商城 开源java电子商务Spring Cloud+Spring Boot+mybatis+MQ+VR全景+b2b2c
SpringBoot、Mybatis、Redis3.前端框架VUE、Uniapp、Bootstrap/H5/CSS3、IOS、Android、小程序4.核心思想分布式、微服务、云架构、模块化、原子化、持续集成、
集群部署
m0_67544708
·
2023-10-13 21:27
java
开源
spring
cloud
商城免费搭建
javaweb系统架构演进(一、单体架构)
4.为提高并发性能,可进行应用集群和数据库
集群部署
。架构优点:架构简单,初学者或小型项目
小马哥爱编程
·
2023-10-13 17:58
centos7 Zookeeper
集群部署
ZooKeeper是一个分布式的,开放源码的分布式应用程序协调服务,是Google的Chubby一个开源的实现,是Hadoop和Hbase的重要组件。它是一个为分布式应用提供一致性服务的软件,提供的功能包括:配置维护、域名服务、分布式同步、组服务等。初级时可以理解为:动态配置中心节点备注Node1server.1=192.168.0.47:2888:3888Node2server.1=192.16
oToyix
·
2023-10-13 15:25
K8S
Devops
zookeeper
zookeeper集群
centos7
CentOS7.6上进行zookeeper3.4.14
集群部署
超详细图文版
CentOS7.6上进行zookeeper3.4.14
集群部署
一、前言ZooKeeper是一个开源的分布式应用程序协调服务,是Google的Chubby一个开源的实现。
chutianly
·
2023-10-13 15:54
运维
zookeeper
分布式
centos
zk
【
minio
学习笔记】
minio
学习笔记一、
Minio
相关介绍1、相关网址2、
Minio
介绍3、
Minio
基础概念4、纠删码EC(ErasureCode)5、存储方案二、环境搭建1、单机部署介绍1.1概念1.22单机部署(无纠删码模式
sxsl_lwp
·
2023-10-13 13:57
技术类
学习
java
开发语言
Minio
分布式文件系统学习笔记
docker单机安装服务端dockerrun-p9000:9000-p50000:50000--name
minio
\-d--restart=always\-e"
MINIO
_ROOT_USER=admin
Gene兵
·
2023-10-13 13:25
java
学习笔记
minio
MinIO
安装笔记
简介
MinIO
是一款高性能、分布式的对象存储系统。它是一款软件产品,可以100%的运行在标准硬件。即X86等低成本机器也能够很好的运行
MinIO
。
不会飞的小龙人
·
2023-10-13 13:22
开源项目
linux
对象存储
minio
文件服务
Spring Boot +
minio
实现高性能存储服务
什么是
minio
引用官网:
MinIO
是根据GNUAffero通用公共许可证v3.0发布的高性能对象存储。它与AmazonS3云存储服务兼容。
猿猿满满
·
2023-10-13 13:49
java
服务器
数据库
【备忘录】JAVASDK连接
MinIO
,附完整代码
MinIO
-JavaSDK参考资料:官方文档-快速启动官方文档-SDK指南官方JavaDoc第三方中文介绍一、快速开始1.1依赖引入io.
minio
minio
8.0.3commons-iocommons-io2.21.2
Xcong_Zhu
·
2023-10-13 13:49
备忘录
java
minIO
【学习笔记】
minIO
分布式文件服务系统
MinIO
一、概述1.1
minIO
是什么?
MinIO
是专门为海量数据存储、人工智能、大数据分析而设计的对象存储系统。
Xcong_Zhu
·
2023-10-13 13:14
学习笔记
学习
笔记
分布式
MinIO
ELK 日志分析系统
文章目录前言一、ELK日志分析系统简介二、ELK优势三、完整日志系统基本特征四、ELK的工作原理五、部署ELK日志分析系统ELKElasticsearch
集群部署
ELKLogstash部署ELKKiabana
zzzniubility
·
2023-10-13 09:36
日志分析
93_es生产
集群部署
之硬件配置、jvm以及集群规划建议
93_es生产
集群部署
之硬件配置、jvm以及集群规划建议我们之前一直是在windows环境下去启动一个单节点的es进程,然后去学习和练习各种es的高阶的搜索技术,聚合技术主要针对的是es的开发,你可以认为是
小山居
·
2023-10-13 08:07
SXSSFWorkbook-
MinIo
-大数据-流式导出
文章目录前言业务现状架构思路技术细节生成摘要IDSXSSFWorkbook
MinIo
mybatis流查询PipedInputStream保存到
minio
总结前言由于业务涉及到数据比较大,用户对导出功能使用频繁
ShayneLee8
·
2023-10-13 07:02
java
大数据
minio
SXSSFWorkbook
管道流
开源对象存储工具
Minio
的使用(Java)
本文章仅作为个人笔记官方网站/官方文档/个人demo
minio
部署docker(对外公开9000端口,实例名为
minio
,挂载本地/data目录)dockerrun--name
minio
-v/data:
草丛里的黄盖
·
2023-10-13 05:59
java开源商城免费搭建 VR全景商城 saas商城 b2b2c商城 o2o商城 积分商城 秒杀商城 拼团商城 分销商城 短视频商城
SpringBoot、Mybatis、Redis3.前端框架VUE、Uniapp、Bootstrap/H5/CSS3、IOS、Android、小程序4.核心思想分布式、微服务、云架构、模块化、原子化、持续集成、
集群部署
Xiaohong0716
·
2023-10-13 05:41
spring
cloud
spring
boot
java
商城免费搭建
【
minio
】How to secure access to
MinIO
server with TLS?
MinIO
快速入门指南https://docs.min.io/cn/
minio
-quickstart-guideEnterprise-GradeCloudStoragewithNGINXPlusand
Minio
https
Bogon
·
2023-10-13 01:29
WSL+vscode配置
minio
b环境
WSLWindowsSubsystemforLinux入门:安装+配置图形界面+中文环境+vscode·wu-kan2.获取源码找个位置GitBash然后拉取代码gitclonehttps://github.com/oceanbase/
minio
b.git3
liangchaaaaa
·
2023-10-13 01:53
OceanBase
miniob
vscode
ide
编辑器
ceph分布式存储
集群部署
实验:1.ceph的组件和功能2.ceph的数据读写流程3.使用ceph-deploy安装一个最少三个节点的ceph集群推荐3个或以上的磁盘作为专用osd一、ceph的组件和功能1.什么是cephCeph是一种为优秀的性能、可靠性和可扩展性而设计的统一的、分布式的存储系统“统一的”:意味着Ceph可以一套存储系统同时提供对象存储、块存储和文件系统存储三种功能,以便在满足不同应用需求的前提下简化部署
wangwc124
·
2023-10-13 01:45
运维
分布式
H2
集群部署
1、H2
集群部署
H2官网下载最新的安装文件:http://www.h2database.com/html/main.html解压后,目录如下:bin目录下有启动脚本和jar包。
sanshizhang
·
2023-10-12 19:41
研发管理
数据库
Ceph相关部署应用(博客)
.分布式存储(软件定义的存储SDS)二.Ceph简介1.Ceph2.Ceph优势3.Ceph架构4.Ceph核心组件5.OSD存储后端6.Ceph数据的存储过程7.Ceph版本发行生命周期8.Ceph
集群部署
三
啊呜呜么么叽
·
2023-10-12 18:46
ceph
ClickHouse 分片单副本
集群部署
环境每天机器已安装单机版的ClickHouse,官方推荐使用rpm安装,也可以安装好一台后复制文件过去CentOSLinuxrelease7.8.2003(Core)ClickHouse20.11.6.6防火墙、selinux已关闭分片IP,仅单副本分片01192.168.66.101:9000分片02192.168.66.102:9000分片03192.168.66.103:9000限制当前配置
醉红尘丶
·
2023-10-12 15:21
docker 部署 xxl-job & SpringBoot 整合 xxl-job 执行任务
支持可视化和动态的操作,监控调度结果和日志,支持执行器Failover执行模块:负责接收调度请求并执行任务逻辑,支持多种方式定义执行器高性能:基于Quartz和Netty实现高效的调度和通信高可用:支持
集群部署
凉了的凉茶
·
2023-10-12 13:22
docker
spring
boot
容器
K8S云计算系列-(2)
Kubernetes平台配置实战部署Kubernetes云计算平台,至少准备两台服务器,服务器CPU至少2C,内存4G,环境如下所示:KubernetesMaster节点:192.168.1.146Kubernetes
Minio
n
java_prinln
·
2023-10-12 11:16
kubernetes
云计算
容器
【Redis】之高并发场景下主从同步数据一致性问题探究
高并发极限场景问题分布式锁失效,高并发极限场景下主从同步延时主节点崩溃等原因导致的数据不一致背景知识:redis主从复制为异步同步过程如图:rediscluster
集群部署
,多主多从架构(基于哈希槽的分配策略
GoSir1
·
2023-10-12 10:51
Redis
redis
尚硅谷Flink(一)
目录☄️前置工作fenfa脚本概述☄️Flink是什么☄️特点(多nb)☄️应用场景(不用看)☄️分层API配环境☄️wordcount☄️WcDemoUnboundStreaming
集群部署
☄️集群角色
Int mian[]
·
2023-10-12 08:57
flink
大数据
linux
C#操作
minio
需要的动态dll依赖
c#操作
minio
时,需要dll动态依赖包
Minio
.dll,操作如下:首先登陆https://www.nuget.org/packages/
Minio
,查找合适的版本,然后下载nupkg文件下载完成后
csdnlebin
·
2023-10-12 08:14
c#
开发语言
java的amazonaws接口出现无法执行http请求:管道中断
java使用amazonaws的接口上传文件到
minio
出现以下异常:com.amazonaws.SdkClientException:UnabletoexecuteHTTPrequest:Brokenpipe
csdnlebin
·
2023-10-12 08:07
java
开发语言
SpringCloud Alibaba环境集成之nacos
下载并启动服务端客户端引入spring-cloud-starter-alibaba的jar包客户端properties或yml加入相关配置客户端加上相应的注解开启功能服务端增加相应配置数据持久化,服务端
集群部署
study_alltheway
·
2023-10-12 05:40
Spring
spring
cloud
java
微服务
nacos
计数器按照,商品起订量和最小包装量,选择步数和校验
eg:商品起订量:1,最小包装量:20根据最小包装量选择步数:step="goodSkuList.miniPachingQuantity"根据起订量默认最小值:min="goodSkuList.
miniO
rderQuantity"goodSkuList
鱼 空
·
2023-10-12 04:23
vue.js
javascript
前端
Kafka在linux中的安装
Kafka
集群部署
概述环境准备JDK安装Docker环境安装Kafka集群搭建(ZK模式)zookeeper集群搭建zookeeper部署情况准备工作下载安装包解压安装包创建数据存放目录创建配置文件编辑配置文件配置
我就是我352
·
2023-10-12 02:10
消息中间件
kafka
linux
分布式
分布式文件服务器——Windows环境
MinIO
的三种部署模式
上节简单聊到
MinIO
:分布式文件存储服务——初识
MinIO
-CSDN博客,但没具化,本节开始展开在Windows环境下
MinIO
的三种部署模式:单机单节点、单机纠删码、集群模式。
流沙QS
·
2023-10-12 01:48
分布式存储
分布式
服务器
分布式文件服务器——初识
MinIO
开篇
MinIO
——开源优秀的分布式对象存储系统。适用于AI的高性能分布式云存储
MinIO
提供高性能、与S3兼容的对象存储系统,让你自己能够构建自己的私有云储存服务。
流沙QS
·
2023-10-12 01:14
分布式存储
分布式
服务器
minio
部署,搭建
先下载:
MinIO
|Codeanddownloadstocreatehighperformanceobjectstorage启动命令:nohup.
夏微凉秋微暖
·
2023-10-11 20:21
java
eureka
postman
minio
使用golang-gin-
minio
jdk 进行文件下载(多种方法)
不废话上代码controller层:funcDownloadFileHandler(c*gin.Context){taskid:=c.Query("taskid")fmt.Println(taskid)id,err:=strconv.Atoi(taskid)iferr!=nil{}err,data:=logic.Downloadfile(id)iferr!=nil{}fmt.Println(len
MetaverseMan
·
2023-10-11 17:33
minio
golang
gin
开发语言
MinIO
的安装与使用
文章目录1.
MINIO
是什么?2.
MINIO
安装3.启动脚本4.打开
MINIO
页面5.MC命令6.
MINIO
备份脚本1.
MINIO
是什么?
薄荷街的兔比先生
·
2023-10-11 16:50
minio
k8s
集群部署
kubesphere
一、最小化部署kubesphere1、在已有的Kubernetes集群上部署KubeSphere,下载YAML文件:wgethttps://github.com/kubesphere/ks-installer/releases/download/v3.4.0/kubesphere-installer.yamlwgethttps://github.com/kubesphere/ks-installe
运维那些事~
·
2023-10-11 16:10
kubernetes
容器
云原生
通过ECS中Nginx反向代理到阿里云OSS内网,浏览器直接显示图片和文本
公司以前是自建
MinIO
文件服务,后面决定全部上云使用阿里云oss。出于一下几个目的决定使用nginx反向代理到阿里云oss。
North-java
·
2023-10-11 11:51
服务器
nginx
阿里云
oss
反向代理
对外API接口设计
)5、单个接口针对IP限流(令牌桶限流,漏桶限流,计数器限流)6、记录接口请求日志7、采用Https8、数据合法性校验9、密码查询(加缓存,key使用客户号)10、接口调用失败告警11、高可用:服务器
集群部署
拢乎妳
·
2023-10-11 07:12
http
SpringBoot 对接
MinIO
实现文件上传下载删除
前言
MinIO
是一个开源的对象存储服务器,它可以存储大容量非结构化的数据,例如图片、音频、视频、日志文件、备份数据和容器/虚拟机镜像等。
凉了的凉茶
·
2023-10-11 04:49
spring
boot
后端
java
全新 centos 安装docker下的
minio
googlecloud创建虚拟机,并设置root和密码访问,配置dns1为8.8.8.8,接着重启机器shutdown-rnow连接机器34.96.247.202,用户名root,密码Javateam0安装docker先安装驱动sudoyuminstall-yyum-utils\device-mapper-persistent-data\lvm2再配置稳定的仓库sudoyum-config-man
loquito
·
2023-10-11 02:18
微服务链路追踪组件Skywalking介绍
4.SkyWalking环境搭建部署5.SkyWalkingAgent跟踪单个服务6.SkyWalkingAgent跟踪微服务7.SkyWalkingAgent持久化8.SkyWalkingAgent
集群部署
暴裂无球
·
2023-10-11 02:58
skywalking
skywalking
微服务
链路追踪
elastichsearch
linux
Redis之主从复制,哨兵模式,集群
哨兵模式原理2.2哨兵模式的作用2.3哨兵模式的结构2.4故障转移机制2.5搭建Redis哨兵模式3、Redis集群模式3.1集群的作用3.2集群模式的数据分片3.3集群模式的主从复制模型3.4Redis
集群部署
小冯同学。
·
2023-10-11 01:05
redis
bootstrap
spring
spring boot整合
Minio
MinIO
安装
MinIo
#先创建
minio
文件存放的位置mkdir-p/opt/docker/
minio
/data#启动并指定端口dockerrun\-p9000:9000\-p5001:5001\--
过去日记
·
2023-10-10 22:40
Spring
Boot整合
spring
boot
后端
minio
安装与数据迁移
minio
安装与数据迁移一、
minio
安装1.下载二进制文件
minio
2.将
minio
上传到服务器并授予可执行权限3.创建用户4.启动
minio
5.查看
minio
启动状态6.访问并创建桶二、数据迁移1.
CxyGxm
·
2023-10-10 20:07
linux
服务器
bash
上一页
27
28
29
30
31
32
33
34
下一页
按字母分类:
A
B
C
D
E
F
G
H
I
J
K
L
M
N
O
P
Q
R
S
T
U
V
W
X
Y
Z
其他