E-COM-NET
首页
在线工具
Layui镜像站
SUI文档
联系我们
推荐频道
Java
PHP
C++
C
C#
Python
Ruby
go语言
Scala
Servlet
Vue
MySQL
NoSQL
Redis
CSS
Oracle
SQL Server
DB2
HBase
Http
HTML5
Spring
Ajax
Jquery
JavaScript
Json
XML
NodeJs
mybatis
Hibernate
算法
设计模式
shell
数据结构
大数据
JS
消息中间件
正则表达式
Tomcat
SQL
Nginx
Shiro
Maven
Linux
minio集群部署
Apache Drill 分布式集群安装及查询Hbase
Drill可独立部署,
集群部署
依赖于zookeeper。下载Drill0.8.0上传到集群的master/usr/java/目录下解压到当前文件夹:#tar–zxvfapache-d
江山如此多坑
·
2020-08-04 20:09
大数据
42. 通俗易懂大数据实时计算Storm教程
storm的特点Storm的集群架构以及核心概念Storm的集群架构Storm核心概念Storm的并行度以及流分组什么是并行度,什么是流分组流分组策略常用不常用storm单词计数demo依赖代码测试storm
集群部署
咸鱼翻面
·
2020-08-04 16:10
缓存高可用微服务实战
storm
java
ElasticSearch
集群部署
完整指南(加x-pack权限控制)
文章目录1.前言2.每台服务器的ES组件配置3.集群关键配置的安装和步骤3.1IK分词器的安装3.2kibana汉化3.3开通x-pack高级功能3.4开通高级功能后,如何设置登录账号和密码,开启登录验证功能3.5ES6.0以后的集群版本需要安装SSL和CA证书3.6安装X-head(可选操作)4.最终三台服务器的配置文件4.110.100.0.10主服务器elasticsearch.yml4.2
10086_
·
2020-08-04 16:11
数据库
阿里云Hadoop
集群部署
(2)-配置多台机器互信认
前面购买好阿里云机器后,接下来进行集群机器间的互信任操作购买配置请参考https://blog.csdn.net/huonan_123/article/details/84549216小技巧在xshell中同时操作多个窗口(鼠标右键,选择如下如图箭头所示)创建用户[root@hadoop002~]#useraddhadoop上传文件(root)[root@hadoop001software]$ll
huo_火力全开
·
2020-08-04 14:25
集群部署
ES集群并配置IK分词器
一、ES集群搭建,建议在单机部署时安装完IK分词器再copy到其他机器进行
集群部署
,省去安装IK分词器的时间1.单机部署,参照https://blog.csdn.net/ab7253957/article
元澈
·
2020-08-04 13:45
Java架构组件使用
Drill-on-YARN之部署
在Drill1.13之前,Drill只支持独立
集群部署
,部署成功后每个节点上会运行一个名为Dirllbit的守护进程。从1.13版本开始,Drill支持与YARN集成来管理资源。使用
weixin_33725126
·
2020-08-04 11:36
Hadoop及Zookeeper+HBase
集群部署
一、集群环境系统版本虚拟机:内存16GCPU双核心系统:CentOS-764位系统下载地址:http://124.202.164.6/files/417500000AB646E7/mirrors.163.com/centos/7/isos/x86_64/CentOS-7-x86_64-DVD-1708.iso软件版本hadoop-2.8.1.tar.gzhbase-1.3.1-bin.tar.gz
weixin_33807284
·
2020-08-04 04:15
Kubernetes(k8s)之jenkins实现k8s应用的版本升级和回归,k8s
集群部署
项目
1、想要实现jenkins一键自动发布代码的话,还需要手动在k8s部署一下集群项目。首先,创建一个deloypment,如下所示:1[root@k8s-master~]#kubectlrunfeiji--image=192.168.110.133:5000/feiji:v1--replicas=2--re2--record--replicas=--requests=--request-timeou
小段大帅
·
2020-08-04 02:19
你如何设计一个高并发项目?
2》数据库:数据库
集群部署
,主备设计,读写分离,对数据量大读写操作频繁的表进行分库分表。3》数据量不大且常用的数据使用缓存(如Redis)。4》多用异步请求,少用同
豆瓣号
·
2020-08-04 01:17
ASP.NET Core使用Docker-Swarm
集群部署
实现负载均衡实战演练
一、需求背景人生苦短,我用.NETCore!阿笨对Docker是这样评价的:Docker在手,环境我有!Docker出手,集群我有!前面的Doc基础课程我们学习了如何使用Docker来部署搭建单机容器应用。当一台服务器的处理能力、存储空间不足时,不要企图去换更强大的服务器,对大型网站而言,不管多么强大的服务器,都满足不了网站持续增长的业务需求。实践中会发现,生产环境中使用单个Docker节点是远远
阿笨NET
·
2020-08-03 23:36
跟着阿笨一起玩NET
kafka/zookeeper
集群部署
以及常用命令学习
环境准备三台虚拟机(192.168.209.188,192.168.209.189,192.168.209.190)kafka_2.10-0.10.0.1zookeeper-3.4.12.tar.gz下载地址Zookeeper:http://mirror.bit.edu.cn/apache/zookeeper/current/Scala:http://www.scala-lang.org/down
yf_csdn_bilibili
·
2020-08-03 23:13
大数据
kafka+zookeeper+kafka-manager
集群部署
(集群版)
服务器规划172.25.62.100172.25.62.101172.25.62.102zookeeper1zookeeper2zookeeper3kafka1kafka2kafka3kafka-manager一、搭建zookeeper集群并启动参考:https://blog.csdn.net/qq_35859844/article/details/87908283二、搭建kafka集群1.下载k
guandezhi
·
2020-08-03 22:09
分布式集群部署
linux之间共享目录挂载
在quartz进行
集群部署
时,由于为了确保文件一致性,所以就得实现多机共享一个本地目录,这里就得用到linux的挂载,下面简单介绍下操作步骤。
lipengxs
·
2020-08-03 19:26
Python3之
minio
读取
1、读取bucket下面的xx.txt文件,返回strimport
minio
MINIO
_CONF={'endpoint':'127.0.0.1:9000','access_key':'name','secret_key
JesJiang
·
2020-08-03 18:53
Python
minio
如何设置
minio
oss永久下载链接
1、安装
minio
客户端mchttps://dl.min.io/client/mc/release/linux-amd64/mc2、设置执行权限chmod+xmc3、自动初始化配置Use'mc--autocompletion'toenableshellautocompletion4
fishinhouse
·
2020-08-03 16:23
服务器
【Spring Cloud】Ribbon实现客户端负载均衡
而在系统架构中,一般都要求做到高可用,从而注册中心,服务提供者和服务调用者都会搭建
集群部署
。集群环境下,我们调用服务的哪个节点,如何做到客户端负载均衡,是本篇博客接下来总结的内容。
好好生活_
·
2020-08-03 11:30
#
Spring
Cloud
Spark入门教程(2)---开发、编译配置
Spark为使用者提供了大量的工具和脚本文件,使得其部署与开发变得十分方便快捷,本章将会分别从运行(含
集群部署
)、开发以及源码编译三个角度,来介绍Spark相关环境的具体配置流程。
xwc35047
·
2020-08-03 08:30
Spark入门教程
JBoss DataGrid的
集群部署
与访问
集群部署
JDG的缓存模式包括本地(Local)模式和集群(Clustered)模式。本项目采用多节点的Clustered模式部署,数据在多个节点的子集间进行复制,而不是同步复制到所有的节点。
wilbertzhou
·
2020-08-03 08:40
缓存
Flink广播变量简介
戳更多文章:1-Flink入门2-本地环境搭建&构建第一个Flink应用3-DataSetAPI4-DataSteamAPI5-
集群部署
6-分布式缓存7-重启策略8-Flink中的窗口9-Flink中的
weixin_34153893
·
2020-08-03 07:07
Spark Hadoop
集群部署
与Spark操作HDFS运行详解---Spark学习笔记10
目前spark的Runon的hadoop版本大多是hadoop2以上,但是实际上各个公司的生产环境不尽相同,用到2.0以上的公司还是少数。大多数公司还是停留在1代hadoop上,所以我就拿spark0.91+hadoop0.20.2-cdh3u5来部署一个小集群,以供测试学习使用。一、环境概况Spark集群3台:web01:slaveweb02:masterdb01:slaveHadoop集群:h
OopsOutOfMemory
·
2020-08-03 05:24
spark
MacOs 系统访问 Docker 容器内部端口的方法
再一次开发中要用到
minio
,想用Docker容器起一个
minio
服务,然后在本地进行访问。
在路上_JD
·
2020-08-03 05:03
Docker
Salt命令大全
interface:服务监听IPauto_accept:True(可选,key通过‘salt-key-akeyname’命令手动进行认证)注意:keyname就是客户端中设置的id标识(可以查看salt-
minio
n
tengmuxin
·
2020-08-03 04:39
salt
master
minion
命令
EJB3.0与JBOSS4.0.4GA
集群部署
实战(一)
EJB中的三种bean会话bean(sessionbean)负责与客户端交互,是编写业务逻辑的地方,在会话bean中可以通过jdbc直接操作数据库,但大多数情况下都是通过实体bean来完成对数据库的操作。实体bean(entitybean)它实际上属于java持久化规范(简称JPA)里的技术,JPA的出现主要是为了简化现有的持久化开发工作和整合ORM技术,结束现在Hibernate、TopLink
daodan988
·
2020-08-02 23:04
java
开发
Quartz.net持久化与
集群部署
开发详解
无法做
集群部署
,我让它看起来脆弱不堪,那是我的罪过。但是quart.net是经过许多大项目的锤炼,走到啦今天,支持集群高可用的开发方案那是一定的,今天我就给小结下我的quartz.net开发升级过程。
weixin_30824599
·
2020-08-02 19:41
k8s-1.15.0
集群部署
+dashboard
环境:外网环境硬件master-centos7.42核4Gnode1-centos7.42核4Gnode2-centos7.42核4G软件:三台服务器:docker-19.3.0kubelet1.15.0kubeadm1.15.0kubectl1.15.0curlwgetnet-toolsvimlrzszyum-utilsdevice-mapper-persistent-datalvm2部署基础环
在路上癞蛤蟆
·
2020-08-02 19:00
Hbase 2.0+压缩及查询性能测试
Hbase版本为2.2.2采用3个节点的
集群部署
,压缩算法采用SNAPPY创建两张表,一直使用压缩算法一张不使用压缩算法test表使用SNAPPY压缩create'test',{NAME=>'info'
涟漪海洋
·
2020-08-02 17:53
Hbase
使用nmon实现一台Linux主机监控多台主机之——Linux多台主机建立信任
Linux多台主机建立信任在性能测试的过程中,通常会遇到系统
集群部署
、或者测试过程中涉及多个系统,这时候需要监控多台Linux主机,如果能在一台主机上实现监控多台主机,效率可以提升很多哦。
小英子妮
·
2020-08-02 17:14
Linux
SpringCloud之Eureka Server
集群部署
前面这篇https://blog.csdn.net/qq_37892957/article/details/88629389博文讲完了EurekaServer的介绍,下面我们讲讲EurekaServer的集群化部署。一、概述1.1高可用服务注册中心概述考虑到发生故障的情况,服务注册中心发生故障必将会造成整个系统的瘫痪,因此需要保证服务注册中心的高可用。EurekaServer在设计的时候就考虑了高
水能载舟,亦能覆舟
·
2020-08-02 13:44
springcloud学习
Linux企业实战之自动化运维工具(六)——SaltStack(6)
salt-sshsalt-ssh简介salt-ssh可以独立运行的,不需要
minio
n端。salt-ssh用的是sshpass进行密码交互的。以串行模式工作,性能下降。
bdkl9998
·
2020-08-01 18:56
自动化运维工具
kafka官方文档-简介
基本概念1.kafka是以
集群部署
方式运行在一台或多台服务器上。2.kafka
nch_ren
·
2020-08-01 13:59
kafka
kafka
Mahout的0.11安装与测试
Mahout的0.11安装与测试1.1Mahout本地hadoop环境布置,当然测试mahout可以安装单节点hostnameip安装位置hadoop
集群部署
invin01192.168.199.61NameNode
书童宝贝
·
2020-08-01 12:38
MinIO
了解一下!!!
什么是
MinIO
?根据官方定义:
MinIO
是在ApacheLicensev2.0下发布的对象存储服务器。它与AmazonS3云存储服务兼容。
SpringForAll
·
2020-08-01 10:32
linux环境下rocketMq双master集群搭建
rocketMq集群模式RocketMQ的
集群部署
方式有多种,其中包括单个Master、多个Master、多Master多Slave模式(异步复制)以及多Master多S
小码农叔叔
·
2020-08-01 08:16
rocketmq使用
rocketmq
Elasticsearch hot&warm架构的简单实现
hot&warm架构,简单说,就是将Elasticsearch
集群部署
划分为hot数据节点和warm数据节点,适用于timebased索引数据。
蜗牛^_^
·
2020-08-01 08:04
ELK
五、Kafka producer拦截器(interceptor)
个人专题目录Kafka概述Kafka
集群部署
Kafka工作流程分析KafkaAPI实战Kafkaproducer拦截器(interceptor)KafkaStreams扩展Kafka生产者调优1.拦截器原理
Java及SpringBoot
·
2020-08-01 06:03
SpringCloud Alibaba之Nacos集群、持久化
但之前的文章中都是基于单机模式部署的,生产环境不可能是单机部署的,所以本文介绍一下Nacos的
集群部署
。之前在Nacos控制台配置的一下信息,默认Nacos使用嵌入式cmdb数据库实现数据的存储。
Java程序员聚集地
·
2020-08-01 06:58
Java
iOS - 架构模式(Design Pattern)
Whatyourapplicationis(butnothowitisdisplayed)Controller=HowyourModelispresentedtotheuser(UIlogic)View=YourController's
minio
nsIt'sallaboutmanagingcommunicationbetweencamps
MichaelLedger
·
2020-08-01 06:36
比较Spark的三种
集群部署
模式
Spark有三种
集群部署
模式,或者叫做集群管理模式。分别是standalone,YARN和Mesos。这三种模式其实都是master/slave模式。那么在实际的项目中,我们该如何对比选择呢?
程序の之道
·
2020-08-01 06:51
二进制部署K8S集群从0到1
二进制部署K8S集群从0到1管理集群中的TLS
集群部署
环境规划环境准备创建TLS证书和秘钥创建CA(CertificateAuthority)创建kubeconfig文件下载kubectl创建kubectlkubeconfig
蓉等你归
·
2020-08-01 05:05
Kubernetes容器编排
Docker容器技术
RocketMQ4.5.1两主两从
集群部署
RockerMQ简介RocektMQ是阿里巴巴在2012年开源的一个纯java、分布式、队列模型的第三代消息中间件,不仅在传统高频交易链路有着低延迟的出色表现,在实时计算等大数据领域也有着不错的吞吐。2016年11月11号,双十一大促见证了RocketMQ低延迟存储架构的成功试水,99.996%的延迟落在了10ms以内,极个别由于GC引发的停顿在50ms以内,其高性能、低延时和高可靠的特性承载了近
weixin_33924220
·
2020-08-01 04:10
RocketMQ
集群部署
方式总结
1RocketMQ网络部署图RocketMQ网络部署图如下图所示:1.1RocketMQ网络部署特点:NameServer是一个几乎无状态节点,可
集群部署
,节点之间无任何信息同步。
weixin_33924312
·
2020-08-01 04:10
Elasticsearch 5.6.4 分布式
集群部署
部署环境说明:操作系统:CentOS7elasticsearch版本:elasticsearch-5.6.4.tar.gzJDK版本:jdk1.8.0_144服务器:192.168.1.240(主节点、数据节点)192.168.1.241(主节点、数据节点)192.168.1.242(数据节点)部署步骤:elasticsearch5.6.4必需要jdk1.8版本,后续简称es部署前需要首先安装jd
下午2点14分
·
2020-08-01 04:58
首次公开!单日600PB的计算力--阿里巴巴EB级大数据平台的进击
本文为大家介绍,MaxCompute基于多
集群部署
的几万台服务器,如何为集团急剧增长的业务提供护航和保障。挑战每年的双11之前,也是MaxCom
weixin_33721344
·
2020-08-01 03:27
Standalone
集群部署
Spark中调度其实是分为两个层级的,即集群层级的资源分配和任务调度,以及任务层级的任务管理。其中集群层级调度是可配置的,Spark目前提供了Local,Standalone,YARN,Mesos。任务层级的任务管理就使用Driver-Executor架构来进行管理。在Standalone模式下,首先对涉及到的名词进行说明名称说明MasterSparkstandalone集群主节点,保存集群元数据
weixin_30947043
·
2020-08-01 03:38
数据库
大数据
运维
Consul
集群部署
指南
文章目录下载Consul安装Consul配置systemd配置Consul(server)通常配置自动加入集群Server配置ConsulUI配置Consul(client)启动Consul高可用性单集群架构所有的Consul主机上都要完成以下步骤。下载Consul安装Consul配置systemd配置Consul(server)或(client)启动Consul本手册适用于运行着systemd和
逝水-无痕
·
2020-08-01 02:21
consul
后端线上服务监控与报警方案
退一步说,即便是能去线上去tail-f查看错误日志,但是线上是多
集群部署
的,服务器都特别多,研发不可能在每一台机器上都能看到日志;即便是有日志收集机器
wang_quan_li
·
2020-08-01 02:10
运维
基于HDFS的spark分布式Scala wordcount程序测试
基于HDFS的spark分布式Scalawordcount程序测试本文是在Hadoop分布式集群和基于HDFS的spark分布式
集群部署
配置基础上进行Scala程序wordcount测试,环境分别是spark-shell
windflyhuang
·
2020-08-01 01:53
spark
rocketmq消息队列
集群部署
及其使用
一、介绍rocketmq是一款分布式消息系统,消息生产者负责创建消息并且发送消息到rocketmq服务器,rocketmq服务器会将消息持久化到磁盘,消息消费者再从rocketmq的服务器拉取消息并且提交给应用消费。二、特点1、支持严格的消息顺序2、支持topic和queue两种模式3、亿级消息堆积能力4、分布式特性5、支持push和pull方式消费三、RocketMQ的部署结构1、NameSer
meiria
·
2020-07-31 22:55
rocketmq
Android 的 screen 命令和进程守护
minio
进程启动后,如果这时候关闭了终端窗口或者SSH,其进程也会被结束。那么怎么办呢?
天兵公园
·
2020-07-31 21:15
Kafka的
集群部署
与基本的命令行操作
KafKa集群是依赖于zookeeper的,所以想要部署一个分布式的KafKa集群,首先需要搭建一个Zookeeper集群,至于如何搭建zookeeper集群,在我的另一篇博文里已经说过了,这里不再讲述。安装好zookeeper集群以后,部署KafKa集群就简单多了,只需要相应的的Jar包即可。Jar包可以在KafKa官网下载,网址如下:http://kafka.apache.org/downlo
有心有梦
·
2020-07-31 17:00
上一页
104
105
106
107
108
109
110
111
下一页
按字母分类:
A
B
C
D
E
F
G
H
I
J
K
L
M
N
O
P
Q
R
S
T
U
V
W
X
Y
Z
其他