E-COM-NET
首页
在线工具
Layui镜像站
SUI文档
联系我们
推荐频道
Java
PHP
C++
C
C#
Python
Ruby
go语言
Scala
Servlet
Vue
MySQL
NoSQL
Redis
CSS
Oracle
SQL Server
DB2
HBase
Http
HTML5
Spring
Ajax
Jquery
JavaScript
Json
XML
NodeJs
mybatis
Hibernate
算法
设计模式
shell
数据结构
大数据
JS
消息中间件
正则表达式
Tomcat
SQL
Nginx
Shiro
Maven
Linux
Hadoop1.2.1集群配置
k8s 环境搭建
kubelet是主要的节点代理,它会监视已分配给节点的pod,具体功能:kubeadmKubeadm是一个工具本次安装版本为:Kubernetesv1.19.2Docker环境准备操作系统
集群配置
IP角色
求索
·
2020-09-21 11:15
ClickHouse查询分布式表LEFT JOIN改RIGHT JOIN的大坑
ClickHouse查询分布式表LEFTJOIN改RIGHTJOIN的大坑由一个慢查询衍生出的问题我们线上有一个ClickHouse集群,总共6个服务器,配置均为16C64GSSD,
集群配置
为三分片两副本有两个表这里称为
Fan_-_
·
2020-09-17 15:37
ClickHouse
Redis cluster
集群配置
CentOS下的redisclusterrediscluster源码安装redis后,创建redis-cluster目录,并复制6份redis解压的目录为redis7001-7006,如下:修改6份redis下的redis.conf文件中的配置,注意要分不同的pidfile,不同的端口port。如7001的redis.conf关于配置和允许其它主机连接请参考我的其它文章https://blog.c
fddqfddq
·
2020-09-17 14:33
Redis
Redis
cluster
apache + tomcat 负载均衡分布式
集群配置
Tomcat
集群配置
学习篇-----分布式应用现目前基于javaWeb开发的应用系统已经比比皆是,尤其是电子商务网站,要想网站发展壮大,那么必然就得能够承受住庞大的网站访问量;大家知道如果服务器访问量过大
weixin_30439067
·
2020-09-17 13:35
java
网络
web.xml
ActiveMQ Master/Slave
集群配置
Master/Slave含义:主从关系,最少有两天服务器进行工作,一台作为master服务器,一台作为slave服务器,在当前情况下有且仅有一台服务器可提供服务(master),另一台服务器一直在等待连接中(slave),当master宕机停止,slave充当master服务器不间断的提供服务,这时slave服务器获取连接变为master服务器,当原来的mmaster修复后处于等待连接中为slav
笑為紅顏苦為誰
·
2020-09-17 13:57
activeMq
linux下redis
集群配置
与设置密码
1.RedisCluster的架构图。(1)所有的redis节点彼此互联(PING-PONG机制),内部使用二进制协议优化传输速度和带宽.(2)节点的fail是通过集群中超过半数的节点检测失效时才生效.(3)客户端与redis节点直连,不需要中间proxy层.客户端不需要连接集群所有节点,连接集群中任何一个可用节点即可。(4)redis-cluster把所有的物理节点映射到[0-16383]slo
哈哈哈哈哈哈哈111
·
2020-09-17 13:24
redis缓存
Centos6.3下ActiveMQ5.7.0主备
集群配置
在两台机器上部署ActiveMQ的PureMaster/Slave,此处我们来讨论一下PureMaster—Slave的配置方法和相关的测试,activemq5.8.0以后版本取下puremasterslave。Pure模式的M-S部署,相当于部署了两套相互独立的ActiveMQ实例,它们拥有各自的存储系统。这也是提供HA的最简单的一种方式。此种方式只有两个MQ实例。此种配置方式的话,Master
magerguo
·
2020-09-17 12:55
linux
中间件
Zookeeper
集群配置
详解
背景:3台linuxredhat7.2,zookeeper-3.4.14,jdk1.8.0_2211.将zookeeper-3.4.14上传到服务器,配置环境变量;exportZOOKEEPER_HOME=/usr/local/src/zookeeper-3.4.14exportPATH=$JAVA_HOME/bin:$ZOOKEEPER_HOME/bin:$PATH2.配置zoo.cfg,设置d
haiziccc
·
2020-09-17 11:05
AI
BigData
zook
Tomcat
集群配置
环境配置:App应用服务器apache-tomcat-6.0.36web服务器:apache的httpd-2.2.19java环境:jdk1.6系统环境:winxp系统首先配置web应用服务器配置tomcat-A配置1:修改tomcat的server.xml文件增加如下内容1、修改IP地址,如果是不同一台服务器注意修改IP地址2、端口修改注意每个tomcat的port都不能设置为一个,如果是不同的
菜鸟攻城师
·
2020-09-17 11:13
例子
源码
代码
从大数据研发的角度解决org.apache.hadoop.security.AccessControlException: Permission denied: user=***,不需修改
集群配置
文件
前言:该异常的解决方法在网上确实已经很多了,但是楼主们都没有考虑到一个问题么?那就是身为大数据研发团队的我们,有权限轻易的去修改hadoop集群的配置文件么?就算有权限修改,万一耦合度较高的文件被修改,我们要去哭着求运维帮我们擦屁股么?很显然小编这篇小短文是在不动运维配置好的配置文件的基础上,解决远程提交hadoop任务出现的AccessControlException,跟这小编往下走吧。出现异常
羽毛不会飞
·
2020-09-17 11:01
hadoop
hdfs
Exception
Tomcat集群与负载均衡
Tomcat
集群配置
学习篇-----分布式应用现目前基于javaWeb开发的应用系统已经比比皆是,尤其是电子商务网站,要想网站发展壮大,那么必然就得能够承受住庞大的网站访问量;大家知道如果服务器访问量过大
iteye_2935
·
2020-09-17 10:37
Tomcat
springcloud随便写点
eureka注册注册ribbon负载均衡feign声名式clienthystrix断路器zuul网关,智能路由,过滤config
集群配置
bus分布式的节点用轻量的消息代理连接起来]Sleuth主要功能就是在分布式系统中提供追踪解决方案转载于
a535359884
·
2020-09-17 08:38
java
hadoop
集群配置
问题及思考
1.SSH问题1)
集群配置
中需要配置Master和Slave间的ssh无密码访问。需要的是master能够无密码访问slave中的每台机器,slave也能无密码访问master。
l_mai
·
2020-09-17 07:45
学习
大数据
运维
Tomcat集群和Session共享的配置方法
Tomcat
集群配置
其实很简单,在Tomcat自带的文档中有详细的说明(/docs/cluster-howto.html),只不过是英语的,对我这样的人来说很难懂。
wujie39
·
2020-09-17 05:27
tomcat
Hadoop错误1_Hadoop分布式及伪分布式下DataNode不能启动的问题
我
集群配置
:有5个节点,分别为masterslave1-5。
Wang_Zhenwei
·
2020-09-17 05:00
Hadoop
转载
Tomcat与Apache或Nginx连接和
集群配置
一、Tomcat的连接方式:官方文档参考:http://tomcat.apache.org/tomcat-7.0-doc/connectors.htmlTomcat与Web服务器的连接方式有两种:HTTPHTTP连接器是Tomcat默认的方式,并且已经被使用。这种方式具有最低的延迟和最佳的整体性能。对于集群,需要一个支持粘性会话的web服务器在Tomcat前端。Tomcat支持mod_porxy(
kaopu
·
2020-09-17 04:26
web
Hbase详细架构图解
主要组件Zookeeper:HBase通过Zookeeper来做Master的高可用、RegionServer的监控、元数据的入口以及
集群配置
的维护等工作。
Rabcheng
·
2020-09-17 03:56
大数据-Hbase
hbase
hadoop
hdfs
大数据
zookeeper
Resin4配置
Resin4配置文件发生了较大变化,分为:[list][*]app-default.xmlweb应用配置[*]cluster-default.xml
集群配置
[*]resin.xml[*]resin.properties
iteye_14058
·
2020-09-16 23:02
resin
Hadoop+ZooKeeper+HBase
集群配置
转载自来源:Linux社区作者:jpiverson因为需要使用Hadoop环境进行测试,收集安装教程,学习一下通常,集群里的一台机器被指定为NameNode,另一台不同的机器被指定为JobTracker,这些机器是masters。余下的机器即作为DataNode也作为TaskTracker,这些机器是slaves。先决条件确保在你集群中的每个节点上都安装了所有必需软件:JDK,ssh。ssh必须安
肥叔菌
·
2020-09-16 22:33
#
Hadoop
hadoop
hadoop完全分布式运行模式安装
目录一、虚拟机准备二、安装JDK三、SSH无密登录配置四、集群时间同步五、编写集群分发脚本xsync六、
集群配置
七、集群单点启动八、群起集群九、集群启动/停止方式总结一、虚拟机准备参考另一篇Linux模板机及集群相关操作文章
剑穹
·
2020-09-16 21:25
#
Hadoop
大数据
hadoop
slurm.conf系统初始配置
#slurm
集群配置
##集群名称ClusterName=myslurm##主控制器的主机名ControlMachine=node11##主控制器的IP地址ControlAddr=192.168.80.11
weixin_34146410
·
2020-09-16 19:47
Hadoop
集群配置
Hadoop
集群配置
使用虚拟机配置hadoop集群顺序;一、先在一台机上配置好虚拟机,然后拷贝出其他两台。
FA_learning
·
2020-09-16 17:14
Hadoop
Windows环境下 RabbitMQ
集群配置
的节点名称为rabbit@H2-PC1.分别在两台机器的rabbitmq数据、日志文件所在路径下(本文为C:\Users\Administrator\AppData\Roaming\RabbitMQ),创建
集群配置
文件
weixin_30448685
·
2020-09-16 16:02
大数据
操作系统
SpringCloud学习笔记四:Spring Cloud Zuul 路由
SpringCloudZuul路由的作用Eureka用于服务的注册于发现,Feign支持服务的调用以及均衡负载,Hystrix处理服务的熔断防止故障扩散,SpringCloudConfig服务
集群配置
中心
不了痕
·
2020-09-16 15:50
SpringCloud
rabbitMQ ——windows安装
集群配置
(rabbitmq之二)
上文安装完了rabbitmq,直通车查看。如果在实际使用过程中,使用单台配置,万一出现意外情况,将导致我们的服务终断,因此需要搭建集群的方式来最高限度的提高服务的可用性。一、事先准备:1.两台windows主机,当然也可以用虚拟机。2.安装erlang以及rabbitmq二、安装完成的单台rabbitmq服务情况1.两台windows主机rabbitmq相关内容:a:192.168.0.88rab
niketwo
·
2020-09-16 15:29
中间件
linux Apache+jk+tomcat
集群配置
最近在学习apache集群搭建,这里是我搭建进群的心得。一:环境系统:linux(红帽)apache:httpd-2.2.3.tar.gz连接器mod_jk:tomcat-connectors-1.2.43-srctomcat:apache-tomcat-8.0.48这里在同一台机器上,复制两个jdk:jdk1.8.0_151二:安装软件Apache安装在此就不介绍了,,可以参照:https://
sunxiaofeng_sdn
·
2020-09-16 12:41
Apache
JBoss Seam
集群配置
Seam框架得益于与JBoss的无缝集成,以及EJB3的使用,天生具有高集群特性。本文简单介绍JBossSeam配置集群的方法。配置方法如下:首先是准备工作:1.配置好JBoss集群,确保集群可以正常工作。2.配置好Seam工程所需要的数据源。将数据源放入到主JBoss的farm文件夹内。3.最重要的是确保所有:session类型和conversation-scoped类型的对象,也就是需要服务器
roland101
·
2020-09-16 12:34
JBoss
记一次skywalking数据无法写入问题的解决
查看skywalking-oap-server.log发现如下的问题:刚开始以为是es
集群配置
太低导致数据写入失败,可是加了配置之后上述问题依然存在,只能再次排查。
kangswx
·
2020-09-16 11:18
skywalking
java
skywalking
链路追踪
apm
centos7 搭建elastic search 集群 (三节点)
centos7搭建elasticsearch单机三节点集群一、实验拓扑图我们实验三个节点,一个主节点,两个从节点二、单机多节点配置elasticsearch
集群配置
比较简单,只需把每个节点的clustername
血煞风雨城2018
·
2020-09-16 07:52
java
elasticsearch集群
centos7
shell脚本启动kafka集群
前提:kafka集群之间已配置ssh免密登录,kafka
集群配置
路径一致要实现kafka群起脚本思路:通过ssh登录后,循环启动每台机器的kafka和zookeeperkafka和zookeeper单机启动脚本
Epoch-Elysian
·
2020-09-16 07:57
ssh
linux
nacos集群搭建
默认情况下是不会对配置的数据进行持久化的,但官方提供了持久化方案,可以使用mysql将配置中心使用的数据进行入库说明:由于本地没有多的服务器,不能完全按照官网的要求搭建,这里通过端口进行区分也可附上一副官方的关于nacos
集群配置
的架构
小码农叔叔
·
2020-09-16 01:05
nacos学习总结
nacos集群搭建
Nacos
集群配置
应用
Nacos
集群配置
应用1.执行Mysql脚本2.修改配置文件修改application.propertiesserver.servlet.contextPath=/nacosserver.port=8848
FishingGo
·
2020-09-16 01:05
SpringCloud
nginx
java
spring
后端
spring
boot
hadoop+zookeeper+hbase
集群配置
整理
实验环境:centos5.6+jdk1.6.2+hadoop-0.20.2+zookeeper3.3.5+hbase0.90.6准备好三台机器,机器名ip作用master192.168.16.130namenodeslave1192.168.16.131datanodeslave2192.168.16.132datanode一、hadoop的安装配置1、在/etc/hosts中配置机器名和相应的I
qq1988627
·
2020-09-15 23:31
大数据
运维
java
zookeeper
集群配置
出现的问题
经检查,所有配置都对,但其中一个启动时,查询状态,总是报如下错误其实很简单,首先进入bin目录下查看zookeeper.out文件,这里记录错误信息。这里说的很清楚,是端口被占用了。祝大家学习进步,升值加薪,走向人生巅峰!
贼帅的阿佑
·
2020-09-15 20:59
zookeeper
zookeeper
Apache +Jetty的负载均衡与
集群配置
(上)
Apache+Jetty的负载均衡与
集群配置
一.搭配环境(一).jetty的安装和配置Jetty_a:192.168.55.229Jetty_b:192.168.55.231(1)安装jdk下载将jdk
iteye_6429
·
2020-09-15 19:26
后端
开发工具
ldap
Ubuntu下kubernetes
集群配置
上篇文章介绍了ubuntu单机版kuernetes的安装,下面介绍一下集群的配置(此处etcd的集群没有考虑)环境说明:使用两个虚拟机(192.168.20.43,192.168.20.44),其中20.43担任的角色比较多:kubernetes的master节点、kubernetes的minion节点和etcd服务器,20.33仅作为kubernetes的minion节点192.168.20.4
小爷有点狂
·
2020-09-15 18:16
Docker
SparkContext、SparkConf和SparkSession的初始化
SparkContext和SparkConf任何Spark程序都是SparkContext开始的,SparkContext的初始化需要一个SparkConf对象,SparkConf包含了Spark
集群配置
的各种参数
zxfBdd
·
2020-09-15 18:28
spark
hive
SparkConf、SparkContext、SparkSession
SparkConf和SparkContext任何Spark程序都是从SparkContext开始的,SparkContext的初始化需要一个SparkConf对象,SparkConf包含了Spark
集群配置
的各种参数
月是天心不愈伤
·
2020-09-15 17:21
Spark
Spark
Eureka的工作原理
Eureka的工作原理以及它与ZooKeeper的区别)1.基本原理上图是来自eureka的官方架构图,这是基于
集群配置
的eureka;处于不同节点的eureka通过Replicate进行数据同步ApplicationService
骑驴找驴
·
2020-09-15 15:55
zookeeper3.5.5启动报错Error contacting service. It is probably not running 问题解决
下载了zookeeper3.5.5-tar.gz,并在虚拟机解压,配置conf/zoo.cfg中的zkdata快照文件存放路径,zkdataLog日志路径及
集群配置
。配置jdk1.8和zookeepe
sonyfu1
·
2020-09-15 15:31
环境搭建
安装
zookeeper集群环境搭建
hadoop SequenceFileOutputFormat与LzopCodec压缩问题
用mahout库做推荐系统,mahout的默认输出格式是SequenceFileOutputFormat,然后对输出进行压缩,
集群配置
的默认压缩方式是LzopCodec。
pan12jian
·
2020-09-15 14:32
hadoop
Eureka手把手
集群配置
一、创建eurekaServer1、创建第一个server,创建一个springboot工程1)java代码如下,使用端口7070:@EnableEurekaServer@SpringBootApplication@RestControllerpublicclassEurekaserverApplication{@RequestMapping("/exec")publicStringexecInf
danielinbiti
·
2020-09-15 13:39
springboot
zookeeper 集群启动时 出现 Error contacting service. It is probably not running 的解决办法
在zookeeper
集群配置
成功后,启动时显示正常启动个,但是输入命令查看状态时报错!!!
csdn-华仔
·
2020-09-15 12:24
zookeeper
《大数据: Hadoop(HDFS) 完全分布式集群二》
一、
集群配置
1.如何规划hadoop中的进程HDFS:有一个NN(namenode)和N个DN(datanode),2NN(secondnamenode)也可以有N个辅助NN工作YARN:有一个RM(resoureManager
HarkerYX
·
2020-09-15 12:19
大数据
ES
集群配置
1.节点服务器配置Master: 10.10.10.46Slave1:10.10.10.53Slave2:10.10.10.492.Master节点配置Cluster:集群名称修改# ---------------------------------- Cluster -----------------------------------## Use a descriptive name for
bibi3863
·
2020-09-15 07:32
Hadoop + HBase (自带zookeeper 也可单独加) 集群部署
htmHBase结点之间时间不一致造成regionserver启动失败http://www.linuxidc.com/Linux/2013-06/86655.htmHadoop+ZooKeeper+HBase
集群配置
weixin_34258078
·
2020-09-15 06:07
关于SparkContext
2.每个JVM里只能存在一个处于激活状态的SparkContext,在创建新的SparkContext之前必须调用stop()来关闭之前的SparkContext3.SparkConf包含了Spark
集群配置
的各种参数
天一涯
·
2020-09-15 06:17
spark
sparkcontext
大数据平台核心技术-实验记录
实验内容实验一:Hadoop集群搭建实验二:使用MapReduce实现倒排索引三、实验过程记录2.1安装准备2.2Hadoop集群搭建1、安装文件上传工具2、JDK安装3、Hadoop安装:4、Hadoop
集群配置
月色很柔
·
2020-09-15 05:24
hadoop
Hadoop HA on Yarn——
集群配置
集群搭建因为服务器数量有限,这里服务器开启的进程有点多:机器名安装软件运行进程hadoop001Hadoop,ZookeeperNameNode,DFSZKFailoverController,ResourceManagerDataNode,NodeManagerQuorumPeerMainJournalNodehadoop002Hadoop,ZookeeperNameNode,DFSZKFail
weixin_30429201
·
2020-09-15 03:04
大数据
运维
java
hadoop完全分布式集群搭建
:相关软件一、前期准备二、jdk,hadoop安装、配置2.1、jdk、hadoop安装2.2、配置jdk、hadoop环境变量三、编写集群分发脚本,完成其他服务器的jdk、hadoop安装与配置四、
集群配置
规划五
peng.li
·
2020-09-15 02:43
hadoop
hadoop
linux
大数据
分布式
上一页
16
17
18
19
20
21
22
23
下一页
按字母分类:
A
B
C
D
E
F
G
H
I
J
K
L
M
N
O
P
Q
R
S
T
U
V
W
X
Y
Z
其他