E-COM-NET
首页
在线工具
Layui镜像站
SUI文档
联系我们
推荐频道
Java
PHP
C++
C
C#
Python
Ruby
go语言
Scala
Servlet
Vue
MySQL
NoSQL
Redis
CSS
Oracle
SQL Server
DB2
HBase
Http
HTML5
Spring
Ajax
Jquery
JavaScript
Json
XML
NodeJs
mybatis
Hibernate
算法
设计模式
shell
数据结构
大数据
JS
消息中间件
正则表达式
Tomcat
SQL
Nginx
Shiro
Maven
Linux
CDH4集群配置
linux kafka
集群配置
和测试图文详解
一.前期准备1.1Win7官网下载kafka包本文使用版本kafka_2.10-0.10.1.0.tgz1.2配置jdk、scala、zookeeperjdk1.7:linuxjdk安装和配置scala2.10.6:linuxscala安装和配置zookeeper3.4.9:zookeeper3.49集群安装和配置jdk,scala,kafka版本要对应1.3centos7集群服务器主机名系统IP
IT狗探求
·
2017-04-20 17:53
Linux
大数据
大数据专题
Hadoop常用操作指令和Hadoop
集群配置
4月11日Hadoop常用操作指令hadoopdfsadmin–report查看hdfs基本统计信息startbalancer–threshold负载均衡hadoopdfsadmin–safemodeleave退出安全模式hadoopfs-cat打开某个已存在文件hadoopfs-ls查看指定目录下内容hadoopfs-put将本地文件夹存储至hadoop上hadoopfs–mkdir在hadoo
Fighting_Studying
·
2017-04-20 16:21
大数据
redis安装与
集群配置
Redis是一个key-value存储系统。和Memcached类似,它支持存储的value类型相对更多,包括string(字符串)、list(链表)、set(集合)、zset(sortedset--有序集合)和hash(哈希类型)。这些数据类型都支持push/pop、add/remove及取交集并集和差集及更丰富的操作,而且这些操作都是原子性的。在此基础上,redis支持各种不同方式的排序。与m
梦想不遥远
·
2017-04-18 22:19
安装
集群配置
redis
存储服务
MongoDB高可用
集群配置
的几种方案
高可用性即HA(HighAvailability)指的是通过尽量缩短因日常维护操作(计划)和突发的系统崩溃(非计划)所导致的停机时间,以提高系统和应用的可用性。计算机系统的高可用在不同的层面上有不同的表现:(1)网络高可用由于网络存储的快速发展,网络冗余技术被不断提升,提高IT系统的高可用性的关键应用就是网络高可用性,网络高可用性与网络高可靠性是有区别的,网络高可用性是通过匹配冗余的网络设备实现网
贪梦
·
2017-04-18 16:04
存储
MongoDB
mosquitto
集群配置
1.mosquitto集群部署图前文写道mosquitto单机阿里云只能支持50000设备同时在线,数量较多时采用mosquitto集群部署,部署图如下集群由两台服务器组成,main标识主服务器,sub标识从服务器,橙色的sub标识订阅客户度,绿色的pub标识发布客户端2.开启mosquitto桥接2.1mosquittoconfig.mk开启桥接config.mk文件with_bridge:=y
小不强
·
2017-04-15 23:26
物联网
mqtt
windows下Redis
集群配置
阅读更多今天配置了一下redis集群,主要是为了防止主服务"死"掉,其中一种是配了两台从服务,下面是代码配置1.首先注意的是下载的redis一定是Windows版本的,而且版本不要太低,要不然tcp-backlog这个配置不能生效,在启动是回报错,下面是需要配的文件,在把redi.windows.conf复制两份,分别命名为redis-6380,redis-6381其中需要修改的是timeout3
俺是小子
·
2017-04-11 17:00
redis
windows
windows下Redis
集群配置
阅读更多今天配置了一下redis集群,主要是为了防止主服务"死"掉,其中一种是配了两台从服务,下面是代码配置1.首先注意的是下载的redis一定是Windows版本的,而且版本不要太低,要不然tcp-backlog这个配置不能生效,在启动是回报错,下面是需要配的文件,在把redi.windows.conf复制两份,分别命名为redis-6380,redis-6381其中需要修改的是timeout3
俺是小子
·
2017-04-11 17:00
redis
windows
Spring Cloud入门2——配置中心Config
SpringCloudConfig配置管理工具包,让你可以把配置放到远程服务器,集中化管理
集群配置
,目前支持本地存储、Git以及Subversion。
a60782885
·
2017-04-06 00:00
MicroService
spring-cloud
keepalived高可用
集群配置
[软件安装]yum install -y keepalivedrpm -qa keepalivedLB01配置文件[root@LB_01 ~]# cat /etc/keepalived/keepalived.conf!Configuration file for keepalivedglobal_defs { notification_email { 845330082
大梦初醒LF
·
2017-04-03 15:36
集群
高可用
keepalived
集群搭建文档
云计算基础(二):Hadoop单机、伪分布、
集群配置
Linux机器分布式配置、SSH配置、公用/私有密钥配置;Hadoop单机配置;Hadoop伪分布式
集群配置
;Hadoop
集群配置
;基准程序评估Hadoop集群性能1、掌握Linux机器分布式配置、SSH
_Summer tree
·
2017-04-02 20:35
云计算
hadoop
hadoop集群
分布式
linux
云计算
Spring Cloud(4)——分布式配置中心
一、简介SpringCloudConfig是一个配置管理工具包,让你可以把配置放到远程服务器,集中化管理
集群配置
,目前支持本地存储、Git以及Subversion。
会跳舞的机器人
·
2017-03-30 21:18
Zookeeper集群的配置方式
如题,最近学习Hadoop时候,学到了Zookeeper的
集群配置
方式,记录一下所需资源:zookeeper-3.4.5.tar.gzCentOS6.51.减压zookeeper-3.4.5.tar.gz
ShiLuoHeroKing
·
2017-03-26 11:59
zookeeper
CentOS7.0+Hadoop2.7.2+Hbase1.2.1搭建教程
软件版本CentOS-7.0-1406-x86_64-DVD.isojdk-7u80-linux-x64.tar.gzhadoop-2.7.2.tar.gzhbase-1.2.1-bin.tar.gz2、
集群配置
主机
Sandeepin
·
2017-03-23 23:00
【Hadoop】Ambari架构详解(转)
Ambari介绍Ambari是Hadoop分布式
集群配置
管理工具,是由hortonworks主导的开源项目,它已经成为了apache基金会的开源项目,已经成为Hadoop运维系统中的得力助手。
mikeliuy
·
2017-03-23 16:13
Redis主从复制和
集群配置
系列之二
非常感谢http://www.cnblogs.com/gossip/p/5992716.htmlRedis技术学习https://www.itkc8.com一、本文目的Redis的主从配置分为两篇文章,第一篇主要介绍了Redis主从配置的搭建过程及使用,第二篇主要说明各种情况下Redis主从状态,如Master挂掉,Slaver挂掉,挂掉后重新加入等。二、常用命令根据配置文件启动redis:src
最是那一低头的温柔
·
2017-03-21 15:10
Redis
Elasticsearch 单机多实例
elasticsearch/release/org/elasticsearch/distribution/zip/elasticsearch/2.4.2/elasticsearch-2.4.2.zip二、
集群配置
蓝宫卫
·
2017-03-11 00:25
单机
elasticsearch
ELK
日志系统
Hadoop+Hbase+Spark
集群配置
-Spark HA安装
解压部署cp/usr/hadoop/spark/conf/spark-env.sh.template/usr/hadoop/spark/conf/spark-env.shvi/usr/hadoop/spark/conf/spark-env.sh#####################################################exportJAVA_HOME=/usr/ha
1024find
·
2017-03-09 14:32
大数据集群安装
Hadoop+Hbase+Spark
集群配置
-Spark HA安装
解压部署cp/usr/hadoop/spark/conf/spark-env.sh.template/usr/hadoop/spark/conf/spark-env.shvi/usr/hadoop/spark/conf/spark-env.sh#####################################################exportJAVA_HOME=/usr/ha
1024find
·
2017-03-09 14:32
大数据集群安装
Hadoop+Hbase+Spark
集群配置
-Hbase HA安装
解压部署tar-zxvfhbase-1.0.0-bin.tar.gzmv/usr/hadoop/hbase-1.0.0/usr/hadoop/hbase修改配置文件配置regionserver节点vi/usr/hadoop/hbase/conf/regionserversslave141slave142slave143slave144slave145vi/usr/hadoop/hbase/co
1024find
·
2017-03-09 14:41
大数据集群安装
Hadoop+Hbase+Spark
集群配置
-Hbase HA安装
解压部署tar-zxvfhbase-1.0.0-bin.tar.gzmv/usr/hadoop/hbase-1.0.0/usr/hadoop/hbase修改配置文件配置regionserver节点vi/usr/hadoop/hbase/conf/regionserversslave141slave142slave143slave144slave145vi/usr/hadoop/hbase/co
1024find
·
2017-03-09 14:41
hbase
HA
zookeeper
大数据集群安装
Hadoop+Hbase+Spark
集群配置
—Zookeeper安装
解压、改名tar-zxvfzookeeper-3.4.6.tar.gzmvzookeeper-3.4.6zookeeper修改配置文件cp/usr/hadoop/zookeeper/conf/zoo_sample.cfg/usr/hadoop/zookeeper/conf/zoo.cfgvi/usr/hadoop/zookeeper/conf/zoo.cfgdataDir=/usr/hadoo
1024find
·
2017-03-09 14:33
大数据集群安装
Hadoop+Hbase+Spark
集群配置
—Zookeeper安装
解压、改名tar-zxvfzookeeper-3.4.6.tar.gzmvzookeeper-3.4.6zookeeper修改配置文件cp/usr/hadoop/zookeeper/conf/zoo_sample.cfg/usr/hadoop/zookeeper/conf/zoo.cfgvi/usr/hadoop/zookeeper/conf/zoo.cfgdataDir=/usr/hadoo
1024find
·
2017-03-09 14:33
zookeeper
hadoop
spark
hbase
大数据集群安装
Hadoop+Hbase+Spark
集群配置
—Hadoop HA安装
解压、改名tar-zxvfhadoop-2.6.0.tar.gzmvhadoop-2.6.0hadoop验证hadoop安装成功hadoopversion修改hadoop配置文件[1]vi/usr/hadoop/hadoop/etc/hadoop/core-site.xml###############################################fs.trash.inter
1024find
·
2017-03-09 14:24
大数据集群安装
Hadoop+Hbase+Spark
集群配置
—Hadoop HA安装
解压、改名tar-zxvfhadoop-2.6.0.tar.gzmvhadoop-2.6.0hadoop验证hadoop安装成功hadoopversion修改hadoop配置文件[1]vi/usr/hadoop/hadoop/etc/hadoop/core-site.xml###############################################fs.trash.inter
1024find
·
2017-03-09 14:24
大数据集群安装
Hadoop+Hbase+Spark
集群配置
—前期准备(免密和jdk配置)
移除已有jdk(最小化安装没有自带jdk,可略过此步骤)关闭防火墙(不同版本方法不一样)所有机器同步时间配置主机名hostname和hosts配置密钥验证免密码登录[全部免密]ssh-keygen-trsacpid_rsa.pubauthorized_keyschmod700~/.ssh/chmod600~/.ssh/authorized_keys创建并分发备用目录mkdir-pv/usr/h
1024find
·
2017-03-09 14:50
大数据集群安装
Hadoop+Hbase+Spark
集群配置
—前期准备(免密和jdk配置)
移除已有jdk(最小化安装没有自带jdk,可略过此步骤)关闭防火墙(不同版本方法不一样)所有机器同步时间配置主机名hostname和hosts配置密钥验证免密码登录[全部免密]ssh-keygen-trsacpid_rsa.pubauthorized_keyschmod700~/.ssh/chmod600~/.ssh/authorized_keys创建并分发备用目录mkdir-pv/usr/h
1024find
·
2017-03-09 14:50
大数据集群安装
Kafka
集群配置
部署
一、配置并运行kafka服务器1.在运行kafka服务器之前先搭建zookeeper环境此步省略,可参考http://code727.iteye.com/blog/23609442.在server.properties中配置broker#当前机器在集群中的唯一标识,和zookeeper的myid性质一样broker.id=0#当前kafka对外提供服务的端口,默认是9092port=9092#这个
心如止水dy
·
2017-03-09 11:39
技术原创
运维架构
Redis
集群配置
Redis集群向导本文不打算介绍复杂的分布式系统的概念,而仅作为一个入门介绍。旨在从用户的角度提供如何进行redis的配置,测试和操作。详细的配置参照https://redis.io/topics/cluster-spec。下面就以易于理解的方式向用户介绍Redis的可用性和持久性,版本要求3.0或者更高。想要创建一个在开发环境中运行的正式的redis服务器最好阅读更详细的文档,但该文可以作为一个
jintao_ma
·
2017-03-07 15:18
缓存服务
【Hadoop】
集群配置
要点
1.SSH免密码登录1.1生成公钥,一直enter,直到完成dream361@master:~$ssh-keygen-trsa1.2传送公钥dream361@master:~$scp/home/dream361/.ssh/id_rsa.pubdream361@slave4:/home/dream361/.ssh/authorized_keys1.3传送到其他节点并生成~/.ssh/authoriz
放心飞吧
·
2017-02-28 17:14
Hadoop
笔记
CentOS7 redis-3.2.8 从单机到主从再到
集群配置
redis官网:https://redis.io下载地址:https://redis.io/download获取redis源码包:http://download.redis.io/releases/redis-3.2.8.tar.gz下载redis并编译安装[root@bogon liuzhen]# wget http://download.redis.io/releases/redis-3.2.
liuzhenlife
·
2017-02-27 21:10
集群
单机
redis
理解zookeeper选举机制
zookeeper
集群配置
多个实例共同构成一个集群对外提供服务以达到水平扩展的目的,每个服务器上的数据是相同的,每一个服务器均可以对外提供读和写的服务,这点和redis是相同的,即对客户端来讲每个服务器都是平等的
min.jiang
·
2017-02-21 08:44
Storm UI 提供的 REST API 获取集群数据
请求前缀:http://:/api/v1/...GETOperations/api/v1/cluster/configuration 返回
集群配置
数据/api/v1/cluster/summary
AbnerSunYH
·
2017-02-17 19:12
storm
Lvs+keepalived
集群配置
1.网络:两个LVS互为主备(192.168.0.18,192.168.0.19),两台RealServer(192.168.0.25,192.168.0.26,运行nginx),两个VIP(192.168.0.16,192.168.0.17)2.采用LVS/DR+keepalived模式。3.两台LVS上需要先安装ipvsadm,并且需要加载ip_vs模块。4.启动顺序,两台LVS上先启动lvs
sdjjt
·
2017-02-16 16:08
Lvs
集群配置
keepalived
Linux
系统
Hadoop 集群安装
Hadoop应用
集群配置
1.修改
集群配置
文件vim/etc/profileexportJAVA_HOME=/usr/local/bigdata/jdkexportHADOOP_HOME=/usr/local
danevc
·
2017-02-10 11:37
NoSQL
ElasticSearch入门 第二篇:
集群配置
这是ElasticSearch2.4版本系列的第二篇:ElasticSearch入门第一篇:Windows下安装ElasticSearchElasticSearch入门第二篇:
集群配置
ElasticSearch
悦光阴
·
2017-02-05 12:00
FastDFS之文件服务器集群部署详解
在生成环境FastDFS一般都是用
集群配置
,以提高FastDFS的可用性,并发能力。部署架构:环境IP地址(关闭所
xiaoxiongmao8
·
2017-01-23 13:54
文件
集群
FastDFS
集群
HA之corosync+pacemaker+crmsh
node1192.168.150.137node1.comnode2192.168.150.138node2.comnfs192.168.150.139ansible192.168.150.1401、
集群配置
前准备两节点配置时间同步
扫地僧void
·
2017-01-22 15:10
Linux
OPS
linux环境下Apache+Tomcat
集群配置
写在前面apache配置多个tomcat,实现请求分流,多个tomcat服务均衡负载,增加服务的可靠性。最近研究了一下,遇到许多问题,记录一下,方便以后查阅,不喜欢apache,nginx也是可以做到的。准备版本很重要,我就是由于版本原因,一直报错linux使用#lsb_release-a查看当前linux系统版本。本例:CentOSLinuxrelease7.0.1406(Core)jdk使用#
abinbinge
·
2017-01-19 18:07
linux
Redis主从复制和
集群配置
Redis主从复制和
集群配置
redis主从复制概述1、Redis的复制功能是支持多个数据库之间的数据同步。
xiaoxiongmao8
·
2017-01-19 15:22
集群
主从
cluster
集群
elasticsearch走过的一些坑
如果你正在使用这个默认堆内存配置,你的
集群配置
可能会很快发生问题。这里有两种方式修改Elasticsearch的堆内存(下面就说内存好了),最简单的一个方法就是指定ES_HEAP_SIZE环境变量。
三井寿司
·
2017-01-18 10:36
redis3.0集群搭建
Redis集群搭建rediscluster介绍节点自动发现、集群容错slave选举、Cluster管理、
集群配置
管理。
易金刚
·
2017-01-16 15:19
redis
redis集群
nosql
基于Keepalived构建高可用
集群配置
实例
什么是集群简单的讲集群(cluster)就是一组计算机,它们作为一个整体向用户提供一组网络资源。这些单个的计算机系统就是集群的节点(node)。一个理想的集群是,用户从来不会意识到集群系统底层的节点,在他/她们看来,集群是一个系统,而非多个计算机系统。并且集群系统的管理员可以随意增加和删改集群系统的节点。关于更详细的高可用集群我们在后面再做详解,先来说说KeepalivedKeepalived是什
51eA
·
2017-01-12 23:17
vrrp
core
check
Aps
Elasticsearch 安装与
集群配置
一、软件版本操作系统:CentOS-6.5-x86_64ES版本:5.0主机:192.168.63.246主机:192.168.63.242二、部署环境规划:1、需求:jdk版本:open-jdk.1.8[root@wwwconfig]#java-versionopenjdkversion"1.8.0_101"OpenJDKRuntimeEnvironment(build1.8.0_101-b13
1362802538
·
2017-01-10 10:27
日志分析
大数据
ELK
Hadoop 2.6.0 HA高可用
集群配置
详解
1HadoopHA架构详解1.1HDFSHA背景HDFS集群中NameNode存在单点故障(SPOF)。对于只有一个NameNode的集群,如果NameNode机器出现意外情况,将导致整个集群无法使用,直到NameNode重新启动。影响HDFS集群不可用主要包括以下两种情况:一是NameNode机器宕机,将导致集群不可用,重启NameNode之后才可使用;二是计划内的NameNode节点软件或硬件
jackwxh
·
2017-01-06 11:31
客户端
active
standby
hadoop
springcloud(十):服务网关zuul
articles/385555前面的文章我们介绍了,Eureka用于服务的注册于发现,Feign支持服务的调用以及均衡负载,Hystrix处理服务的熔断防止故障扩散,SpringCloudConfig服务
集群配置
中心
weixin_34239169
·
2017-01-06 11:00
Ubuntu 14.04中Elasticsearch
集群配置
Ubuntu14.04中Elasticsearch
集群配置
前言:本文可用于elasticsearch集群搭建参考。
杨文波
·
2017-01-05 16:00
Ambari安装与
集群配置
参考网址:http://www.ibm.com/developerworks/cn/opensource/os-cn-bigdata-ambari/index.htmlhttp://docs.hortonworks.com/HDPDocuments/Ambari-2.4.2.0/bk_ambari-installation/content/index.html第一部分:基本环境准备准备3个节点,下
程裕强
·
2017-01-03 18:45
大数据
Ambari运维
基于LevelDB的高可用ActiveMQ集群
htmlTheFailoverTransport(连接高可用集群):http://activemq.apache.org/failover-transport-reference.htmlActiveMQ的几种
集群配置
Donald_Draper
·
2016-12-28 18:00
activemq
基于LevelDB的高可用ActiveMQ集群
htmlTheFailoverTransport(连接高可用集群):http://activemq.apache.org/failover-transport-reference.htmlActiveMQ的几种
集群配置
Donald_Draper
·
2016-12-28 18:00
activemq
HA高可用
集群配置
环境:主机(master):192.168.11.160主机(slave):192.168.11.20流动ip:192.168.11.1001.关闭主从机器的防火墙,配置文件/etc/selinux/config,修改SELINUX=disabled,iptables-F2.编辑主从机器的hosts文件/etc/hosts,修改hostname,便于标记192.168.11.160master19
huangzp168
·
2016-12-22 18:05
集群
集群
上一页
48
49
50
51
52
53
54
55
下一页
按字母分类:
A
B
C
D
E
F
G
H
I
J
K
L
M
N
O
P
Q
R
S
T
U
V
W
X
Y
Z
其他