E-COM-NET
首页
在线工具
Layui镜像站
SUI文档
联系我们
推荐频道
Java
PHP
C++
C
C#
Python
Ruby
go语言
Scala
Servlet
Vue
MySQL
NoSQL
Redis
CSS
Oracle
SQL Server
DB2
HBase
Http
HTML5
Spring
Ajax
Jquery
JavaScript
Json
XML
NodeJs
mybatis
Hibernate
算法
设计模式
shell
数据结构
大数据
JS
消息中间件
正则表达式
Tomcat
SQL
Nginx
Shiro
Maven
Linux
QJM
Collections.unmodifiableList方法的使用与场景
qjm
=cnnhttp://auto.315che.com/liwei/qa24085615-r1.h
20101975liubin
·
2017-09-19 21:00
探索laravel里的encrypt和decrypt实现
生成后例子应该是这样的APP_KEY=base64:5BM1BXGOBrGee
qJM
AWJZSzyzh5yPcCGOcOGPtUij65g=在文件配置加
梦醉书香
·
2017-09-18 20:20
探索laravel里的encrypt和decrypt实现
生成后例子应该是这样的APP_KEY=base64:5BM1BXGOBrGee
qJM
AWJZSzyzh5yPcCGOcOGPtUij65g=在文件配置加
梦醉书香
·
2017-09-18 20:20
Hadoop权威指南(第4版)-OReilly 2016 读书笔记
ReadingNotes.md初识Hadoop关于MapReducemapper和reducercombiner*HDFSp48Hadoop2:HA,备用namenode2种HA共享存储:NFS过滤器
QJM
志_祥
·
2017-08-28 13:09
读书笔记
hadoop2.0 HA的主备自动切换
在《hadoop2.0
QJM
方式的HA的配置》一文中介绍了HA的配置,是通过手工进行主备切换的。本文在这基础上,继续介绍HA的主备自动切换(automaticfailover)的配置。
克终
·
2017-08-07 20:02
分布式存储
hadoop系列文档3-配置Hdfs高可用HA
[-]背景架构设计如何配置HA
QJM
分配每个节点需要安装的服务hdfs-sitexml中的配置信息Core-sitexml中的配置如何启动Step1启动JournalNode集群Step2格式化NameNodeStep3
czp11210
·
2017-07-18 11:29
使用
QJM
实现 HDFS 的 HA
本文是在hadoop集群部署(yarn)基础上增加的配置内容,因为那篇缺少HDFS的HA配置,在生产环境不够完整。hadoop官方提供了两种HDFS的HA配置方案,两种方案殊途同归,但是需要的钱、精力和技术不同。如果对HDFS架构熟悉的话(如果不熟悉,可以通过HDFS架构了解),就应该知道,NameNode通过FsImage和EditLog两个文件管理DataNode的数据,SecondaryNa
看山
·
2017-07-10 11:12
大数据
架构
构建高可靠hadoop集群之3- Quorum Journal Manager
本文主要是对http://hadoop.apache.org/docs/r2.8.0/hadoop-project-dist/hadoop-hdfs/HDFSHighAvailabilityWith
QJM
.html
正在战斗中
·
2017-06-16 17:00
hadoop高可靠性HA集群
hadoop2.x官方提供了两种HDFSHA的解决方案,一种是NFS,另一种是
QJM
。这里楼主使
jjjyyy66
·
2017-05-15 14:42
解决方案
active
standby
Hadoop 2.x之HDFS利用
QJM
实现HA高可用
【启动顺序】1、关闭防火墙#serviceiptablesstop2、启动三台zookeeper#zkServer.shstart3、在其中一个namenode上格式化,这个步骤只需要操作一次,以后跳过这步#hdfsnamenode-format4、在其中一个namenode上初始化zkfc,这个步骤只需要操作一次,以后跳过这步#hdfszkfc-formatZK5、全面启动#start-all.
Wiki-9527
·
2017-05-05 19:20
Hadoop
hadoop高可靠性HA集群
hadoop2.x官方提供了两种HDFSHA的解决方案,一种是NFS,另一种是
QJM
。这里楼主使用简
jjjyyy66
·
2017-05-05 16:58
解决方案
active
信息
Hadoop2.6.0 + zookeeper集群环境搭建
阅读更多前提:已安装好centos6.5操作系统HadoopHA(
QJM
)集群配置规划IPHostname备注192.168.100.101h1m1NN(active)、RM、ZKFC192.168.100.102h1m2NN
longzhun
·
2017-05-05 15:00
【Hadoop】基于
QJM
的HDFS高可用系列三 - 管理
官方文档翻译,官方链接。翻译水平有限,且以学习为主,请谅解和提意见。转载请注明出处!!!管理命令现在HA的NameNode已经配置并启动,可以访问一些附加命令,管理HAHDFS集群。特别是,可以了解hdfshaadmin命令的所有子命令。这个命令没有额外的参数,使用信息如下:Usage:haadmin[-transitionToActive][-transitionToStandby][-fail
mikeliuy
·
2017-04-26 15:39
【Hadoop】基于
QJM
的HDFS高可用系列二 - 部署
官方文档翻译,官方链接。翻译水平有限,且以学习为主,请谅解和提意见。转载请注明出处!!!接着上一篇发布的文章继续翻译。这次从部署章节开始。部署配置概述类似联邦的配置,HA的配置向后兼容,且允许不改变现有的单NameNode配置集群的配置。如此设计新的配置,以致于在集群所有节点可以使用相同的配置,不需要基于此类型的节点部署不同的配置文件到不同的机器上。像HDFS联邦机制一样,HA集群重用namese
mikeliuy
·
2017-04-25 22:27
HA高可用
2.
QJM
QuorumJournalManager3.两个名称节点active//激活standby//待命active//激活deactive//钝化SPOF----------------singlepointoffailure
duzewen
·
2017-03-22 14:43
(02)ActiveMQ学习-2017/2/21
JMS定义了Java中访问消息中间件的接口,并没有给予实现,实现JMS接口的消息中间件称为JMSProvider,例如ActiveM
QJM
Sprovider:实现JMS接口和规范的消息中间件JMSmessage
Andy2017
·
2017-02-21 22:00
京东消息中间件JMQ
详细架构AM
QJM
Q服
IXHONG
·
2016-12-22 20:00
京东
消息中间件
JMQ
京东消息中间件JMQ
详细架构AM
QJM
Q服
IXHONG
·
2016-12-22 20:00
京东
消息中间件
JMQ
Eclipse连接Hadoop2.7.3集群配置及测试
1.安装Hadoop2.7.36节点集群并HAwith
QJM
andRMnodeNNDNZKFCZKJNRMNMmaster11111salve111111salve21111salve311salve411salve5112
green_eric
·
2016-10-29 23:11
hadoop
gpxe安装esxi
url=w9Slq4dkhszRcv0BWCK7HFdAvn68pWi3P9nYtvpSfpPE6XAfhwkrDdIsQaLyUVPGGeVVOVoTsdIW1U85Coav3k7
QJm
JDGqlZQesfiR-worW
dickmo110
·
2016-10-11 16:57
gpxe
esxi
HDFS
QJM
机制分析
前言上周写了一篇译文专门从结构设计的层面来分析HDFS的
QJM
的架构设计,总体而言,文章偏重理论介绍.本文将继续围绕
QJM
机制展开分析,但是不同点在于,本文将会从更细粒度的层面来分析这套机制,帮助大家从源代码层面理解
Android路上的人
·
2016-08-27 17:07
Hadoop
HDFS
HDFS
QJM
的架构设计
前言HDFS作为一套成熟的分布式存储系统,它的HA机制很多人可能都比较清楚,但是与之相关联的HDFS
QJM
机制可能了解它的人就不是那么多了.HDFS-3077(Quorum-basedprotocolforreadingandwritingeditlogs
Android路上的人
·
2016-08-20 17:23
hdfs
qjm
设计
Hadoop
HDFS
Hadoop之HDFS的HA与
QJM
本文主要介绍HDFSHA特性,以及如何使用
QJM
(QuorumJournalManager)特性实现HDFSHA。
wangwei4078
·
2016-08-18 10:42
管理员
active
standby
Hadoop
ActiveMQ学习
ActiveMQ学习标签(空格分隔):ActiveM
QJM
SActiveMQ简介ActiveMQ是JMS消息通信规范的一个实现,通过ActiveMQ消息服务交换消息。
a101070096
·
2016-07-12 09:00
java
通信
activemq
hadoop HA高可用集群模式搭建指南
两台NN之间同步数据有两种方法:
QJM
和NFC。本文选择
QJM
方式,下文中出现的journalnode即为
QJM
模式下的进程。
mtide_net
·
2016-07-03 08:50
美国人只是爱读书?其实他们的阅读教学真有名堂!
说明:本文授权转载自“点灯人教育”微信公众号(
qjm
yddr)。文|李文玲编辑|曹雪峰今天非常高兴能有机会和大家座谈。我从事儿童阅读研究大约20多年,想把自己的一些经验跟大家分享
外滩教育
·
2016-05-07 00:00
Hadoop升级(HA) 2.2升级到2.6
官网的文档[HDFSHighAvailabilityWith
QJM
.html]和[HdfsRollingUpgrade.html](NotethatrollingupgradeissupportedonlyfromHadoop
Mrknowledge
·
2016-05-06 13:00
Hadoop--HDFS
分布式文件系统)配置的位置:/letv/data/hadoop-2.6.0/etc/Hadoop配置hdfs-site.xml:hadoop2.0官方提供了两种HDFSHA的解决方案,一种是NFS,另一种是
QJM
JackLi31742
·
2016-04-28 15:00
hadoop
hdfs
yarn
一个namenode能正常启动,状态为active,另一个namenode无法启动
简介:我在搭建hadoop2.5.1的HDFS(HAWith
QJM
)时遇到了上述问题。在此先强调一点:我之前做过HA,现在要重做。
u013226462
·
2016-04-28 11:00
Cloudera产品高可用性配置
1.设置高可用性4.1使用QuorumJournalManager进行共享存储在ClouderaManager5中,HA是通过
QJM
方式实现的。
u010022051
·
2016-04-21 09:00
Hadoop HA HDFS启动错误之org.apache.hadoop.ipc.Client: Retrying connect to server问题解决
近日,在搭建HadoopHA
QJM
集群的时候,出现一个问题,如本文标题。网上有很多HA的博文,其实比较好的博文就是官方文档,讲的已经非常详细。所以,HA的搭建这里不再赘述。
mexp
·
2016-03-19 22:55
hadoop
ipc
错误
Hadoop HA HDFS启动错误之org.apache.hadoop.ipc.Client: Retrying connect to server问题解决
近日,在搭建HadoopHA
QJM
集群的时候,出现一个问题,如本文标题。网上有很多HA的博文,其实比较好的博文就是官方文档,讲的已经非常详细。所以,HA的搭建这里不再赘述。
mexp
·
2016-03-19 22:55
错误
ipc
hadoop
大数据
【Hadoop 2.7.x】HA 配置
一、http://hadoop.apache.org/docs/current/hadoop-project-dist/hadoop-hdfs/HDFSHighAvailabilityWith
QJM
.html
wilbur
·
2016-03-18 15:00
使用Jmeter创建ActiveMQ JMS POINT TO POINT请求
插件下载地址点我,ActiveMQ下载地址点我Jmeter下载编译好的包解压就行了,为方便起见,解压目录我这里统称为JMETER_HOME,当然也可以下载源码(需要自己编译源码)安装解压ActiveM
QJM
eterPlugins-Standard
小强测试
·
2016-02-29 10:45
JMS
ActiveMQ
jmeter
性能测试LR
&
Jmeter
hadoop-2.6.2 namenode resourcemanager ha 环境搭建
在这以前我想先分享一下hadoopnamenode基于
QJM
实现HA的原理。
阿拉德大陆的魔法师
·
2016-02-16 16:00
NameNode
HA
ResourceManager
hadoop-2.6.2
activemq实例
ACTIVEMQ入门实例1.下载版本版本:apache-activemq-5.4.12.解压运行apache-activemq-5.4.1\bin下的activemqFailedtostartActiveM
QJM
SMessageBroker.Reason
泡海椒
·
2016-01-25 12:00
如何配置Hadoop2.0HDFS的HA以及联邦使用
QJM
配置过程详述 大家从官网下载的apachehadoop2.2.0的代码是32位操作系统下编译的,不能使用64位的jdk。我下面部署的hadoop代码是自己的64位机器上重新编译过的。服务器都是64位的,本配置尽量模拟真实环境。大家可以以32位的操作系统做练习,这是没关系的。关于基本环境的详细配置,大家可以观看我的视频,或者浏览吴超沉思录的相关文章。 在这里我们选用4台机器进行示范,各台机
u011955252
·
2016-01-19 14:00
hdfs
HA
qjm
ZKFC
HDFS之Qurom Journal Manager(
QJM
)实现机制分析
自从hadoop2版本开始,社区引入了NameNode高可用方案。NameNode主从节点间需要同步操作日志来达到主从节点元数据一致。最初业界均通过NFS来实现日志同步,大家之所以选择NFS,一方面因为可以很方便地实现数据共享,另外一方面因为NFS已经发展20多年,已经相对稳定成熟。虽然如此,NFS也有缺点不能满足HDFS的在线存储业务:网络单点及其存储节点单点。业界提供了数据共享的一些高可用
u011955252
·
2016-01-19 14:00
qjm
节点之间的同步算法
Hadoop2.0的HA介绍
hadoop2.0的HA机制官方介绍了有2种方式,一种是NFS(NetworkFileSystem)方式,另外一种是
QJM
(QuorumJourna
u011955252
·
2016-01-19 14:00
hdfs
HA
使用
QJM
部署HDFS HA集群
一、所需软件1.JDK版本下载地址:http://www.oracle.com/technetwork/java/javase/index.html版本: jdk-7u79-linux-x64.gz2.Hadoop软件下载地址:http://hadoop.apache.org/releases.html版本: hadoop-2.6.0.tar.gz二、配置ssh免密码登陆:查阅之前博客:http:
一寸相思万千劫
·
2016-01-18 18:00
HDFS High Availability Using the Quorum Journal Manager
HDFSHighAvailabilityUsingtheQuorumJournalManager》http://hadoop.apache.org/docs/r2.5.2/hadoop-project-dist/hadoop-hdfs/HDFSHighAvailabilityWith
QJM
.html
该昵称已经被占用
·
2016-01-01 11:06
Hadoop学习专辑
HDFS High Availability Using the Quorum Journal Manager
HDFSHighAvailabilityUsingtheQuorumJournalManager》http://hadoop.apache.org/docs/r2.5.2/hadoop-project-dist/hadoop-hdfs/HDFSHighAvailabilityWith
QJM
.html
u011414200
·
2016-01-01 11:00
Hadoop2.0的HA介绍
hadoop2.0的HA机制官方介绍了有2种方式,一种是NFS(NetworkFileSystem)方式,另外一种是
QJM
(QuorumJourna
u010299467
·
2015-12-13 20:00
关于hadoop 配置文件的一些实验
机器配置如下,两台机器,nn2,nn2,搭建基于
QJM
的高可用集群,zk集群。
tneduts
·
2015-11-28 20:00
使用NFS实现HA(HDFS High Availability With NFS)
注意:
QJM
或者共享存储本指南讨论如何配置使用HDFSHA使用NFS目录在活跃的和备份的NameNode之间分享edit日志,对于如何通过
QJM
实现HA请参考上篇博客。背景Hadoop
shubingzhuoxue
·
2015-11-27 16:00
HDFS利用
QJM
实现HA(HDFS High Availability Using the Quorum Journal Manager)
目的本指南概述HDFS的高可用性(HA)的特性,以及如何配置和管理HAHDFS集群,使用
QJM
特性。本文假设读者有一个大致了解通用组件和一个HDFS集群中的节点类型。详情请参阅HDFS架构指南。
shubingzhuoxue
·
2015-11-27 16:00
HDFS HA与
QJM
[官网整理]
【使用
QJM
构建HDFSHA架构(2.2+)】本文主要介绍HDFSHA特性,以及如何使用
QJM
(QuorumJournalManager)特性实现HDFSHA。
lhui798
·
2015-11-20 16:00
HDFS HA with
QJM
&& ResourceManager HA配置
背景:两台机器,ubuntu21(10.67.2.21)和ubuntu20(10.67.2.20)master为10.67.2.21slave为10.67.2.20两台机器上都有zookeeper。用HA后,期望21上的Namenode和ResourceManager是active的,而20上的是standby;遇到namenode/resourcemanagerdown掉的情况,可以自动切换到s
rongyongfeikai2
·
2015-11-19 15:00
深入浅出Future Pattern
前几天看hdfs
QJM
的代码,里面看到一个ListenableFuture,说实话对于Java,目前我还只是通过看代码,遇到没见过的再去查的方式,也着实是没有时间和精力再去通篇研读诸如《thinkinginJava
m635674608
·
2015-11-18 16:00
维护sybase数据库的DBA必须掌握的命令
1、dump命令这是sybase数据库中常用的备份命令,格式为dumpdatabase
QJM
ISto“z:\
qjm
is20040324”命令的含义是把用户数据库
QJM
IS备份到z盘的根目录下,备份文件名为
被使用的文件
·
2015-11-14 15:00
上一页
1
2
3
4
5
6
7
8
下一页
按字母分类:
A
B
C
D
E
F
G
H
I
J
K
L
M
N
O
P
Q
R
S
T
U
V
W
X
Y
Z
其他