namenode双机热备

华为智能企业上网行为管理安全解决方案（2）

华为智能企业上网行为管理安全解决方案（2）课程地址方案部署整体流程组网规划基础网络配置路由规划安全区域规划高可靠性配置防火墙双机热备ASG双机热备业务部署上网行为管理课
SeanQhl·2023-10-01 17:15

Hadoop 系列（一）—— 分布式文件系统 HDFS

二、HDFS设计原理https://github.com/heibaiying2.1HDFS架构HDFS遵循主/从架构，由单个NameNode(NN)和多个DataNode(DN)组成：NameNode
heibaiying·2023-10-01 13:27

zookeeper理论学习（paxos和Zab协议）

动物园管理员协调分布式环境下的服务解决分布式环境中的问题分布式环境下无法保证顺序执行分布式环境下无法明确执行结果（可能由于网络的波动,无法判断结果是否执行成功）无法保证数据一致性应用和dubbo配合保证多点服务的可用性hadoop确保整个集群只有一个NameNode
qtshe·2023-10-01 12:06

防火墙基础

3、防火墙使用VRRP实现双机热备时会遇到什么问题，如何解决？4、防火墙支持那些接口模式，一般使用在那些场景？5、防火墙旁挂引流方案有哪些？好处是什么？
∮d(y)√i²·2023-10-01 11:19

传统安防音视频平台架构

内部级联,为上下级均为自己平台海康子进程调用海康的设备SDKPTPCS通过封装代理不同的私有协议的差异,封装为大华统一的三代协议PC客户端通过调用平台SDKCMS一般采用双机热备技术PTPCS系统一般采用
百鸣·2023-09-29 16:37

kubernetes获取所有POD的IP信息

kubectlgetpods-nxxxx-o=custom-columns=NAME:.metadata.name,Node-IP:.status.hostIP,Pod-IP:.status.podIPNAMENode-IPPod-IPxxxx
海盗巨人·2023-09-29 08:21

2023年大数据面试题--转载

HDFS采用了主（NameNode）从（DataNode）结构
李先生真号·2023-09-29 01:22

mysql5.7.22双机热备份（个人笔记）

1.配置my.cnf文件修改A的/etc/my.cnf文件，在my.cnf配置项中加入下面配置：server-id=1#Server标识log-binbinlog-do-db=test#指定需要日志的数据库2.分别进入mysql主机A:106.14.200.10CHANGEMASTERTOMASTER_HOST='106.14.200.12',MASTER_USER='root',MASTER_P
西门只会吹雪·2023-09-29 01:06

Hadoop集群配置HA，开启故障自动转移后NameNode未正常切换问题解决

集群做了HA，bigdata01机器默认为active，bigdata02机器为standby，为了测试高可用，认为kill掉bigdata01节点的Namenode进程，发现bigdata02上的NameNode
Java_rainbow·2023-09-28 19:44

hadoop3.1.4 完全分布式搭建HA（namenode resourcemanager高可用）保姆级教程-详细步骤-快速搭建-详解配置-历史服务器

一.集群规划ip主机名安装进程192.168.204.14hdp14namenode,ZKFC,resourcemanager192.168.204.15hdp15namenode,ZKFC,resourcemanager192.168.204.16hdp16natanode
薛定谔的猫不吃猫粮·2023-09-28 17:05

一、大数据技术基础——分布式文件系统HDFS

目录1.引入1.1.传统存储系统面临的难题1.2.解决之道2.Hadoop集群架构3.HDFS1.03.1.概念3.2.Block块3.3.NameNode维护文件：fsimage与editlog3.4
百颂伊·2023-09-28 02:48

Hadoop NameNode 高可用 (High Availability) 实现解析

转至：https://www.ibm.com/developerworks/cn/opensource/os-cn-hadoop-name-node/NameNode高可用整体架构概述在Hadoop1.0
AlexYao·2023-09-27 16:58

大数据技术Hadoop笔试题

a)NameNodeb)Jobtrackerc)Datanoded)secondaryNameNodee)tasktracker2.HDfS中的block默认保存几份?a)3份b)2份c)1份
weixin_34235105·2023-09-27 07:51

大数据技术Hadoop面试题

a)NameNodeb)Jobtrackerc)Datanoded)secondaryNameNodee)taskt
IT时代周刊·2023-09-27 07:19

启动HDFS时报错ERROR: Attempting to operate on hdfs namenode as root

企图用root用户，在hdfs的namenode中进行操作，但是呢，HDFS_NAMENODE_USER相关没有定义。网上查询了一下，大概就是我们用root用户操作，没有在环境变量中定义变量。
白鸽呀·2023-09-26 12:33

Hadoop(HDFS,YARN)的HA集群安装

安装规划角色规划IP/机器名安装软件运行进程namenode1zdh-240hadoopNameNode、DFSZKFailoverController、ResourceManagernamenode2zdh
木木与呆呆·2023-09-26 08:49

hadoop组件HDFS

Namenode:主角色,负责和客户端进行沟通.Datanode:从角色,负责存储数据Secondarynamenode:秘书,服务器数据的收集，将信息传递给namenode注：Namenode宕机时集群会通过选举机制
枯河垂钓·2023-09-26 06:01

Linux Haproxy详细配置教程

1LinuxHaproxy负载均衡v1.8★★★类似于ningx的反向代理1.1Haproxy概述Haproxy是一个开源的高性能的反向代理或者说是负载均衡服务软件之一，它支持双机热备、虚拟主机、基于TCP
weixin_34288121·2023-09-26 06:42

SpringCloud微服务实战——搭建企业级开发框架（二十七）：集成多数据源+Seata分布式事务+读写分离+分库分表

  读写分离：为了确保数据库产品的稳定性，很多数据库拥有双机热备功能。也就是，第一台数据库服务器，是对外提供增删改业务的生产服务器；第二台数据库服务器，主要进行读的操作。  
·2023-09-25 20:09

Hadoop Cluster Setup

通常，cluster内的一台作为NameNode，另一台作为ResourceManager。这些都是masters角色。
偷油考拉·2023-09-25 19:16

查看java进程gc频率和堆内存信息

hadoop@node1~]$jps26276nimbus27238Logstash31017RunJar13579AzkabanExecutorServer7307Jps27180Logstash22799NameNode23025SecondaryNameNode232
IT_小白·2023-09-25 16:17

ros2的humble版本设置日志打印级别

总共有3个方法1.在命令行中设置ros2runpkg_namenode_name--ros-args--log-levelWARN2.在源文件中设置#include"rcutils/error_handling.h"autoret
饕餮ing·2023-09-24 23:11

大数据开发工程师面试题

默认3份3、哪个程序通常与NameNode在一个节点启动？Jobtracker4、HDFS默认BlockSize是多少？
完美屁桃·2023-09-24 08:27

k8s核心概念 pod调度和生命周期

文章目录调度约束方法nodeNamenodeSelectorPod调度流程pod生命周期生命周期概述pod生命周期流程容器启动容器终止容器重启策略回顾容器生命周期健康检查健康检查方式Probe探测方式探测方式举例
double_happiness·2023-09-24 00:36

HDFS 底层交互原理，看这篇就够了！

本篇文章概览如下图：1.HA架构组成1.1HA架构模型在HDFS1.X时，NameNode是HDFS集群中可能发
小林玩大数据·2023-09-23 21:13

hadoop之旅3-centerOS7： 搭建hadoop免密集群启动

[root@localhostmmcc]#hadoop-daemon.shstartnamenode//主节点master[root@localhostmmcc]#hadoop-daemon.shstartdatanode
尔以凡·2023-09-23 16:25

HDFS文件系统中，Fsimage和Edits

文件块位置信息只存储在内存中，是在DataNode加入集群的时候，NameNode询问DataNode得到的，并且间断的更新。
bankq·2023-09-23 15:30

风哥PG-DBA培训15：PostgreSQL集群解决方案与流复制项目实战

数据库的系列课程，本课程属于PostgreSQL主从复制与高可用集群阶段之PostgreSQL集群解决方案与流复制项目实战，学完本课程可以掌握PostgreSQL集群与高可用架构解决方案，PostgreSQL双机热备
风哥2号·2023-09-23 06:45

mysql 半同步复制模式使用详解

、mysql主从架构简介2.1mysql主从复制架构概述2.2为什么使用主从架构2.2.1提高数据可用性2.2.2提高数据可靠性2.2.3提升数据读写性能2.3主从架构原理2.4主从架构扩展2.4.1双机热备
小码农叔叔·2023-09-23 03:01

Java大数据学习~Hadoop初识二读取与写入流程

HDFS的写入流程在HDFS客户端想要往HDFS写入文件，流程如下写入数据流程图首先客户端发送请求，携带者配置文件信息，还有文件的路径访问到NameNode后，NameNode根据文件路径，去查看该路径是否存在
胖琪的升级之路·2023-09-23 00:04

k8s学习(12)--在linux上直接安装kubesphere集群版

，其中128为master节点，129为node1，130为node2，修改主机名并关闭三台机子的防火墙hostnamectlset-hostnamemasterhostnamectlset-hostnamenode1hostnamectlset-hostnam
mac文的java路·2023-09-22 23:11

Linux：haproxy部署--搭建nginx集群

Haproxy介绍Haproxy是一个开源的高性能的反向代理或者说是负载均衡服务软件之一，它支持双机热备、虚拟主机、基于TCP和HTTP应用代理等功能。
鲍海超-GNUBHCkalitarro·2023-09-22 18:23

大数据-hadoop

Cloudera在大型互联网企业中用的较多Hortonworks文档较好1.4架构hadoop由三个模块组成分布式存储HDFS分布式计算MapReduce资源调度引擎Yarn分布式文件存储系统HDFSNameNode
highly2009·2023-09-22 10:59

Hadoop集群之HDFS

架构介绍HDFS采用的是主从架构(Master/Slave)，其中namenode是
风起云端·2023-09-22 03:33

linux 虚拟ip 双机,keepalived配置虚拟ip（vip）实现双机热备以及自动切换主备

背景：为什么做这个事情，写这个文章我们项目的域名指向的是172.22.90.239，但实际上我们没这台机器，这是个虚拟ip，只有172.22.90.230，请求239为什么实际指向的是230机器？和之前的运维沟通过，他们也不记得了。几年前的老运维做的。只听他们口中说出一名词：keepalived&VIP，百度了一波学习。实操过程物理机准备：172.22.90.171和172.22.90.170两台
消失的下一次·2023-09-21 19:49

大数据学习之Hadoop

HDFS：HDFS是由Namenode和Datanode组成。Namenode负责管理文件系统的namespace和客户端对文件的访问。Datanode负责管理节点上的存储。
我问你瓜保熟吗·2023-09-21 04:40

Hadoop集群--(2)启动&初体验

本质上是一些清理和准备工作，因为此时的HDFS在物理上还是不存在的hdfsnamenode-format或者hadoopnamenode-format1.1.单节点逐个启动在主节点上使用以下命令启动HDFSNameNode
周凡_07b2·2023-09-21 02:06

centos7 mysql集群搭建

mysql集群前置条件修改集群节点设备计算机名称hostnamectlset-hostnamenode1#以此类推node2,3实现集群节点之间的ssh互信功能functionssh_trust(){result
祈心无尘·2023-09-20 15:59

开源分布式存储系统（HDFS、Ceph）架构分析

文章目录中间控制节点架构-HDFSNameNode节点分析DataNode节点分析SecondNameNode节点分析Client分析完全无中心架构-CephCephMonitor分析CephOSD分析
gengduc·2023-09-20 05:25

[hive]搭建hive3.1.2hiveserver2高可用可hive metastore高可用

hiveonsparkhiveserver2webUI高可用集群启动脚本_薛定谔的猫不吃猫粮的博客-CSDN博客没用里头的hiveonspark,测试后发现版本冲突一、Hive集群规划(蓝色部分)ck1ck2ck3SecondaryNameNodeNameNodeDataNodeDataNod
胖胖学编程·2023-09-20 05:34

Hadoop的HDFS高可用方案

一、Hadoop高可用简介Hadoop高可用(HighAvailability)分为HDFS高可用和YARN高可用，两者的实现基本类似，但HDFSNameNode对数据存储及其一致性的要求比YARNResourceManger
万里长江横渡·2023-09-19 20:55

Hadoop2.0 HDFS高可用架构

上图是一个典型的HA集群，NameNode会被配置在两台独立的机器上，在任何时间上，一个NameNode处于活动状态，而另一个NameNode处于备份状态，活动状态的NameNode会响应集群中所有的客户端
truezqx·2023-09-19 09:35

Hadoop NameNode执行命令工作流程

HadoopNameNode执行命令工作流程客户端API或者CLI与NameNode的交互命令数据的格式(1)预处理流程(2)创建NameNode与NameNodePrcServer流程(3)HDFSAPI
lastembryoXX·2023-09-19 07:27

macOS Big Sur系统基于docker部署Hadoop集群

macOSBigSur11.3.11.集群环境要求类别版本OScentos7jdkjdk1.8hadoopHadoop2.9.22.集群规划集群服务器名称IP集群规划linux001172.16.0.2namenode
回笼觉觉猪·2023-09-19 05:48

Centos7服务器初始化

一.修改主机名修改所有三个主机名：静态、瞬态和灵活主机名：[root@localhost~]#hostnamectlset-hostnamenode001[root@localhost~]#hostnamectlset-hostname
攻城狮悠扬·2023-09-18 10:37

MapReduce & YARN 的部署

1、部署说明HadoopHDFS分布式文件系统，我们会启动：NameNode进程作为管理节点DataNode进程作为工作节点SecondaryNamenode作为辅助同理，HadoopYARN分布式资源调度
新征程，再出发·2023-09-18 03:30

安装伪分布的Hadoop时SHUTDOWN_MSG: Shutting down NameNode at master及Hadoop namenode节点无法启动的问题解决

系统提示且namenode一直无法启动如果是这种情况就去看虚拟机的hostname的名称是否和虚拟机的vi/etc/hosts中的ip是否配的一致，如果没有的话，就修改下名称或者ip然后重启网络namenode
zhaozuoyou·2023-09-17 22:46

大规模数据处理之架构图

①NameNode：维护文件元数据FsImage和操作日志EditLog。②SecondaryNameNode：NameNode的备份的进程。
JerryTom·2023-09-17 20:19

HDFS的Shell操作

1.1.1、一键启动HDFS集群$HADOOP_HOME/sbin/start-dfs.sh，一键启动HDFS集群start-dfs.sh执行原理：在执行此脚本的机器上，启动SecondaryNameNode
新征程，再出发·2023-09-17 09:23

六、HADOOP-HA(zookeeper之后)

一、HDFS的HAHSFS传统集群只有一个NameNode，当此Manager宕机后，整个集群就宕机了，只有等管理员手动重启修复了NameNode之后，才会恢复。
一种依耐丶从未离开·2023-09-17 08:17
上一页 8 9 10 11 12 13 14 15 下一页
按字母分类： ABCDEFGHIJKLMNOPQRSTUVWXYZ其他