hadoop2+集群+yarn 第28页

zk集群--集群同步

1.概述前面一章分析了集群下启动阶段选举过程，一旦完成选举，通过执行QuorumPeer的setPeerState将设置好选举结束后自身的状态。

raindayinrain·2024-02-06 12:33

Redis集群实战篇

Redis集群实战篇目录1.拉取redis镜像2.配置文件2.1生成目录2.2建立配置文件3.启动redis实例3.1.启动一个实例（带参数说明）3.2.利用批量命令，同时启动6个实例5.编排集群操作6

燃灯工作室·2024-02-06 11:35

HbuilderX打包成apk安卓安装包并装到手机上

打包命令：yarnbuild2.下载HbuilderX本次分享需要用到非常重要的工具HbuilderX，这是dcloud.io出口的一款非常有用的前端开发工具，内置发布成为app的功能

ANnianStriver·2024-02-06 10:55

MongoDB聚合：$listSampledQueries

如果在集群上使用时，需要具备clusterMo

原子星·2024-02-06 10:42

DockerUI如何部署结合内网穿透实现公网环境管理本地docker容器

基于容器安装方式，部署方便高效，浏览和维护docker单节点或集群节点work

是Nero哦·2024-02-06 10:31

RabbitMQ集群搭建

rabbitMQ的两种重要特性,异步化提高系统抗峰值能力和系统及功能解耦，这两个特点决定了rabbitMQ在我们的系统中占据了重要的地位，所以为了让RabbitMQ高可用，我们今天就来讲解下RabbitMQ的集群环境搭建应用常识一般情况下

AmosZhu·2024-02-06 10:12

腾讯 tRPC-Go 教学——（3）微服务间调用

本文我们就来看看腾讯是怎么使用tRPG-Go构建后台微服务集群的。

·2024-02-06 09:23

决胜大数据时代：Hadoop&Yarn&Spark企业级最佳实践（8天完整版脱产式培训版本）...

Hadoop、Yarn、Spark是企业构建生产环境下大数据中心的关键技术，也是大数据处理的核心技术，是每个云计算大数据工程师必修课。

weixin_30273931·2024-02-06 09:08

阿里云原生高级架构师独家分享：K8S+Spring Cloud实战指南，让你轻松成为技术领袖

我们都知道，Docker确实好用，但在面对庞大的集群和数以千计的容器时，它似乎显得力不从心。此时，我们的主角Kubernetes闪亮登场。

手把手教你学Java·2024-02-06 09:06

Redis 运维实战第07期：Hotkey

Hotkey可能会导致集群流量不均衡，或者某一个节点QPS、网卡流量被打满。

悦专栏·2024-02-06 09:19

2024年了，如何更好的搭建Kafka集群？

传统的zookeeper集群已经被标记为弃用，将在kafka4.0中完全移除。由于去掉了zk组件，部署也简化了不少。

程序饲养员·2024-02-06 09:36

从Kafka系统中读取消息数据——消费

从Kafka系统中读取消息数据——消费消费Kafka集群中的主题消息检查消费者是不是单线程主题如何自动获取分区和手动分配分区subscribe实现订阅（自动获取分区）assign（手动分配分区）反序列化主题消息反序列化一个类

_蓝天IT_·2024-02-06 09:33

minio集群搭建（纠删码模式）

搭一个4个节点，16块硬盘的minio集群。

hahaha 1hhh·2024-02-06 09:52

MySQL单主模式部署组复制

前言本篇文章介绍MySQL8.0.27版本的组复制详细搭建过程，教你如何快速搭建一个三节点的单主模式组复制集群。

lu9up·2024-02-06 08:03

系统架构演变详解

文章目录1、单体架构2、垂直架构3、分布式架构4、SOA架构5、微服务6、集群、分布式和微服务的区别1、单体架构在学习Dubbo之后，我们先了解一下系统架构的演变过程。

悦.L·2024-02-06 08:00

Flink CDC 与 Kafka 集成：State Snapshot 还是 Changelog？Kafka 还是 Upsert Kafka？

我们知道，尽管FlinkCDC可以越过Kafka，将关系型数据库中的数据表直接“映射”成数据湖上的一张表（例如Hudi等），但从整体架构上考虑，维护一个Kafka集群作为数据接入的统一管道是非常必要的，

　Laurence·2024-02-06 08:52

Redis核心技术与实战【学习笔记】 - 24.Redis 脑裂

简述所谓脑裂，就是指在主从集群中，同时有两个主节点，它们都能接收写请求。而脑裂最直接的影响就是客户端不知道该往哪个主节点写入数据，结果就是不同的客户端会往不同的主机诶点上写入数据。

陈建111·2024-02-06 08:43

Redis核心技术与实战【学习笔记】 - 24.Redis 数据分片方案选择：Codis 和 Redis Cluster

简述Redis的切片集群使用多个实例保存数据，能很好的应对大数据量的场景。在《4.Redis切片集群》中，介绍了Redis官方提供的切片集群方法RedisCluster。

陈建111·2024-02-06 08:43

Kafka 使用手册

2.kafka基础架构3.kafka集群搭建4.kafka命令行操作主题命令行【topic】生产者命令行【producer】消费者命令行【consumer】5.kafka生产者生产者消息发送流程Producer

@lihewei·2024-02-06 08:01

ELFK日志采 - QuickStart

文章目录架构选型ELKEFLKElasticsearchES集群搭建常用命令Filebeat功能介绍安装步骤Filebeat配置详解filebeat常用命令Logstash功能介绍安装步骤Input插件

@lihewei·2024-02-06 07:25

Flink面试准备

Standlone模式Standlone是Flink自带的一个分布式集群，它不依赖其他的资源调度框架、不依赖yarn等。充当Master角色的是JobManager。

大数据左右手·2024-02-06 07:25

Hadoop-Yarn-启动篇

一、源码下载下面是hadoop官方源码下载地址，我下载的是hadoop-3.2.4，那就一起来看下吧Indexof/dist/hadoop/core二、脚本部分1、start-yarn.sh如果我们想单独启动

隔着天花板看星星·2024-02-06 07:16

linux系统keepalived介绍以及和nginx联合使用

keepalivedkeepalived介绍nginx+keepalivedkeepalived介绍keepalived是集群管理中保证集群高可用的一个服务软件，用来防止单点故障。

丨析木丨·2024-02-06 07:13

Redis（三）主从架构、Redis哨兵架构、Redis集群方案对比、Redis高可用集群搭建、Redis高可用集群之水平扩展

转自极客时间Redis主从架构redis主从架构搭建，配置从节点步骤：1、复制一份redis.conf文件2、将相关配置修改为如下值：port6380pidfile/var/run/redis_6380.pid#把pid进程号写入pidfile配置的文件logfile"6380.log"dir/usr/local/redis-5.0.3/data/6380#指定数据存放目录#需要注释掉bind#b

_蓝天IT_·2024-02-06 07:37

k8s中节点node的ROLES值是＜none＞

查询当前集群节点信息：[r

Lingoesforstudy·2024-02-06 07:20

k8s学习-Service Account和RBAC授权

1.1ServiceAccount介绍首先Kubernetes中账户区分为：UserAccounts（用户账户）和ServiceAccounts（服务账户）两种，它们的设计及用途如下：UserAccount是给kubernetes集群外部用户使用的

ByteX·2024-02-06 07:16

Redis——集群环境部署

一般情况下的Redis，我们都是在一台服务器上进行操作的，也就是说读、写以及备份操作都是在一台Redis服务器上进行的。随着项目访问量的增加，对Redis服务器的操作也更加频繁，虽然Redis读写速度都很快，但是一定程度上也会造成一定的延时。为了解决访问量大的问题，通常会采取的一种方式是主从（Master-Slave）复制。Master以写为主，Slave以读为主，Master更新后根据配置自动同

布道师小羊·2024-02-06 07:10

Spark大数据分析与实战笔记（第二章 Spark基础-06）

文章目录每日一句正能量2.6IDEA开发WordCount程序2.6.1本地模式执行Spark程序2.6.2集群模式执行Spark程序每日一句正能量我们全都要从前辈和同辈学习到一些东西。

想你依然心痛·2024-02-06 07:38

k8s学习-Kubernetes Ingress

我一般以Deployment方式部署到kubernetes集群中

ByteX·2024-02-06 07:37

开源大数据集群部署（十）Ranger usersync部署

作者：櫰木rangerusersync部署解压包[[email protected]]#pwd/opt/ranger[[email protected]]#tar-zxvfranger-2.3.0-usersync.tar.gz-C/opt/[[email protected]]#cdranger-2.3.0-usersync修改配置insta

云掣YUNCHE·2024-02-06 07:05

linux k8s 源码编译及单集群测试

docker在线安装containerd安装二进制安装yum安装修改containder配置文件cnietcdrsyncgo设置golang代理安装CFSSL下载kubernetes代码编译启动本地单节点集群问题

流月up·2024-02-06 06:12

SparkSQL on K8s 在网易传媒的落地实践

网易传媒在2021年成功将SparkSQL部署到了K8s集群，并实现与部分在线业务的混合部署，到目前已经稳定运行了一年多。

wangyishufan·2024-02-06 06:02

Flink on k8s之historyServer

1.FlinkHistoryServer用途HistoryServer可以在Flink作业终止运行（Flink集群关闭）之后，还可以查询已完成作业的统计信息。

卤蛋x001·2024-02-06 06:54

MongoDB分片集群搭建

----前言mongodb分片一般用得比较少，需要较多的服务器，还有三种的角色一般把mongodb的副本集应用得好就足够用了，可搭建多套mongodb复本集mongodb分片技术mongodb副本集可以解决数据备份、读性能的问题，但由于mongodb副本集是每份数据都一模一样的，无法解决数据量过大问题mongodb分片技术能够把数据分成两份存储，假如shijiange.myuser里面有1亿条数据

ZzzkiYoumi·2024-02-06 06:21

MongoDB的分片集群(二) ：mongodb4.x分片集群离线搭建&开启安全认证

SRE成长记·2024-02-06 06:45

Apache Hadoop

ApacheHadoop_狭义上说，Hadoop指Apache一款java语言开发的开源框架，它的核心组件有：HDFS（分布式文件系统）：解决海量数据存储YARN（作业调度和集群资源管理的框架）：解决资源任务调度

VincentLeon·2024-02-06 05:28

Mysql架构系列——生产常用的高可用部署模式介绍

模式高可用模式GaleraCluster是由Codership开发的MySQL多主集群，包含在MariaDB中，同时支持Perconaxtradb、MySQL，是一个易于使用的高可用解决方案，在数据完整性

吴代庄·2024-02-06 04:34

yarn create umi 初始脚手架报错error An unexpected error occurred: “https://registry.npm.taobao.org/create-u

errorAnunexpectederroroccurred:"https://registry.npm.taobao.org/create-umi:certificatehasexpired".这个错误是由于你正在使用的npm镜像（https://registry.npm.taobao.org）的SSL证书已经过期，导致无法正常访问。更换npm镜像源。你可以使用npmconfigsetregis

Jim-zf·2024-02-06 04:29

K8S集群管理平台Rancher（1）：基础入门

文章目录一、Rancher概述1.1什么是Rancher1.2RancherServer功能1.3Rancher架构设计1.4Rancher和下游集群交互1.5Rancher相关文件1.6Rancher

鹤冲天Pro·2024-02-06 04:58

Debian11之Rancher2.7.x安装

前言Rancher为采用容器的团队提供了完整的软件堆栈，解决了跨任何基础设施架构管理多个Kubernetes集群的运维和安全挑战，同时为DevOps团队提供了用于运行容器化工作负载的集成工具。

大能嘚吧嘚·2024-02-06 04:27

EKS集群使用helm安装rancher

一、安装helmcurlhttps://raw.githubusercontent.com/helm/helm/master/scripts/get-helm-3|bash二、安装rancher1.安装rancher命令【我安装默认安装最新版本，实际安装的是rancher:v2.7.9版本】#创建rancher使用的namespacekubectlcreatenamespacecattle-sys

干运维小白·2024-02-06 03:57

K8S之Namespace的介绍和使用

Namespace理论说明Namespace实操创建、查看命名空间使用ResouceQuota对Namespace做资源限额更多ResouceQuota的使用Namespace理论说明命名空间定义K8s支持多个虚拟集群

sissie喵~·2024-02-06 03:39

Spark On Yarn 运行模式

在Spark中，支持4种运行模式：1）Local：开发时使用2）Standalone：是Spark自带的，如果一个集群是Standalone的话，那么就需要在多台机器上同时部署Spark环境3）YARN

bandi4506·2024-02-06 03:02

Centos7.5+Ambari2.7.3+HDP3.1.0.0离线安装

就Ambari的作用来说，就是创建、管理、监视Hadoop集群，但是这里的Hadoop指的是Hadoop整个生态圈（例如Hive，Hbase，Sqoop，Zookeeper等），而并不仅是特指Had

WaiSaa·2024-02-06 02:53

java的热部署/热更新（1）背景

为什么需要热部署现阶段，线上集群的发布采取1.虚拟机/物理机器更新代码的方式，2.docker/k8s环境更新pod的镜像。优点显而易见，一致性好，可靠性高。但是热部署也有自己的优势：快速发布/

define_us·2024-02-06 02:54

微服务监控 - 监控自己的服务

客户端库指标类型Counter（计数器）Gauge（计量器）Histogram（直方图）Summary（摘要）Demo提供metrics接口添加自己的指标小结上一篇讲解了使用Exporter监控Kubernetes集群应用

CatchZeng·2024-02-06 01:43

k8s创建并发布WordPress

⽬的演示如何在KubeSphere中创建应⽤程序（以WordPress为例）并在集群外访问它。任务1：创建密钥创建MySQL密钥环境变量WORDPRESS_DB_PASSWORD是连接到

凌晨里的无聊人·2024-02-06 01:18

k8s 实战1：WordPress搭建

文章目录第一步：部署MariaDB第二步：部署WordPress第三步：映射WordPressPod端口号，让它在集群外可见第四步：创建反向代理的Nginx，让我们的网站对外提供服务WordPress架构图第一步

唐僧骑白马·2024-02-06 01:18

Docker 可视化工具

1、Portainer概念介绍Portainer是一款轻量级的应用，它提供了图形化界面，用于方便地管理Docker环境，包括单机环境和集群环境。

HuaLuLemon·2024-02-06 01:09

Docker Compose

1、概念介绍Docker-Compose是Docker官方的开源项目，负责实现对Docker容器集群的快速编排。

HuaLuLemon·2024-02-06 01:39

推荐频道

hadoop2+集群+yarn