hadoop2+集群+yarn

薛兆丰《北大经济学课》第九十五讲导图笔记

因为集群产生了规模化，需求者过去，不需要跑其它地方，自己要的东西全部要吧采购到，这就节省了大量额外的时间和精力的成本，集群是非常大的优势。
浪客诗心·2024-02-06 01:09

k8s学习（RKE+k8s+rancher2.x）成长系列之简配版环境搭建（二）

三、简配版集群，适用于demo环境1.集群架构设计主机名角色配置(核数，内存，磁盘)MasterRKE,controlplane,etcd,worker,rancher-master2C8G40GSlaver1controlplane
日复一日伐树的熊哥·2024-02-06 00:29

2.RocketMQ集群搭建与消息发送样例

1.RocketMQ集群搭建1.1各角色介绍mqGroup.png角色NameServer:Broker的管理者。Broker自己去上报NameServer自己的存在Broker：消息的存储者。
lambdaCC·2024-02-06 00:58

Redis入门指南

中间件Redis持久化机制RDB（redisdatabase）AOF（appendonlyfile）命令重复的解决办法穿透、击穿、雪崩Redis事务key过期策略数据淘汰策略Redis分布式锁Redis集群的方案主要有几种主从复制
屈家全·2024-02-05 23:37

RabbitMQ部署指南

从本地加载在课前资料已经提供了镜像包：上传到虚拟机中后，使用命令加载镜像即可：dockerload-imq.tar1.2.安装MQ执行下面的命令来运行MQ容器：–hostnamemq1\单机可不配，但集群则要用
程序员老周666·2024-02-05 23:35

浅析软件测试中的一些常见理论：杀虫剂效应、金字塔模型、缺陷集群性原则、软件测试活动依赖于软件测试背景、软件测试的7大基本原则

这篇文章我主要想记录学习一下在软件测试行业中的一些常见理论效应以做基本了解。一、杀虫剂效应1、杀虫剂效应介绍杀虫剂效应原本指农业中随着农药的普及使用，害虫对农药的抗药性就越来越强，农药就越来越难杀死害虫。在农场里为了对付破坏农作物的害虫，农业专家开发出了对应的杀虫剂，刚开始效果很好，但是随着时间的流逝，害虫适应了杀虫剂，产生了抗药性，这些原有的农药就越来越难杀死害虫，必须设计新型的杀虫剂来对付害虫
sinat_26916241·2024-02-05 23:29

云计算-Docker Compose部署案例

什么是DockerComposeDocker-Compose项目是Docker官方的开源项目，负责实现对Docker容器集群的快速编排。
高高在吗·2024-02-05 22:49

TOMCAT集群部署方案一

1、配置tomcat的server.xml文件在server.xml文件中的host节点下面增加Cluster节点2、在server.xml中修改tomcat的端口例如：tomcat118080tomcat2280803、修改项目中的web.xml文件在web.xml文件中增加节点4、配置nginx需改nginx的nginx.conf#usernobody;worker_processes1;#e
大象也会飞·2024-02-05 22:41

kubeadm离线一键安装K8s集群

文章目录kubeadm离线一键安装K8s集群如何使用验证kubeadm离线一键安装K8s集群前言：安装的K8s版本为1.27.1容器运行时使用的containerd，不是使用docker。
银痕·2024-02-05 22:39

Doris集群部署

二、集群部署2.1整体架构主机1主机2主机3FE（LEADER）FE（FOLLOWER）FE（OBSERVER）BEBEBEBROKERBROKERBROKER注意：生产环境建议FE和BE分开部署2.2
一心猿·2024-02-05 21:34

消息中间件之RocketMQ源码分析(五)

消费进度保存机制消费者启动时会同时启动位点管理器，RocketMQ设计了远程位点管理和本地位点管理两种位点管理方式.集群消费时，位点由客户端提交给Broker保存.广播消费时，位点保存在消费者本地磁盘上
coffee_babe·2024-02-05 20:57

大数据之 ZooKeeper原理及其在Hadoop和HBase中的应用

分布式应用程序可以基于ZooKeeper实现诸如数据发布/订阅、负载均衡、命名服务、分布式协调/通知、集群管理、Master选举、分布式锁和分布式队列等功能。简介ZooKeep
yangfhit·2024-02-05 20:29

ES节点丢失导致实时数据导入速度特别慢

通过logtash导数据，由于当天入的数据是0备份，节点丢失后，某些shard丢失，导致集群一直处于red状态。节点丢失后，该索引的导入速度直线下降。
YG_9013·2024-02-05 20:26

【华为OD】C卷真题 100%通过 : API集群负载统计 Python代码实现[思路+代码]

C++代码实现：【华为OD】C卷真题100%通过:API集群负载统计C++代码实现[思路+代码]-CSDN博客java代码实现：【华为OD】C卷真题100%通过:API集群负载统计Java代码实现[思路
五木大大·2024-02-05 19:28

【华为OD】C卷真题 100%通过 : API集群负载统计 Java代码实现[思路+代码]

JS代码实现：【华为OD】C卷真题100%通过:API集群负载统计JS代码实现[思路+代码]-CSDN博客C++代码实现：【华为OD】C卷真题100%通过:API集群负载统计C++代码实现[思路+代码]
五木大大·2024-02-05 19:58

【华为OD】C卷真题 100%通过 : API集群负载统计 C++代码实现[思路+代码]

python代码：【华为OD】C卷真题100%通过:API集群负载统计Python代码实现[思路+代码]-CSDN博客C++代码实现：【华为OD】C卷真题100%通过:API集群负载统计C++代码实现[
五木大大·2024-02-05 19:57

【华为OD】C卷真题 100%通过 : API集群负载统计 JS代码实现[思路+代码]

题目描述：某个产品的RESTfulAPI集合部署在服务器集群的多个节点上，近期对客户端访问日志进行了采集，需要统计各个API的访问频次，根据热点信息在服务器节点之间做负载均衡，现在需要实现热点信息统计查询功能
五木大大·2024-02-05 19:57

【华为OD】C卷真题 100%通过 : API集群负载统计 C语言代码实现[思路+代码]

C++代码实现：【华为OD】C卷真题100%通过:API集群负载统计C++代码实现[思路+代码]-CSDN博客java代码实现：【华为OD】C卷真题100%通过:API集群负载统计Java代码实现[思路
五木大大·2024-02-05 19:26

MongoDB 中的分布式集群架构

前言前面我们了解了MongoDB中的索引，事务，锁等知识点。线上使用的MongoDB大部分的场景我们都会考虑使用分布式结构，这里我们来了解一下MongoDB中的分布式架构。粉丝福利，免费领取C/C++开发学习资料包、技术视频/项目代码，1000道大厂面试题，内容包括（C++基础，网络编程，数据库，中间件，后端开发/音视频开发/Qt开发/游戏开发/Linuxn内核等进阶学习资料和最佳学习路线）↓↓↓
程序员老舅·2024-02-05 19:22

Kubernetes基础(十一)-CNI网络插件用法和对比

Kubernetes本身并没有实现自己的容器网络，而是借助CNI标准，通过插件化的方式来集成各种网络插件，实现集群内部网络相互通信。
alden_ygq·2024-02-05 18:05

ES

Cluster：代表一个集群，集群中有多个节点，其中有一个为主节点，这个主节点是可以通过选举产生的，主从节点是对于集群内部来说的。
moonhatred·2024-02-05 18:42

虚拟服务器外部端口什么意思,虚拟服务器外部端口设置

虚拟服务器外部端口设置内容精选换一换在本章节中，您将会把游戏应用部署到CCE云容器引擎中，您需要执行以下操作：创建集群：集群是运行应用的逻辑分组，包含一组云服务器资源，每个节点对应一台云服务器。
寒月潇凌·2024-02-05 18:15

Dubbo实战（一）高速入门

集群容错:提供基于接口方法的透明远程过程调用。包含多协议支持，以及软负载均衡。失败容错。地址路由，动态配置等集群支持。自己主动发现:基于注冊
weixin_30516243·2024-02-05 18:45

Dubbo实战快速入门 （转）

集群容错:提供基于接口方法的透明远程过程调用，包括多协议支持，以及软负载均衡，失败容错，地址路由，动态配置等集群支持。自动发现:基于注册中心
weixin_30663391·2024-02-05 18:45

Dubbo实战（一）快速入门

集群容错:提供基于接口方法的透明远程过程调用，包括多协议支持，以及软负载均衡，失败容错，地址路由，动态配置等集群支持。自动发现:基于注册中心
易雪寒·2024-02-05 18:44

Java - Dubbo实战（一）快速入门 小白教程

集群容错:提供基于接口方法的透明远程过程调用，包括多协议支持，以及软负载均衡，失败容错，地址路由，动态配置等集群支持。自动发现:基于注册中心
恐龙侠·2024-02-05 18:14

Dubbo入门实战（一）

集群容错:提供基于接口方法的透明远程过程调用，包括多协议支持，以及软负载均衡，失败容错，地址路由，动态配置等集群支持。自动发现:基于
正熵·2024-02-05 18:13

Hadoop Start(1) ——Google与Hadoop的前世今生

参考文档:《Hadoop权威指南(第4版)》网址:http://hadoop.apache.org/[1]HDFS：HadoopDistributionFileSystemHadoop分布式文件系统[2]YARN
bclz·2024-02-05 18:41

cluster.routing.allocation.enable与cluster.routing.rebalance.enable 区别

cluster.routing.allocation.enable和cluster.routing.rebalance.enable参数是有区别的：cluster.routing.allocation.enable设置成none，主要是影响集群中新创建的索引无法进行分片分配
bigdata张凯翔·2024-02-05 17:00

mpvue小程序启动报错:TypeError: Cannot read property 'platform' of undefined

错误：$yarndevyarnrunv1.19.1$nodebuild/dev-server.js/Users/mahaiqiang/git/redcreation/customplatform/customApplet
小马将过河·2024-02-05 17:22

k8s附加组件有哪些

除了核心组件之外，Kubernetes还提供了一些附加组件，用于增强集群的功能和管理能力。
Fred3D·2024-02-05 17:58

RabbitMQ——基于 KeepAlived + HAProxy 搭建 RabbitMQ 高可用负载均衡集群

一、集群简介1.1集群架构当单台RabbitMQ服务器的处理消息的能力达到瓶颈时，此时可以通过RabbitMQ集群来进行扩展，从而达到提升吞吐量的目的。
小小暴徒·2024-02-05 17:24

es搭建集群模式时出现master not discovered or elected yet, an election requires two nodes with ids [xxx，xxx]问题

ES8.7版本配置集群时出现master节点异常情况大概率是因为第一次启动es集群模式时报错了，只需删除es安装目录中的data目录，然后kill掉es进程，重新启动就好了data目录是Elasticsearch
-00·2024-02-05 17:03

Kafka2.13集群搭建

准备3台服务器，并配置hosts172.17.0.2   node0172.17.0.3   node1172.17.0.4   node2在其中一台服务器中搭建Zookeeper（单机或集群都可以）Zookeeper
咩哥无敌·2024-02-05 17:57

hadoop调优-HDFS集群数据不均衡处理hdfs balancer

查看当前的数据分布情况：hdfsdfsadmin-report现象一：集群上经常会增添新的DataNode节点，或者人为干预将数据的副本数降低或者增加。
不会吐丝的蜘蛛侠。·2024-02-05 16:08

HDFS BALANCER

介绍Hadoop的HDFS集群非常容易出现机器与机器之间磁盘利用率不平衡的情况，比如集群中添加新的数据节点。
风筝Lee·2024-02-05 16:07

HDFS DataNode高密度存储机型的探索尝试

这里就涉及到了数据存储能力的问题，需要存储的数据越多，其实意味着我们需要更多的机器来扩增HDFS集群存储的总capacity。但是机器数量的变多另外一方面带来的则是机器费用成本的巨大开销。
Android路上的人·2024-02-05 16:05

CDH使用Disk Balancer平衡磁盘HDFS数据

文章目录前言启用磁盘平衡器生成磁盘平衡器任务执行磁盘平衡任务查询磁盘平衡任务是否完成参考来源前言当集群磁盘空间不足时，需要增加新硬盘到机器，此时新加入的磁盘空间基本为空，而旧磁盘则已占用很多。
Alderaan·2024-02-05 16:05

绝对完美解决hdfs datanode数据和磁盘数据分布不均调整（hdfs balancer ）——经验总结

Hadoop集群Datanode数据倾斜，个别节点hdfs空间使用率达到95%以上，于是新增加了三个Datenode节点，由于任务还在跑，数据在不断增加中，这几个节点现有的200GB空间估计最多能撑20
ZhaoYingChao88·2024-02-05 16:05

提升CKA考试胜算：一文带你全面了解RBAC权限控制！

kubernetes集群相关所有的交互都通过apiserver来完成，对于这样集中式管理的系统来说，从1.6版本起，K8S默认启用RBAC访问控制策略，目前RBAC已
didiplus·2024-02-05 16:14

揭秘高效运维：如何用kubectl top命令实时监控K8s资源使用情况？

kubectltop是一个用于查看Kubernetes集群中资源使用情况的命令。它可以显示节点或Pod的CPU、内存和存储的使用情况。该命令要求正确配置MetricsServer并在服务器上工作。
didiplus·2024-02-05 16:14

React-Native + ts + mobx 项目

mobx项目1.构建一个RN项目npminstall-gexpo-cliexpoinitfoodrn-appcdfoodrn-appnpmstart#也可以使用命令:expostart2.写底部tab栏yarnaddreact-native-tab-navigator-Syarnadd
於我·2024-02-05 16:31

Kubernetes Operator

文章目录一、概述二、基础1.Redis集群1.1.文档1.2.安装1.3.删除集群1.4.测试1.5.扩缩容2.RabbitMQ集群2.1.文档2.2.安装Kubernetes#Kuberneteshttps
IoTHub - 物联网开源技术社区·2024-02-05 15:21

PG 异常状态- active+undersized+degraded

自己搭的3个OSD节点的集群的健康状态经常处在”WARN”状态，replicas设置为3，OSD节点数量大于3，存放的data数量也不多，ceph-s不是期待的healthok，而是active+undersized
Joncc·2024-02-05 15:03

yarn安装依赖时报错certificate has expired at TLSSocket.onConnectSecure

errorError:certificatehasexpiredatTLSSocket.onConnectSecure(node:_tls_wrap:1532:34)atTLSSocket.emit(node:events:527:28)atTLSSocket._finishInit(node:_tls_wrap:946:8)atTLSWrap.ssl.onhandshakedone(node:_
一叶茶·2024-02-05 15:15

vue-router@4安装及其使用

一、简单使用1、安装yarnaddvue-router@42、在src目录下新建router文件夹，然后新建index.ts//1.定义路由组件.
QmagicianRX·2024-02-05 15:12

NaiveUI安装及使用

1、安装UI组件库naive-uiyarnaddnaive-ui2、全局按需引入在src下新建uitls目录并添加uaiveUI.ts//src/utils/naiveUI.tsimport{create
QmagicianRX·2024-02-05 15:12

yarn安装及其使用

npminstall-gyarn使用从git仓库拉取的代码使用yarn或yarninstall即可安装新的依赖使用yarnaddxxx，如yarnaddvue-router@41、如果报错：yarn:无法加载文件
QmagicianRX·2024-02-05 15:42

论文阅读-CARD：一种针对复制元数据服务器集群的拥塞感知请求调度方案

论文名称：CARD:ACongestion-AwareRequestDispatchingSchemeforReplicatedMetadataServerCluster摘要复制元数据服务器集群（RMSC
向来痴_·2024-02-05 14:54

为什么ECS更适合深度学习，而轻量型不适合，而且他们说ECS适合集群部署，轻量型为什么就不适合

计算能力和资源配置：深度学习任务通常需要大量的计算资源和内存，以处理复杂的模型和大规模的数据集。ECS服务器提供了更丰富的实例规格和可选的计算性能，可以满足深度学习任务的高要求。而轻量型云服务器通常具有较低的计算能力和资源配置，不太适合处理大规模的深度学习任务。高性能网络和存储：深度学习任务通常需要高带宽和低延迟的网络传输，以便在分布式训练或数据处理过程中进行高效的通信。ECS服务器提供了高性能的
Fairy要carry·2024-02-05 14:23
上一页 25 26 27 28 29 30 31 32 下一页
按字母分类： ABCDEFGHIJKLMNOPQRSTUVWXYZ其他