hadoop2+集群+yarn 第32页

手把手教你打造你专属的 Kubectl，让输出变的更加绚丽多彩

如果您是公司Kubernetes集群的管理员或开发在Kubernetes上运行的应用程序的开发人员，您几乎每天都会使用kubectl。而我也是其中之一。

运维之美·2024-02-04 18:57

运行环境jre版本和jar包编译版本不一致导致：Unsupported major.minor version 52.0

问题我在本地使用IntellijIdea打包了一个spark的程序jar包，放到linux集群上运行，报错信息是：Unsupportedmajor.minorversion52.0环境本机系统->windows10

stone_zhu·2024-02-04 18:51

达梦数据库的最大连接数，怎么查看和设置

公司为客户提供各类数据库软件及集群软件、云计算与大数据等一系列数据库产品及相关技术服务，致力于成为国际顶尖的全栈数据产品及解决方案提供商。

ThatMonth·2024-02-04 18:08

Docker compose介绍及常用命令

什么是DockercomposeCompose项目是Docker官方的开源项目，负责实现对Docker容器集群的快速编排。

overflowedstack·2024-02-04 17:23

Redis核心技术与实战【学习笔记】 - 19.Pika：基于SSD实现大容量“Redis”

你可能会想到使用Redis切片集群，把数据分散保存到不同的实例上。

陈建111·2024-02-04 16:16

vue-cli 构建项目报错：vue-cli-server not find

1、确保vue版本为3.X$vue--version3.7.02、进入到项目目录下$llnode_modules/.bin#看看有没有vue-cli-server，如果没有则：$yarn或者npminstall

R_X·2024-02-04 16:21

在Python中读写Kafka队列

在Python中读写Kafka队列通常使用kafka-python库，这是一个非常流行的库，可以让你方便地与Kafka集群进行交互。以下是安装这个库以及基本使用方法的介绍。

言之。·2024-02-04 16:09

听风347·2024-02-04 15:47

记一次故障-Rancher界面突然无法访问，且K8s集群无法访问

公司使用docker单节点方式部署rancher，利用rancehr来操作k8s集群，有一天要访问rancherui时，发现打不开，然后部署的所有容器也都不能使用，立马到服务器上查看情况，发现rancher

Mright·2024-02-04 15:01

vue中使用html2canvas配合jspdf导出pdf（以及在导出时遇到的导出样式问题）

指定页面中导出为pdf格式并打包，使用html2canvas先转为图片格式，在利用jspdf转为pdf，最后下载打包为本地压缩包yarnaddhtml2canvasyarnaddjspdf1.注册一个插件并挂载

Zeng　·2024-02-04 13:05

【Windows】Windows下通过图形界面安装MySQL数据库

付费MySQLClusterCGE：高级集群版本。MySQLCluster是一个实时开源事务型数据库，专为在高吞

牛银龙·2024-02-04 12:08

linux 下nginx的安装与 tomcat集群

1.安装依赖包yuminstallgccyuminstallpcre-develyuminstallzlibzlib-develyuminstallopensslopenssl-devel//一键安装上面四个依赖yum-yinstallgcczlibzlib-develpcre-developensslopenssl-devel2.下载并解压安装包//创建一个文件夹cd/usr/localmkdi

你好龙卷风！！！·2024-02-04 11:08

面试常问的-React 18的新特性

升级到React18要开始使用React18,请使用npm或yarn安装最新版本的react和react-dom:npminstallreactreact-dom

今天也想MK代码·2024-02-04 11:53

大数据Zookeeper--集群操作

文章目录集群操作集群安装选举机制（面试重点）Zookeeper选举机制——第一次启动Zookeeper选举机制——非第一次启动ZK集群启动停止脚本客户端命令行操作命令行语法znode节点数据信息节点类型

泛黄的咖啡店·2024-02-04 11:15

大数据入门-大数据技术概述(二)

目录大数据入门系列文章1.大数据入门-大数据是什么2.大数据入门-大数据技术概述(一)一、简介二、技术详解1.分布式协调服务：Zookeeper2.分布式资源管理器：Yarn3.计算引擎：Spark4.

水坚石青·2024-02-04 11:11

大数据入门--zookeeper（一）--集群搭建与常用指令

Zookeeper单机搭建下载官方安装包#解压tar-zxvfzookeeper-3.4.5.tar.gz-C/opt/module/#配置zoo.conf，只需要将conf/zoo_sample.conf重命名为zoo.conf即可mvconf/zoo_sample.cfgconf/zoo.cfg#启动bin/zkServer.shstart#查询状态bin/zkServer.shstatus#

许中宝·2024-02-04 11:40

Hbase2.1 集群搭建

>Hbase在大数据的体系中扮演着DB角色，不得不说是重要的一员，在上一篇，大猪已经给大家演示了[Hadoop3.2集群搭建](https://www.jianshu.com/p/3182aaff918d

kikiki4·2024-02-04 11:08

脚手架快捷创建项目

electron-forge创建electron项目npxelectron-forgeinitmy-new-app#oryarncreateelectron-appmy-new-appvite搭配vue3.2

莫得小累·2024-02-04 10:58

Ranger-Yarn插件安装

Ranger-Yarn插件ranger-0.6.0-yarn-plugin安装到Yarn的所有ResourceManager节点，其他的NodeManager节点不需要安装。

木木与呆呆·2024-02-04 10:22

SpringSecurity如何理解学习常用拦截器——举例进行学习——从0到1教会方法自行学习~

SpringSecurity的常用拦截器——举例进行学习文章专栏：前后端分离项目（Vue+SpringBoot）最近更新：2022年2月5日Nginx入门到实战案例配置反向代理、负载均衡、动静分离以及对Nginx高可用的服务器集群个人简介

Alascanfu·2024-02-04 10:50

elasticsearch学习六：学习全文搜索引擎 elasticsearch的语法，使用kibana进行模拟测试（持续更新学习）

文章目录前言一、基本概念1.Node节点与Cluster集群2.Index索引3.Document文档4.Type类型5.逻辑对比6.物理设计二、ES的命令风格三、新建和删除index索引四、分词器使用和学习

java冯坚持·2024-02-04 10:39

2019-04-12课堂笔记

一、集群1.集群概念简单说就是一堆机器做同一件事2.企业为什么要用集群？a.能7*24小时提供服务，多台机器同时工作互为备份。

1340010b7af0·2024-02-04 09:44

Hadoop详解

NameNodeNameNode：文件系统的命名空间(面试题)1.文件名称2.文件目录结构3.文件的属性(权限创建时间副本数)4.文件对应哪些数据块-->数据块对应哪些分布在哪些DN节点上列表不会持久化存储这个映射关系，是通过集群的启动和运行时

ly稻草·2024-02-04 09:34

华为资深工程师总结的这本435页的书，居然把网络协议给趣谈了

本来觉得写Java程序时可以依赖别人的库，所以就不用关心这么多底层的技术了，但是到后来才发现，服务数量一多，吞吐量一大，我们关心的不再仅仅是某个Java应用，而是要提升整个集群的性能，这时网络问题就会出现

Java老程·2024-02-04 09:43

【Oracle云】ORACLE OKE 自定义数据节点的初始化参数完成系统参数和根卷的扩容

本文将介绍如何在OKE环境中自定义数据节点的初始化参数；通过OKE的托管服务，用户可以轻松创建、扩展和管理高度可用的Kubernetes集群，实现更高效的容器化部署和操作。

炸鸡物料库·2024-02-04 09:09

Hadoop3.x基础（3）- Yarn

来源：B站尚硅谷目录Yarn资源调度器Yarn基础架构Yarn工作机制作业提交全过程Yarn调度器和调度算法先进先出调度器（FIFO）容量调度器（CapacityScheduler）公平调度器（FairScheduler

魅美·2024-02-04 09:36

转载-58同城离线计算平台设计与实践

58同城离线计算平台设计与实践编者荐语：58离线计算平台基于Hadoop生态体系打造，单集群4000+台服务器，数百PB存储，日40万计算任务，面临挑战极大。

无色的叶·2024-02-04 09:14

Fink CDC数据同步（一）环境部署

Flink能在所有常见集群环境中运行，并能以内存速度和任意规模进行计算。

苡~·2024-02-04 08:38

linux系统lvs负载均衡器的概念和调度算法

lvs的概念和调度算法概念负载均衡集群集群技术集群技术的实现负载均衡分类四层负载均衡七层的负载均衡四层负载与七层负载的区别LVS的调度算法静态算法（4种）RR：轮询调度WRR：加权轮询DH：目标地址散列调度

丨析木丨·2024-02-04 08:58

nacos集群搭建

Nacos集群搭建1.集群结构图官方给出的Nacos集群图：其中包含3个nacos节点，然后一个负载均衡器代理3个Nacos。这里负载均衡器可以使用nginx。

程序媛9688·2024-02-04 07:04

gee微端服务器系统设置,geem2微端服务器设置

geem2微端服务器设置内容精选换一换用户可以在公有云MRS集群以外的节点上使用客户端，在使用客户端前需要安装客户端。

weixin_39878989·2024-02-04 07:33

gee微端服务器系统设置,gee微端服务器推荐配置

SSL连接方式的安全性高于普通模式，集群默认开启SSL功能允许来自客户端的SSL连接或非SSL连接，从安全性考虑，建议用户在客户端使用SSL连接方式。

小林手·2024-02-04 07:03

完结，从零开始学python（十八）想成为一名APP逆向工程师，需要掌握那些技术点？

MySQLRedisMongoDB2.机器学习3.全栈开发4.数据分析Numpy+pandas+MatplotlibHadoopSpark5.爬虫工程师养成采集功底自动化和抓包框架源码scrapyfeapder爬虫集群部署

爬完虫变成龙·2024-02-04 07:52

Sentinel应用笔记

特性：富的应用场景：Sentinel承接了阿里巴巴近10年的双十一大促流量的核心场景，例如秒杀（即突发流量控制在系统容量可以承受的范围）、消息削峰填谷、集群流量控制、实时熔断

KEEPMA·2024-02-04 07:17

k8s集群资源（pod、镜像等）自动回收

垃圾收集是Kubernetes用于清理集群资源的各种机制的统称。自动回收机制可以避免随着时间推移，系统中的镜像等越来越多，导致硬盘等资源不足。

xiegwei·2024-02-04 07:35

06:原生云K8S解密｜K8S集群安装部署｜K8S网络插件

原生云K8S解密｜K8S集群安装部署｜K8S网络插件K8SK8S集群架构图解K8S部署仓库初始化kube-master安装计算节点的安装token管理配置flannel网络（master主机操作）K8S

桑_榆·2024-02-04 07:33

Docker 第十章： Docker 三剑客之 Swarm （集群与容器部署）

第十章：Docker三剑客之Swarm（集群与容器部署）本章知识点：DockerSwarm是Docker的三剑客之一，用于实现Docker容器的集群管理和部署。

半部论语·2024-02-04 06:51

SparkException: A master URL必须在配置中设置

MasterURL是指定Spark集群的主节点地址，它对于初始化SparkContext是必需的。解决方案1.通过代码设置MasterURL在你的Spark应

小湘西·2024-02-04 06:07

yarn : 无法加载文件 C:\Users\XXX\AppData\Roaming\npm\yarn.ps1，因为在此系统上禁止运行脚本。

一、现象PowerShell执行yarn命令报错（禁止运行yarn.ps1）：二、原因PowerShell执行策略，默认设置为Restricted不加载配置文件或运行脚本。

雪顶猫的鳄·2024-02-04 06:36

Spark部署模式

目录部署模式概述1.LocalMode2.StandaloneMode3.YARNMode4.MesosMode5.KubernetesMode部署模式选择部署模式概述ApacheSpark支持多种部署模式

小湘西·2024-02-04 06:02

docker搭建nacos集群 nginx实现负载均衡(技术提升)

多台服务器之间互相注册，一台DOWN，自动切换节点目录前言:工具准备:Nacos集群正文:1.安装docker2.拉取nacos镜像3.创建nacos的持久化数据库4.修改nacos配置文件5.编写nacos

morou&猫猫·2024-02-04 06:00

docker搭建nacos集群 nginx实现负载均衡

本文使用三台线上服务器，基于docker搭建nacos高可用，并通过nginx来实现负载均衡。多台服务器之间互相注册，一台DOWN，自动切换节点**文章结构**1.安装docker2.拉取nacos镜像3.创建nacos的持久化数据库4.修改nacos配置文件5.编写nacos安装脚本6.安装nginx7.使用nginx做负载均衡文章结构安装docker拉取nacos镜像创建nacos的持久化数据

Sora33·2024-02-04 06:27

阿里云redis集群模式导致的gateway网关限流不生效

阿里云redis集群模式下无法限流问题现象问题现象:阿里云redis集群无法限流,提示一下异常Errorinexecution;nestedexceptionisio.lettuce.core.RedisCommandExecutionException

whiteBrocade·2024-02-04 06:18

MySQL调优

优化类型大概分类三个类型结构/架构优化：读写分离、集群热备、分布式架构、引入缓存/消息/搜索中间件、分库分表、中台架构（大数据中台、基础设施中台）等配置/参数优化：调整应用系统中各层面的配置文件、启动参数达到优化性能的目标代码

whiteBrocade·2024-02-04 06:48

spark运维问题记录

环境：spark-2.1.0-bin-hadoop2.71.Spark启动警告：neitherspark.yarn.jarsnotspark.yarn.archiveisset，fallingbacktouploadinglibrariesunderSPARK_HOME

lishengping_max·2024-02-04 05:11

Spark提交任务到yarn 报错提示虚拟内存不足解决办法

ErrorinitializingSparkContext.java.lang.IllegalStateException:Sparkcontextstoppedwhilewaitingforbackend首先去yarn

动若脱兔--·2024-02-04 05:11

Doris(三)-集群部署3个FE+3个BE

前置1）配置java环境1st解压jdk包unzipjdk1.8.0_171-amd64.zip2nd配置环境变量vim/etc/profile#文末添加JAVA_HOME=/data/jdk1.8.0_171-amd64PATH=$JAVA_HOME/bin:$PATHexportPATHJAVA_HOME3rd启用配置source/etc/profile4th验证java-version2）下

BatmanWayne·2024-02-04 05:40

Spark context stopped while waiting for backend

目录报错信息解决办法解释报错信息Sparkcontextstoppedwhilewaitingforbackend翻译过来就是：Spark上下文在等待后端时停止解决办法通过在yarn-site.xml中添加如下配置项

十二点的泡面·2024-02-04 05:36

RabbitMQ集群搭建

1.规划节点192.168.200.4---rabbitmq1---RabbitMQ磁盘节点192.168.200.5—rabbitmq2—RabbitMQ内存节点192.168.200.6—rabbitmq3—RabbitMQ内存节点使用OpenStack平台创建三台云主机进行实验，云主机镜像使用提供的CentOS_7.5_x86_64_XD.qcow2镜像，flavor使用1核/2G内存/20

曹博Blog·2024-02-04 05:54

K8S集群部署，flannel网络问题，各个节点之间的Pod无法ping通

问题描述：在使用裸机搭建的K8S集群中，同一节点上的Pod可以ping通，但是分布在各个节点之间的Pod无法ping通。

新停浊酒杯·2024-02-04 04:07

推荐频道

hadoop2+集群+yarn