1.16集群第28页

Flink1.18.0集成Yarn-session模式部署

上次部署了Hadoop集群Hadoop3.3.6（HDFS、YARN、MapReduce）完全分布式集群安装搭建这次集成下flinkYARN上部署的过程是：客户端把Flink应用提交给Yarn的ResourceManager

china-zhz·2024-02-04 21:34

Hadoop3.3.6（HDFS、YARN、MapReduce）完全分布式集群安装搭建

、下载软件三、基础设施1、安装必要插件2、设置IP及主机名3、时间同步4、jdk安装5、ssh免密登录四、Hadoop部署1、目录及环境变量准备2、安装3、修改配置文件4、分发文件5、启动hadoop集群

china-zhz·2024-02-04 21:33

IDC和云计算是一样的吗?

它是用来存放服务器的地方，也就是实体服务器的集群。它为ICP、企业、媒体和各类网站提供大规模、高质量、安全可靠的专业化服务器托管、空间租用、网络批发带宽以及ASP、EC等业务。

牛二狗·2024-02-04 21:50

hive小文件合并问题

将运算好的数据写回hdfs（比如insertinto语句），有时候会产生大量的小文件，如果不采用CombineHiveInputFormat就对这些小文件进行操作的话会产生大量的maptask，耗费大量集群资源

DuLaGong·2024-02-04 20:16

Docker进阶篇-轻量级可视化工具Portainer

一、简介Portainer是一款轻量级的应用，它提供了图形化界面，用于方便地管理Docker环境，包括单机环境和集群环境。Portainer分为开源社区版（CE版）和商用版（BE版/EE版）。

陪我养猪吧·2024-02-04 20:57

k8s存储之PV、PVC

在k8s集群中，资源存储会散落到各个工作节点上，这样对用资源调用很不方便，那么k8s是如何实现存储资源共享的呢，本文浅尝辄止的探讨一下，k8s是通过pv、pvc实现的。

fengchengwu2012·2024-02-04 20:24

Docker进阶篇-compose容器编排

一、描述Docker-Compose是Docker官方的开源项目，负责实现对Docker容器集群的快速编排。

陪我养猪吧·2024-02-04 20:23

26.云原生ArgoCD高级之ApplicationSet

云原生专栏大纲文章目录ApplicationSet介绍ApplicationSet特性ApplicationSet安装ApplicationSet工作原理ApplicationSet生成器列表类型生成器集群生成器基础使用方法

野心与梦·2024-02-04 20:42

Hadoop集群搭建

搭建Hadoop集群涉及多个步骤，包括准备硬件环境、安装和配置Hadoop以及验证集群的安装。

终将老去的穷苦程序员·2024-02-04 19:53

终于理清楚了，k8s服务流转

、LoadBalancer、Headless(None)必须了解↓↓↓↓↓↓1.ClusterIP是什么配置服务的会话亲和性服务发现2.就绪探针(readinessProbe)3.headless连接集群外部服务的方式

记忆机器·2024-02-04 19:59

45.使用Sentry授权—Kudu

45.1演示环境CDH5.11.2和CDH5.13两个集群运行正常两个集群Kudu已经安装，且已集成Impala，操作正常两个集群都已启用Sentry并且配置正确CDH5.11.2和CDH5.13集群用

大勇任卷舒·2024-02-04 18:30

nfs服务部署搭建

NFS主要功能是通过局域网络让不同的主机系统之间可以共享文件或目录NFS系统和Windows网络共享、网络驱动器类似,只不过windows用于局域网,NF用于企业集群架构中,如果是大型网站,

Red丶哞·2024-02-04 18:08

云原生工具集 · 彩色输出kubectl内容

背景kubectl命令是k8s的CLI工具，如果你是维护K8s集群的管理员或者是开发可在Kubernetes上运行的应用程序的开发人员，那几乎每天都会使用kubectl，但是尽管kubectl已经很好，

云原生生态圈·2024-02-04 18:57

手把手教你打造你专属的 Kubectl，让输出变的更加绚丽多彩

如果您是公司Kubernetes集群的管理员或开发在Kubernetes上运行的应用程序的开发人员，您几乎每天都会使用kubectl。而我也是其中之一。

运维之美·2024-02-04 18:57

运行环境jre版本和jar包编译版本不一致导致：Unsupported major.minor version 52.0

问题我在本地使用IntellijIdea打包了一个spark的程序jar包，放到linux集群上运行，报错信息是：Unsupportedmajor.minorversion52.0环境本机系统->windows10

stone_zhu·2024-02-04 18:51

达梦数据库的最大连接数，怎么查看和设置

公司为客户提供各类数据库软件及集群软件、云计算与大数据等一系列数据库产品及相关技术服务，致力于成为国际顶尖的全栈数据产品及解决方案提供商。

ThatMonth·2024-02-04 18:08

Docker compose介绍及常用命令

什么是DockercomposeCompose项目是Docker官方的开源项目，负责实现对Docker容器集群的快速编排。

overflowedstack·2024-02-04 17:23

Redis核心技术与实战【学习笔记】 - 19.Pika：基于SSD实现大容量“Redis”

你可能会想到使用Redis切片集群，把数据分散保存到不同的实例上。

陈建111·2024-02-04 16:16

在Python中读写Kafka队列

在Python中读写Kafka队列通常使用kafka-python库，这是一个非常流行的库，可以让你方便地与Kafka集群进行交互。以下是安装这个库以及基本使用方法的介绍。

言之。·2024-02-04 16:09

听风347·2024-02-04 15:47

记一次故障-Rancher界面突然无法访问，且K8s集群无法访问

公司使用docker单节点方式部署rancher，利用rancehr来操作k8s集群，有一天要访问rancherui时，发现打不开，然后部署的所有容器也都不能使用，立马到服务器上查看情况，发现rancher

Mright·2024-02-04 15:01

【Windows】Windows下通过图形界面安装MySQL数据库

付费MySQLClusterCGE：高级集群版本。MySQLCluster是一个实时开源事务型数据库，专为在高吞

牛银龙·2024-02-04 12:08

linux 下nginx的安装与 tomcat集群

1.安装依赖包yuminstallgccyuminstallpcre-develyuminstallzlibzlib-develyuminstallopensslopenssl-devel//一键安装上面四个依赖yum-yinstallgcczlibzlib-develpcre-developensslopenssl-devel2.下载并解压安装包//创建一个文件夹cd/usr/localmkdi

你好龙卷风！！！·2024-02-04 11:08

大数据Zookeeper--集群操作

文章目录集群操作集群安装选举机制（面试重点）Zookeeper选举机制——第一次启动Zookeeper选举机制——非第一次启动ZK集群启动停止脚本客户端命令行操作命令行语法znode节点数据信息节点类型

泛黄的咖啡店·2024-02-04 11:15

大数据入门--zookeeper（一）--集群搭建与常用指令

Zookeeper单机搭建下载官方安装包#解压tar-zxvfzookeeper-3.4.5.tar.gz-C/opt/module/#配置zoo.conf，只需要将conf/zoo_sample.conf重命名为zoo.conf即可mvconf/zoo_sample.cfgconf/zoo.cfg#启动bin/zkServer.shstart#查询状态bin/zkServer.shstatus#

许中宝·2024-02-04 11:40

Hbase2.1 集群搭建

>Hbase在大数据的体系中扮演着DB角色，不得不说是重要的一员，在上一篇，大猪已经给大家演示了[Hadoop3.2集群搭建](https://www.jianshu.com/p/3182aaff918d

kikiki4·2024-02-04 11:08

SpringSecurity如何理解学习常用拦截器——举例进行学习——从0到1教会方法自行学习~

SpringSecurity的常用拦截器——举例进行学习文章专栏：前后端分离项目（Vue+SpringBoot）最近更新：2022年2月5日Nginx入门到实战案例配置反向代理、负载均衡、动静分离以及对Nginx高可用的服务器集群个人简介

Alascanfu·2024-02-04 10:50

elasticsearch学习六：学习全文搜索引擎 elasticsearch的语法，使用kibana进行模拟测试（持续更新学习）

文章目录前言一、基本概念1.Node节点与Cluster集群2.Index索引3.Document文档4.Type类型5.逻辑对比6.物理设计二、ES的命令风格三、新建和删除index索引四、分词器使用和学习

java冯坚持·2024-02-04 10:39

2019-04-12课堂笔记

一、集群1.集群概念简单说就是一堆机器做同一件事2.企业为什么要用集群？a.能7*24小时提供服务，多台机器同时工作互为备份。

1340010b7af0·2024-02-04 09:44

Hadoop详解

NameNodeNameNode：文件系统的命名空间(面试题)1.文件名称2.文件目录结构3.文件的属性(权限创建时间副本数)4.文件对应哪些数据块-->数据块对应哪些分布在哪些DN节点上列表不会持久化存储这个映射关系，是通过集群的启动和运行时

ly稻草·2024-02-04 09:34

华为资深工程师总结的这本435页的书，居然把网络协议给趣谈了

本来觉得写Java程序时可以依赖别人的库，所以就不用关心这么多底层的技术了，但是到后来才发现，服务数量一多，吞吐量一大，我们关心的不再仅仅是某个Java应用，而是要提升整个集群的性能，这时网络问题就会出现

Java老程·2024-02-04 09:43

【Oracle云】ORACLE OKE 自定义数据节点的初始化参数完成系统参数和根卷的扩容

本文将介绍如何在OKE环境中自定义数据节点的初始化参数；通过OKE的托管服务，用户可以轻松创建、扩展和管理高度可用的Kubernetes集群，实现更高效的容器化部署和操作。

炸鸡物料库·2024-02-04 09:09

转载-58同城离线计算平台设计与实践

58同城离线计算平台设计与实践编者荐语：58离线计算平台基于Hadoop生态体系打造，单集群4000+台服务器，数百PB存储，日40万计算任务，面临挑战极大。

无色的叶·2024-02-04 09:14

Fink CDC数据同步（一）环境部署

Flink能在所有常见集群环境中运行，并能以内存速度和任意规模进行计算。

苡~·2024-02-04 08:38

linux系统lvs负载均衡器的概念和调度算法

lvs的概念和调度算法概念负载均衡集群集群技术集群技术的实现负载均衡分类四层负载均衡七层的负载均衡四层负载与七层负载的区别LVS的调度算法静态算法（4种）RR：轮询调度WRR：加权轮询DH：目标地址散列调度

丨析木丨·2024-02-04 08:58

nacos集群搭建

Nacos集群搭建1.集群结构图官方给出的Nacos集群图：其中包含3个nacos节点，然后一个负载均衡器代理3个Nacos。这里负载均衡器可以使用nginx。

程序媛9688·2024-02-04 07:04

gee微端服务器系统设置,geem2微端服务器设置

geem2微端服务器设置内容精选换一换用户可以在公有云MRS集群以外的节点上使用客户端，在使用客户端前需要安装客户端。

weixin_39878989·2024-02-04 07:33

gee微端服务器系统设置,gee微端服务器推荐配置

SSL连接方式的安全性高于普通模式，集群默认开启SSL功能允许来自客户端的SSL连接或非SSL连接，从安全性考虑，建议用户在客户端使用SSL连接方式。

小林手·2024-02-04 07:03

完结，从零开始学python（十八）想成为一名APP逆向工程师，需要掌握那些技术点？

MySQLRedisMongoDB2.机器学习3.全栈开发4.数据分析Numpy+pandas+MatplotlibHadoopSpark5.爬虫工程师养成采集功底自动化和抓包框架源码scrapyfeapder爬虫集群部署

爬完虫变成龙·2024-02-04 07:52

Sentinel应用笔记

特性：富的应用场景：Sentinel承接了阿里巴巴近10年的双十一大促流量的核心场景，例如秒杀（即突发流量控制在系统容量可以承受的范围）、消息削峰填谷、集群流量控制、实时熔断

KEEPMA·2024-02-04 07:17

k8s集群资源（pod、镜像等）自动回收

垃圾收集是Kubernetes用于清理集群资源的各种机制的统称。自动回收机制可以避免随着时间推移，系统中的镜像等越来越多，导致硬盘等资源不足。

xiegwei·2024-02-04 07:35

06:原生云K8S解密｜K8S集群安装部署｜K8S网络插件

原生云K8S解密｜K8S集群安装部署｜K8S网络插件K8SK8S集群架构图解K8S部署仓库初始化kube-master安装计算节点的安装token管理配置flannel网络（master主机操作）K8S

桑_榆·2024-02-04 07:33

Docker 第十章： Docker 三剑客之 Swarm （集群与容器部署）

第十章：Docker三剑客之Swarm（集群与容器部署）本章知识点：DockerSwarm是Docker的三剑客之一，用于实现Docker容器的集群管理和部署。

半部论语·2024-02-04 06:51

21世纪文艺青年新型逛街：shopping in gallery

刚刚闭展的香港巴塞尔艺术展，世界名家和艺术爱好者汇聚一堂，高价艺术品频现；香港蘇富比拍卖会上，KAWS的《THEKAWSALBUM》以600万估价登场，奇迹般拍出1.16亿港元；网红艺术家草间弥生带着4

城市画报·2024-02-04 06:02

SparkException: A master URL必须在配置中设置

MasterURL是指定Spark集群的主节点地址，它对于初始化SparkContext是必需的。解决方案1.通过代码设置MasterURL在你的Spark应

小湘西·2024-02-04 06:07

Spark部署模式

LocalMode2.StandaloneMode3.YARNMode4.MesosMode5.KubernetesMode部署模式选择部署模式概述ApacheSpark支持多种部署模式，这些模式决定了如何在集群上启动和运行你的

小湘西·2024-02-04 06:02

docker搭建nacos集群 nginx实现负载均衡(技术提升)

多台服务器之间互相注册，一台DOWN，自动切换节点目录前言:工具准备:Nacos集群正文:1.安装docker2.拉取nacos镜像3.创建nacos的持久化数据库4.修改nacos配置文件5.编写nacos

morou&猫猫·2024-02-04 06:00

docker搭建nacos集群 nginx实现负载均衡

本文使用三台线上服务器，基于docker搭建nacos高可用，并通过nginx来实现负载均衡。多台服务器之间互相注册，一台DOWN，自动切换节点**文章结构**1.安装docker2.拉取nacos镜像3.创建nacos的持久化数据库4.修改nacos配置文件5.编写nacos安装脚本6.安装nginx7.使用nginx做负载均衡文章结构安装docker拉取nacos镜像创建nacos的持久化数据

Sora33·2024-02-04 06:27

阿里云redis集群模式导致的gateway网关限流不生效

阿里云redis集群模式下无法限流问题现象问题现象:阿里云redis集群无法限流,提示一下异常Errorinexecution;nestedexceptionisio.lettuce.core.RedisCommandExecutionException

whiteBrocade·2024-02-04 06:18

MySQL调优

优化类型大概分类三个类型结构/架构优化：读写分离、集群热备、分布式架构、引入缓存/消息/搜索中间件、分库分表、中台架构（大数据中台、基础设施中台）等配置/参数优化：调整应用系统中各层面的配置文件、启动参数达到优化性能的目标代码

whiteBrocade·2024-02-04 06:48

推荐频道

1.16集群