flink集群第20页

K8S集群常用命令

1，查看podkubectlgetpods-A查看所有的podkubectlgetpods这个只查看namespace为default下的pod，也就是只查看默认命名空间下的podkubectlgetpod-A-owide查看所有的pod，并且放出的信息更全（包含了pod的ip）2，查看pod的具体信息kubectldescribepodmy-pod-nmy-namespace查看命名空间my-n

年薪丰厚·2025-01-18 09:19

Kubernetes--Service负载均衡机制

一、负责均衡机制当一个Service对象在Kubernetes集群中被定义，集群内的客户端应用就可以通过服务IP访问到具体的Pod容器提供的服务器了。

GaoChuang_·2025-01-18 08:10

使用 Kubernetes 实现负载均衡

一、Kubernetes负载均衡的基本概念ClusterIP（默认类型）只能在集群内部访问，分发到Pod的流量通过IPtables或IPVS转发。NodePort通过每个节点的固定端口将流量暴露给外部

卫玠_juncheng·2025-01-18 08:38

如何通过 Nginx 实现 CouchDB 集群的负载均衡并监控请求分发

本文将详细介绍如何通过Nginx实现CouchDB集群的负载均衡，并监控请求被分发到哪一台CouchDB节点。1.为什么需要负载均衡？CouchDB集群由多个节点组成，每个节点都可以处理请求。

田猿笔记·2025-01-18 07:36

智算中心建设热潮涌动 AI服务器赋能加速

2022年，随着国家“东数西算”工程启动，我国算力地图正式开始，形成八大枢纽、十大算力中心集群。据中国电信研究院发布的《智算产业发展研究报告（202

·2025-01-18 05:43

Apache Flink 2.0-preview released

ApacheFlink社区正在积极准备Flink2.0，这是自Flink1.0发布8年以来的首次大版本发布。

·2025-01-18 00:58

Redis 3种持久化机制

大部分原因是为了之后重用数据（比如重启机器、机器故障之后恢复数据），或者是为了做数据同步（比如Redis集群的主从节点通过RDB文件同步数据）。

妖怪兮诺‍·2025-01-18 00:12

如何实现集群部署

集群部署是指将多个计算节点（通常是服务器）组合在一起，形成一个协同工作的系统，以提供更高的性能、可用性和可靠性。集群部署广泛应用于各种场景，如Web服务、数据库、大数据处理等。

DaXiongJoker·2025-01-17 21:49

Redis集群部署——sentinel模式

容器化运行sentinel实例1、获取sentinel.conf配置文件从官网下载对应的tar包，解压找到对应的sentinel.conf配置文件，修改其中的配置文件注意：#设置监听节点，最后的数字2是quorum，表示客观下线时需要多少哨兵服务同意sentinelmonitormaster63792#设置验证密码避免不必要的错误信息sentinelauth-passmaster123456#设置

学!学!学·2025-01-17 21:48

2024年最新Python：Page Object设计模式_python page object，BTAJ大厂最新面试题汇集

知识体系：含编程语言、算法、大数据生态圈组件（Mysql、Hive、Spark、Flink）、数据仓库、Python、前端等等。网上学习资料一大堆，但如果学到的知识不成体系，遇到问题时只是

m0_60707708·2025-01-17 20:36

搭建k8s集群

由于格式和图片解析问题，为了更好体验，可前往阅读原文本文带着大家按照官方文档进行k8s搭建，环境是基于arm架构centos7.9的虚拟机环境进行的，如果你使用的是非ARM架构的系统，仍然可以参考文章指导，而涉及到的一些安装链接需要根据情况替换成兼容你自己系统的链接本次安装的版本为1.26.0版本，将会通过多种工具进行搭建，如：minikube、kubeadm等等现阶段k8s的迭代速度还是很快的，

·2025-01-17 20:45

2024年总结：大转向

职业转向今年我在职业上尝试做了一个转向，具体的结果可能需要比较长的时间来检验我选择是否正确，所以转向的细节我就不全部展开了，可以确定是我依然会专注在Infra和BigData，比如今年我发布了SparkSQL和FlinkSQL

·2025-01-17 20:11

如何在 K8s 上部署 KRaft 模式 Kafka 集群？

首发：运维有术今天分享的主题是：不使用Helm、Operator，如何在K8s集群上手工部署一个开启SASL认证的KRaft模式的Kafka集群？

·2025-01-17 19:07

深入 Kubernetes 的健康奥秘：探针（Probe）究竟有多强？

探针（Probe）的作用就像集群的“健康监护员”，负责检测和管理容器的健康状态。没有它，K8s的稳定性和高可用性可能会大打折扣。本文将从探针的原理讲起，结合实际场景深入解析它

·2025-01-17 19:06

Flink 批作业如何在 Master 节点出错重启后恢复执行进度？

摘要：本文撰写自阿里云研发工程师李俊睿（昕程），主要介绍Flink1.20版本中引入了批作业在JMfailover后的进度恢复功能。

·2025-01-17 19:30

Redis集群部署详解：主从复制、Sentinel哨兵模式与Cluster集群的工作原理与配置

集群部署形式1、主从复制1.1工作机制1.2配置实现1.3优缺点1.4部署形式1.5主从复制优化2、Sentinel哨兵模式2.1工作机制2.2配置实现2.3优缺点2.4哨兵机制选举流程2.5脑裂问题解决方案

niaonao·2025-01-17 19:26

读Flink源码谈设计：Metric

版本日期备注1.02021.10.8文章首发1.12022.3.9fixtypo1.22022.7.3fixtypo0.前言前阵子笔者涉及了些许监控相关的开发工作，在开发过程中也碰到过些许问题，便翻读了Flink

·2025-01-17 19:28

Kubeflow：云原生机器学习工作流自动化开源框架详解

Kubeflow的核心组件Notebooks（交互式开发环境）支持JupyterNotebooks，通过Kubernetes集群进行计算资源的扩展和管理。Pipel

gs80140·2025-01-17 17:40

Flink CDC 在阿里云实时计算Flink版的云上实践

摘要：本文整理自阿里云高级开发工程师，ApacheFlinkCommitter阮航老师在FlinkForwardAsia2024生产实践（三）专场中的分享，主要分为以下四个方面：一、FlinkCDC&实时计算

·2025-01-17 15:17

RocketMQ由哪些角色组成，每个角色作用和特点是什么？思维导图代码示例（java 架构)

RocketMQ角色及特点思维导图建议NameServer作用提供路由信息管理服务负责客户端（Producer/Consumer）请求的负载均衡特点无状态节点支持集群部署简单且轻量级Broker作用消息存储的

用心去追梦·2025-01-17 15:16

分布式系统架构3：服务容错

这是小卷对分布式系统架构学习的第3篇文章，虽然知道大家都不喜欢看纯技术文章，写了也没多少阅读量，但是个人要成长的话，还是需要往深一点的技术上去探索的1.为什么需要容错分布式系统的本质是不可靠的，一个大的服务集群中

·2025-01-17 14:38

微服务-高级篇

2.理论基础3.部署与集成Seata4.Seata的四种模式5.Seata高可用三、分布式缓存1.Redis持久化2.搭建主从架构与哨兵模式3.RedisTemplate的哨兵模式4.Redis分片集群数据迁移

爪哇哇哇哇·2025-01-17 13:03

Kubernetes:基础的架构

kubernetes的一个简单机构图形k8s主要分为两个大结构：1控制面：master是集群的大脑和心脏2数据面：worker主要在master的指挥下进行工作，也称之为nodekubectl是k8s的管理工具我们可以使用

土豆凌凌七·2025-01-17 12:59

Kubernetes集群架构-关于 cgroup v2

Kubernetes集群架构-关于cgroupv2Kubernetes集群架构-关于cgroupv2什么是cgroupv2?

qichengzong_right·2025-01-17 12:23

浅谈云计算02 | 云计算模式的演进

云计算计算模式的演进一、云计算计算模式的起源追溯1.2个人计算机与桌面计算二、云计算计算模式的发展阶段2.1效用计算的出现2.2客户机/服务器模式2.3集群计算2.4服务计算2.5分布式计算2.6网格计算三

时光札记z·2025-01-17 09:56

zk 节点宕机如何处理？思维导图代码示例（java 架构)

当ZooKeeper(ZK)节点宕机时，集群需要能够快速响应并恢复服务以确保高可用性。

用心去追梦·2025-01-17 08:48

springboot + redis多数据源 + jedis集群模式

最近有个项目需要redis支持多个集群，网上搜了下，发现有个开源的项目spring-boot-starter-dynamic-redis，代码写的挺好，可惜只有单机版的，于是fork了他的代码改了下，支持

machunlin~·2025-01-17 08:16

nginx1.18.0集群安装（docker版）

主机规划192.168.31.101cancer01nginxloaderbalancer192.168.31.102cancer02nginxweb1192.168.31.103cancer03nginxweb2环境准备以下设置请根据实际情况自行配置，此处略设置IP设置主机名关闭防火墙关闭selinux禁用透明大页设置虚拟内存设置文件句柄数和进程数主机时间同步配置免密安装jdk添加用户授权sod

leveretz·2025-01-17 07:13

Redis 分布式锁

当服务采用集群方式部署的时候，本地锁无法发挥作用，所以需要分布式锁来实现加锁。

动态一时爽，重构火葬场·2025-01-17 07:12

【Meetup回顾第1期】竟是这样的国产数据库，YashanDB技术内幕曝光

YashanDB：面向混合负载的创新架构YashanDB是一款基于统一内核，支持单机/主备、共享集群、分布式等多种部署方式，覆盖OLTP/HTAP/OLAP交易和分析混合

·2025-01-17 05:14

Zookeeper 集群最少要几台机器，集群规则是怎样的？思维导图代码示例（java 架构)

在ZooKeeper集群中，为了确保高可用性和容错能力，通常建议最少使用三台机器。

用心去追梦·2025-01-17 05:51

zookeeper 是如何保证事务的顺序一致性的? 思维导图代码示例（java 架构)

ZAB保证事务顺序一致性的机制Leader选举与状态同步：当集群启动或当前Leader失效时

用心去追梦·2025-01-17 05:20

分布式集群中为什么会有 Master？思维导图代码示例（java 架构)

在分布式集群中引入Master（通常也称为Leader或Primary）节点的主要原因是为了解决一致性问题，提供单点决策机制，并简化系统的管理和协调。

用心去追梦·2025-01-17 05:20

Kafka介绍

以下是关于Kafka的详细介绍：核心概念•生产者（Producer）：负责向Kafka集群发送消息。生产者可以指定消息的键（key）和值（value），并将消息发送到指定的主题（Topic）。

Zero_pl·2025-01-17 04:43

【YashanDB知识库】安装共享集群时报错：YAS-05721

【标题】安装共享集群时报错：YAS-05721invalidinputparameter,reason:nodenameinvalid【问题分类】安装部署【关键字】YAS-05721、共享集群、主机名、

·2025-01-17 00:47

YashanDB加入国家新一代自主安全计算系统产业集群

YashanDB加入国家新一代自主安全计算系统产业集群12月11日，在2024第二届国家新一代自主安全计算系统产业集群融通生态大会上，深圳计算科学研究院(简称：深算院)与长沙市国链安全可靠计算机产业促进中心

·2025-01-17 00:43

万字长文，k8s之父带你阅读 deployment 源码

而Deployment的本质就是通过管理ReplicaSet和Pod在Kubernetes集群中部署无状态Workload。Deployment与控制器模式在K8s中，pod是最小的资源单位，而po

·2025-01-17 00:12

Apache PAIMON 学习

新一代实时数据湖技术，ApachePAIMON兼容ApacheFlink、Spark等主流计算引擎，并支持流批一体化处理、快速查询和性能优化，成为加速AI转型的重要工具。

潇锐killer·2025-01-16 22:54

Docker Swarm、Kubernetes 和 LVS 的功能对比

DockerSwarm、Kubernetes和LVS是三种不同的技术，分别用于容器编排、集群管理和负载均衡。

田猿笔记·2025-01-16 21:41

大数据新视界 -- 大数据大厂之 Impala 性能优化：集群资源动态分配的智慧（上）（23 / 30）

亲爱的朋友们，热烈欢迎你们来到青云交的博客！能与你们在此邂逅，我满心欢喜，深感无比荣幸。在这个瞬息万变的时代，我们每个人都在苦苦追寻一处能让心灵安然栖息的港湾。而我的博客，正是这样一个温暖美好的所在。在这里，你们不仅能够收获既富有趣味又极为实用的内容知识，还可以毫无拘束地畅所欲言，尽情分享自己独特的见解。我真诚地期待着你们的到来，愿我们能在这片小小的天地里共同成长，共同进步。本博客的精华专栏：大数

青云交·2025-01-16 21:09

大数据技术实训：Zookeeper集群配置

一、本地模式安装部署1）安装前准备（1）安装jdk（2）拷贝Zookeeper安装包到Linux系统下（3）解压到指定目录tar-zxvfzookeeper-3.5.7.tar.gz-C/opt/module/2）配置修改（1）将/opt/module/zookeeper-3.5.7/conf这个路径下的zoo_sample.cfg修改为zoo.cfg；$mvzoo_sample.cfgzoo.c

东风无力百花残_·2025-01-16 19:56

YashanDB完成中国信通院关系型数据库安全能力专项测试

崖山数据库YashanDB产品简介崖山数据库系统是深圳计算科学研究院(简称“深算院”)和深圳崖山科技有限公司(简称“崖山科技”)自主研发设计的新型数据库管理系统，提供包括单机主备、共享集群、空间数据库、

·2025-01-16 18:20

大数据学习笔记——zookeeper在hadoop集群中的作用

zookeeper主要是用来搭建高可用的Hadoop集群，即HighAvailability，简称(HA)测试中集群是可以不需要高可用的，即使用一个namenode即可。

鹅鹅鹅呢·2025-01-16 17:08

使用 NodeLocalDNS 提升集群 DNS 性能和可靠性

本文主要分享如何使用NodeLocalDNSCache来提升集群中的DNS性能以及可靠性，包括部署、使用配置以及原理分析，最终通过压测表明使用后带来了高达50%的性能提升。

·2025-01-16 17:42

2024年大数据最全【ES专题】ElasticSearch集群架构剖析_es集群

可以使用ingest对数据进行过滤、转换等操作MachineLearningNode：负责跑机器学习的Job，用来做异常检测TribeNode：TribeNode连接到不同的Elasticsearch集群

kenzsoft·2025-01-16 17:04

nfs-ganesha(用户态NFS)编译、安装和使用

前面的文章介绍了基于社区或自己项目编译rpm包搭建Ceph分布式存储集群的方法。本篇介绍使用nfs-ganesha源码编译、安装，客户端使用用户态nfs协议挂载使用Ceph文件存储和对象存储的方法。

沙拉OK·2025-01-16 15:15

MongoDB 8.0已全面可用

MongoDB8.0的新扩展功能，使数据分发速度提高了50倍，单分片集群成本降低了50%，实现了高效的扩展性。MongoDB8.0扩展了业界首创的可查询加密功能，可在

·2025-01-16 15:25

MySQL 简介与总结

可扩展性：MySQL支持主从复制、分区和集群等功能

MyNoSql·2025-01-16 14:37

【Elasticsearch】节点与集群：架构原理与优化实践

博主简介：CSDN博客专家，历代文学网（PC端可以访问：https://literature.sinhy.com/#/?__c=1000，移动端可微信小程序搜索“历代文学”）总架构师，15年工作经验，精通Java编程，高并发设计，Springboot和微服务，熟悉Linux，ESXI虚拟化以及云原生Docker和K8s，热衷于探索科技的边界，并将理论知识转化为实际应用。保持对新技术的好奇心，乐于分

程风破～·2025-01-16 14:05

案例分享｜Alluxio数据流转方案在联通智网的应用

分享嘉宾陈得泳-中国联通大数据平台SRE工程师，致力于基于开源生态构建稳定、高效、安全、低成本的大数据集群。

·2025-01-16 14:01

推荐频道

flink集群