集群运维

Java 大视界 -- Java 大数据实时数仓的构建与运维实践（55）

亲爱的朋友们，热烈欢迎你们来到青云交的博客！能与你们在此邂逅，我满心欢喜，深感无比荣幸。在这个瞬息万变的时代，我们每个人都在苦苦追寻一处能让心灵安然栖息的港湾。而我的博客，正是这样一个温暖美好的所在。在这里，你们不仅能够收获既富有趣味又极为实用的内容知识，还可以毫无拘束地畅所欲言，尽情分享自己独特的见解。我真诚地期待着你们的到来，愿我们能在这片小小的天地里共同成长，共同进步。一、欢迎加入【福利社群
青云交·2025-02-02 05:40

集群部署时的分布式 Session 如何实现？

面试题集群部署时的分布式Session如何实现？
码农小旋风·2025-02-02 02:29

flume系列之：消费Kafka集群Topic报错java.io.IOException: Can‘t resolve address: data03:9092

flume系列之：消费Kafka集群Topic报错java.io.IOException:Can'tresolveaddress:data03:9092Causedby:java.nio.channels.UnresolvedAddressException
快乐骑行^_^·2025-02-02 01:25

Kubernetes监控，查看日志

Kubernetes监控与日志1、查看集群资源状态在Kubernetes集群中，查看集群资源状态和组件状态是非常重要的操作。以下是一些常用的命令和解释，帮助你更好地管理和监控Kubernetes集群。
稚辉君.MCA_P8_Java·2025-02-02 01:51

ElasticSearch view

节点（Node）：elasticsearch集群中一个服务器实例，负责存储数据、处理请求等，
稚辉君.MCA_P8_Java·2025-02-02 01:51

GBase 8a Mpp Cluster集群产品性能优化篇之减少嵌套-查询改写

将group部分移到内部，嵌套查询改成了一个查询原SQL：SELECTAAE003对应费款所属期,AAE002费款所属期,AAA041个人缴费比例,AAA043单位缴费划入个人账户比例,AAA115明细类型,AAE011经办人,AAE036经办时间,BAE181数据来源,AAB191到账日期,NVL(SUM(NVL(AAE180,0)),0)缴费基数,NVL(SUM(个人缴费金额),0)个人缴费金
zhu1981hui·2025-02-01 23:12

spark和python的区别_Spark入门(Python)

Spark使用内存缓存来提升性能，因此进行交互式分析也足够快速(就如同使用Python解释器，与集群进行交互一样)。缓存同时提升了迭代算法的性能，这使得Spark非常适合数据理
weixin_39934257·2025-02-01 23:42

Spark 学习-1 (python)

每个Spark应用由一个驱动器程序（driverprogram）发起集群上的并行操作，驱动器程序一般要管理多个执行器（executor）节点。
一二三四0123·2025-02-01 23:40

openeuler 22.03 lts sp4 使用 kubeadm 部署 k8s-v1.28.2 高可用集群

文章目录@[toc]废话篇这篇文章什么时候写的为什么是openeuler为什么是22.03ltssp4高可用架构题外话干活篇环境介绍系统初始化相关关闭防火墙关闭selinux关闭swap开启内核模块开启模块自动加载服务sysctl内核参数调整清空iptables规则安装各种依赖和工具修改.bashrc文件安装kubeadm和kubelet简化kubectl命令启动kubelet安装containe
月巴左耳东·2025-02-01 21:24

解决 SSH 自动掉线问题：客户端与服务器端配置优化指南

本文将详细讲解如何配置以保持SSH会话的持续连接，确保运维系统的连续性。一、客户端配置在SSH客户端端，常见的超时问题是由于客户端在空闲一段时间后没有活动，导致服务器主动关闭连接。
运维开发王义杰·2025-02-01 21:24

centos7搭建flink1.18并以 standalone模式启动

版本组件版本scala2.12.20java1.8.0_181flink1.18.1关于scala和Java的安装参考：scala和java安装flink下载地址：flink下载链接集群规划bigdata01bigdata02bigdata03masterworkerworkerworker
咸鱼c君·2025-02-01 20:50

集群部署时的分布式 session 如何实现？

面试题集群部署时的分布式session如何实现？
打不死的喜羊羊·2025-02-01 20:20

分布式微服务系统架构第90集：现代化金融核心系统

4、运维侧：传统面向资源型监控体系难以支撑现代化核心。5、监管侧：对业务连续性导向趋严趋细。6、成本侧：单客核心的运营成本逐渐走高。
掘金-我是哪吒·2025-02-01 20:50

Flink整合Hudi及使用

jar包即可完成整合#1、将hudi-flink1.15-bundle-0.15.0.jar包上传到flink的lib目录下/usr/local/soft/flink-1.15.3/lib--如果没有启动集群
我的K8409·2025-02-01 17:23

dubbo 负载均衡策略和集群容错策略都有哪些？动态代理策略呢？

面试题dubbo负载均衡策略和集群容错策略都有哪些？动态代理策略呢？
码农小旋风·2025-02-01 17:20

Neo4j 单机和集群部署教程

目录Neo4j单机和集群部署教程第一部分：Neo4j概述1.1Neo4j的特点1.2Neo4j的应用场景第二部分：Neo4j单机部署教程2.1安装Neo4j2.1.1下载和安装Neo4j2.1.2启动Neo4j2.1.3
闲人编程·2025-02-01 17:19

Kubernetes 中 LimitRange 与 ResourceQuota 的深度剖析

摘要：Kubernetes（简称k8s）作为容器编排领域的事实标准，提供了丰富的资源管理机制来确保集群的高效、稳定运行。
大大宝的博客·2025-02-01 15:59

SDK级的kubectl，client-go的深度封装：kom使用指南

目录什么是kom特点示例程序安装使用示例1.多集群管理注册多集群显示已注册集群选择默认集群选择指定集群2.内置资源对象的增删改查以及Watch示例创建某个资源Get查询某个资源List查询资源列表通过Label
大大宝的博客·2025-02-01 15:59

智能化Kubernetes管理：AI与ChatGPT提升运维效率的创新实践

然而，Kubernetes集群的管理在复杂度、规模和资源优化等方面仍然面临巨大挑战。传统的Kubernetes运维方式往往依赖手动操作，导致效率低下，且容易产生人为错误。
大大宝的博客·2025-02-01 15:59

性能测试后期的性能调优

设计优化算法优化代码优化JVM优化参数优化数据库优化高可用性，高可靠性，可扩展性及运维能力是高并发系统的设计要求（当然也要顾及成
Feng.Lee·2025-02-01 14:55

如何学习Java后端开发

文章目录一、Java语言基础二、数据库与持久层三、Web开发基础四、主流框架与生态五、分布式与高并发六、运维与部署七、项目实战八、持续学习与提升总结路线图学习Java后端开发需要系统性地掌握多个技术领域
写代码的大学生·2025-02-01 14:21

一体化运维监控管理平台：产品架构与功能解析

在当今的信息化时代，运维监控管理平台已成为确保企业IT系统稳定运行不可或缺的工具。本文旨在深入探讨一体化运维监控管理平台的产品架构及其核心功能，以期为运维团队提供有益的参考。
MXsoft618·2025-02-01 13:15

监控易：一体化智能运维的多场景集中化监控

监控易凭借其“一体化智能运维”的独特理念，推出了领先的集中化监控管理模式，不仅整合了多种监控需求，还通过创新技术为企业节省成本、优化运维效率。
MXsoft618·2025-02-01 13:15

监控易：智慧高校一体化综合运维解决方案

新冠疫情发生以来，线上线下教育模式的初探，促使学校、家长和社会对于教育信息化认识产生巨大的转变。伴随着云计算和物联网的发展，教育已经开启了一个全新的时代。自“十三五”规划中明确提出“支持各级各类学校建设智慧校园，综合利用互联网、大数据、人工智能和虚拟现实技术探索未来教育教学新模式”以来，政策春风也不断加码教育信息化进程，《教育信息化2.0行动计划》以及《智慧校园总体框架》的相继发布，全国各地都在积
MXsoft618·2025-02-01 13:15

监控易：一体化智能运维在复杂网络环境的架构优势

监控易以其“一体化智能运维”的产品理念，成为运维领域的优势品牌。本文将从架构优势入手，深入探讨监控易如何通过领先的技术实现分布式复杂网络的灵活扩展，并为企业提供高效、稳定、可靠的运维支持。
MXsoft618·2025-02-01 13:44

2024年数据平台建设指南

作为一名资深的首席数据工程专家,我将在本指南中全面解析数据平台建设的方方面面,涵盖架构设计、技术选型、开发实施、运维管理、新兴实践与趋势等内容,并结合真实案例分享业内最佳实践,为您指引数据平台建设之路。
DataHub数据社区·2025-02-01 12:42

127.0.0.1 与 localhost：必须知道的区别与用法

前言在开发与运维工作中，我们经常会遇到127.0.0.1和localhost，它们在很多情况下看似可以互换使用，但实际上有一些细微的区别。
四七伵·2025-02-01 11:59

Nginx 缓存那些事儿：原理、配置和最佳实践

Nginx缓存那些事儿：原理、配置和最佳实践在当今的互联网世界，网站的访问量和数据处理量不断攀升，如何确保用户能够快速、稳定地访问我们的网站，已经成为每个运维工程师面临的挑战。
weixin_42587823·2025-02-01 11:59

Hadoop--HA架构详解

一、HA架构工作背景HDFS集群中的nameNode存在单点故障因素。
娘子，出来看上帝·2025-02-01 10:20

Hadoop HA 架构

为什么要用集群?
weixin_30569033·2025-02-01 09:49

redis从安装到三主三从集群

文章目录一、为什么要使用Redis1、读写的二八原则2、信息的统一管理二、常见缓存方案的对比三、安装redis1、下载redis安装包、上传linux服务器2、安装依赖3、解压安装包4、进入文件夹、编译并安装5、修改redis的核心配置文件6、修改redis的启动脚本7、配置开机启动8、运行reids四、redis各数据类型的基本命令1、通用的命令2、String的命令3、hash的命令4、lis
敲代码的旺财·2025-02-01 08:10

分布式系统架构7：本地缓存

引入缓存后，既有好处也有坏处引入缓存负面影响：开发角度，增加了系统复杂度，需考虑缓存失效、更新、一致性问题运维角度，缓存会掩盖一些缺陷问题安全角度，缓存可能泄密某些保密数据引入缓存的理由：为了缓解CPU
快乐非自愿·2025-02-01 08:35

基于深度学习的大规模模型训练

以下是关于基于深度学习的大规模模型训练的详细介绍：1.背景和动机数据和模型规模增长：随着数据量和模型复杂度的增加，传统的单机或小规模集群训练难以满足需求。
SEU-WYL·2025-02-01 07:56

PyDeequ库在AWS EMR启动集群中数据质量检查功能的配置方法和实现代码

PyDeequ是一个基于ApacheSpark的PythonAPI，专门用于定义和执行“数据单元测试”，从而在大规模数据集中测量数据质量。PyDeequ框架在PySpark代码中提供了全面的数据质量检查功能，能够帮助用户&有效地监控和提升大规模数据集的数据质量。它在PySpark代码中的数据质量检查功能主要包括以下几个方面：核心组件指标计算（MetricsComputation）：利用分析器（An
weixin_30777913·2025-02-01 04:59

StarRocks常用命令

目录1、StarRocks集群管理&配置命令2、StarRocks常用操作命令3、StarRocks数据导入和导出1、StarRocks集群管理&配置命令查询FE节点信息SHOWfrontends;SHOWPROC
sunny05296·2025-02-01 03:59

本地Apache Hive的Linux服务器集群复制数据到SQL Server数据库的分步流程

我们已经有安装ApacheHive的Linux服务器集群，它可以连接到一个SQLServerRDS数据库，需要在该Linux服务器上安装配置sqoop，然后将Hive中所有的表数据复制到SQLServerRDS
weixin_30777913·2025-02-01 03:54

Kafka 如何实现高性能

1.高吞吐量的设计分布式架构：Kafka通过分布式的集群架构设计来横向扩展，提高吞吐量。多个生产者、消费者和节点可以同时并行工作，分担流量负载。
言之。·2025-02-01 02:49

互联网大厂的微服务架构系统应对超大流量解决方案

RateLimiter、Nginx的limit_req模块）限制远程接口的调用速率、限制消息系统的消费速率1.1接入层限流抗疫项目中，一般ISV会把Nginx作为业务的接入层，通过Nginx将请求分发到后端的应用集群上
欧子说Java·2025-02-01 00:03

Linux上快速压缩与解压缩（zip， tag.gz）

在集群上，我们通常会与很大的model或者data压缩文件打交道。此文整理了在linux集群上实现快速解压缩的技法。
Dinsanity·2025-02-01 00:31

Zookeeper的性能优化与调优

然而，随着集群规模的扩大和业务量的增长，Zookeeper的性能瓶颈也逐渐显现出来。为了确保Zookeeper能够稳定高效
AI天才研究院·2025-02-01 00:30

【zookeeper】zookeeper 性能优化与配置详解 一些踩坑建议

通过前面对ZooKeeper的配置可以看出，对ZooKeeper集群进行配置的时候，它的配置文档是完全相同的（对于集群伪分布模式来说，只有很
九师兄·2025-01-31 23:58

中间件 | RocketMq - [broker 配置]

INDEXbroker.confbroker.conf干货见注释###集群名brokerClusterName=DefaultCluster###nameserver#nameserver地址namesrvAddr
问仙长何方蓬莱·2025-01-31 23:56

架构 | 基于 crontab 进程监控增强集群可用性

INDEX§0前言§1思路§2实现§0前言集群的高可用性可以直接简明的使用SLA来衡量，无所谓其他指标。
问仙长何方蓬莱·2025-01-31 23:25

19 压测和常用的接口优化方案

测试还要做测试报告，出具了测试报告给到运维团队才能上线。压测的测试报告主要有以下几个方面:1.响应时间2.不同的线程压测的错误率,也叫失败率3.吞吐率(TPS)4压测情况下服务器的其他性能指标。
40岁的系统架构师·2025-01-31 23:54

Python 运维（二）：Python 虚拟环境

本文收录于《Python入门核心技术》专栏，专栏总目录：点这里，订阅后可阅读专栏内所有文章。大家好，我是水滴~~本文介绍了如何创建和使用Python虚拟环境，以及如何管理项目的依赖库。通过合理使用虚拟环境，你可以更好地组织和管理Python项目，提高开发效率和代码可靠性。文章内容包含大量的示例代码，希望能够帮助新手同学快速入门。文章目录1.什么是Python虚拟环境？2.创建Python虚拟环境2
水滴技术·2025-01-31 23:53

RocketMQ的集群架构是怎样的

RocketMQ的集群架构包括四个主要角色：NameServer集群、Broker主从集群、Producer和Consumer客户端。
还能在学一小时·2025-01-31 22:46

数据库性能调优中的配置参数调整：提升系统效率的关键环节

数据库性能调优中的配置参数调整：提升系统效率的关键环节date:2025/1/31updated:2025/1/31author:cmdragonexcerpt:数据库的性能直接影响到应用程序的响应能力和用户体验，因此在日常运维中
·2025-01-31 21:31

运维小白必看！手把手教你公网远程访问内网Nginx的完整步骤

文章目录前言1.安装Docker2.使用Docker拉取Nginx镜像3.创建并启动Nginx容器4.本地连接测试5.公网远程访问本地Nginx5.1内网穿透工具安装5.2创建远程连接公网地址5.3使用固定公网地址远程访问前言作为开发人员，在日常的项目推进中，你是否遇到过这样的烦恼：需要频繁地从家或客户现场连接公司内部网络？或者有时候因为出差在外，无法及时调试和访问内网中的关键服务？别担心，今天我
web18285482512·2025-01-31 20:31

软件架构设计与模式之：DevOps与运维架构

DevOps的关键点DevOps的价值3.DevOps基本概念、术语及流程管理工程价值流动方法论模型职能团队能力圈景气文化工具链4.DevOps与运维架构DevOps与运维架构的区别DevOps实践与运维架构
AI天才研究院·2025-01-31 20:31

ambari-server页面错位问题解决

背景：项目新安装的ambari集群页面错位如下解决办法（临时）：修改ambari-server的前端文件：/usr/lib/ambari-server/web/javascripts/app.js原代码
王木头·2025-01-31 20:59
上一页 24 25 26 27 28 29 30 31 下一页
按字母分类： ABCDEFGHIJKLMNOPQRSTUVWXYZ其他