集群调优

Flink集群架构

从本章节开始，我们对flink从它的一个集群的一个架构以及它的一个部署模式着手，去了解flink如何去部署在不同的这样的一个集群的一些资源管理器上面，以及相应的一些原理的一些解析。
流量留·2025-02-26 06:32

GaussDB 数据库迁移方案设计与实践

GaussDB（华为云分布式关系型数据库）凭借其高吞吐、强一致性、弹性扩展等特性，成为政企客户替换传统数据库（如MySQL、Oracle）或升级原有GaussDB集群的首选目标。
如清风一般·2025-02-26 05:56

DeepSeek Coder

以下是对该模型的详细分析：模型背景与特点模型规模与训练数据：DeepSeekCoder系列模型从头开始训练，覆盖了超过80种编程语言，总参数量从1B到33B不等，其中包含基础版和指令调优版。
百态老人·2025-02-26 05:24

K8S集群搭建(kubeadm+calico)

准备阶段环境显卡：4060ti系统：ubuntu22.041.安装docker官网安装步骤：#AddDocker'sofficialGPGkey:sudoapt-getupdatesudoapt-getinstallca-certificatescurlsudoinstall-m0755-d/etc/apt/keyringssudocurl-fsSLhttps://download.docker.
·2025-02-26 05:02

什么容错性以及Spark Streaming如何保证容错性

容错系统的关键特性包括负载平衡、集群、冗余、复制和故障转移等。
python资深爱好者·2025-02-26 04:48

微服务架构是什么？怎么使用？

微服务架构一.服务架构演变过程1.1单体应用架构所有的功能都在一个项目中1.2集群架构把一个单体项目部署多个，使用nginx进行负载均衡，根据负载均衡策略调用后端服务。
刘zy_9527·2025-02-25 21:34

Spark集群架构

文章目录Spark架构Spark执行任务流程Spark运行环境SparkonYARNSparkStandaloneSpark架构Spark可以运行在YARN上也可以运行Mesos上，无论运行在哪个集群管理架构上
情深不仅李义山·2025-02-25 20:25

四、spark集群架构

spark集群架构官方文档：http://spark.apache.org/docs/latest/cluster-overview.html集群架构我们先看这张图这张图把spark架构拆分成了两块内容
weixin_34411563·2025-02-25 20:54

精选 ES（elasticsearch）添加、修改、查询、删除详细使用语法

es使用简单，支持集群，适用于海量数据的存储、搜索与分析，应用十分广泛。
代码讲故事·2025-02-25 20:54

Spark集群架构介绍

Spark之YARN介绍一、导语二、Spark及其特性三、Spark架构总览一、导语ApacheSpark(后续简称为Spark)是一款正在点燃大数据世界的开源集群计算框架。
olifchou·2025-02-25 20:23

机器学习01

机器学习的基本过程如下：1.数据获取2.数据划分3.特征提取4.模型选择与训练5.模型评估6.模型调优一、特征工程（重点）0.特征工程步骤为：特征提取(如果不是像dataframe那样的数据，要进行特征提取
天行者@·2025-02-25 20:53

机器学习02

三、模型选择与调优1交叉验证(1)保留交叉验证HoldOutHoldOutCross-validation（Train-TestSplit）优点1.简单高效操作简便：这种方法的实现非常直接，只需要将原始数据集按照一定比例
天行者@·2025-02-25 20:53

Spark Standalone集群架构

北风网spark学习笔记SparkStandalone集群架构SparkStandalone集群集群管理器，clustermanager：Master进程，工作节点：Worker进程搭建了一套Hadoop
htfenght·2025-02-25 20:22

Spark----Spark 在不同集群中的架构

Spark注重建立良好的生态系统，它不仅支持多种外部文件存储系统，提供了多种多样的集群运行模式。
XiaodunLP·2025-02-25 20:22

运维实践 | 使用K3S之快速搭建精简版本K8S集群环境，助力开发测试环境!

欢迎关注「WeiyiGeek」点击下方卡片即可关注我哟!设为「星标⭐」每天带你基础入门到全栈实践再到放弃学习！涉及网络安全运维、应用开发、物联网IOT、学习路径、个人感悟等知识“花开堪折直须折，莫待无花空折枝。”作者主页：[https://www.weiyigeek.top]作者博客：[https://blog.weiyigeek.top]作者答疑学习交流群：请关注
全栈工程师修炼指南·2025-02-25 19:17

k8s集群内的pod连接集群外部的mysql， k8s集群内部服务如何连接集群外部mysql？ 一文搞明白

一、为什么不将mysql服务部署到k8s集群中使用呢？1.有状态服务在K8s中的管理比较复杂，特别是持久化存储的问题。
终端行者·2025-02-25 19:17

使用kuboard管理kubernetes集群

官网：https://kuboard.cn/learning/准备一台新的服务并安装docker[root@docker-server~]#dockerrun-d--restart=unless-stopped--name=kuboard-p80:80/tcp-p10081:10081/tcp-eKUBOARD_ENDPOINT="http://192.168.209.176:80"-eKUBOA
终端行者·2025-02-25 19:17

如何添加集群节点与token过期如何重新生成？

Kubernetes集群部署零、版本信息操作系统：CentosStream9、Centos7通过k8s版本：1.26.11.28.2本文档未使用docker,使用containerd从版本1.24开始已经去掉默认对
终端行者·2025-02-25 19:17

Mysql调优---Mysql锁机制（油炸圣女果的学习日记第七期）

本期来介绍一下Mysql中的锁机制。首先，分享一个今天抖音刷到的一个视频，很有意思且对上一期和这期的知识理解很有帮助，非常形象的体现了事务隔离级别在工作中出现的问题案例：6.41复制打开抖音，看看【孟小哥捉虫vlog的作品】想不通为啥有bug，骨干：你投下代码！#程序员...https://v.douyin.com/i5dpJhs6/[email protected]/25aNW:/锁机制详解锁是计算机协调多个进程
油炸圣女果·2025-02-25 19:46

蚁群算法（Ant Colony Optimization, ACO）

蚁群算法（AntColonyOptimization,ACO）目录算法起源核心思想数学模型算法流程参数调优改进变体应用场景优缺点分析代码框架最新研究一、算法起源1.1生物学基础蚂蚁觅食行为：自然界蚂蚁通过释放
QRSN·2025-02-25 18:11

docker修改command_只要 8 个步骤，学会这个 Docker 命令终极教程！

花费1-2天的时间来设置Docker集群，或找出导致Docker容器启动失败的代码，你是不是也有过类似的经历？
凶残小龙虾·2025-02-25 18:39

MySQL 主从集群同步延迟问题分析与解决方案

MySQL主从复制（Replication）是构建高可用架构的核心技术，但在实际应用中，主从同步延迟（ReplicationLag）是常见且棘手的问题。延迟会导致从库数据不一致、读请求返回旧数据，甚至引发业务逻辑错误。本文将深入分析延迟原因并提供系统性解决方案，助你彻底优化主从同步性能。一、主从同步延迟的本质主从同步延迟是指从库（Slave）的数据落后于主库（Master）的时间差，通常由以下环节
豪宇刘·2025-02-25 17:35

使用 pprof 对 Web 应用进行性能调优

Go性能调优这部分内容参考自q1mi老师的技术博客，原文地址为：https://liwenzhou.com/posts/Go/pprof/。
YGGP·2025-02-25 17:05

spark程序提交到集群上_Spark集群模式&Spark程序提交

Spark集群模式&Spark程序提交1.集群管理器Spark当前支持三种集群管理方式Standalone—Spark自带的一种集群管理方式，易于构建集群。
毫无特色·2025-02-25 16:25

JUC并发—9.并发安全集合三

CopyOnWriteArrayList2.并发安全的链表队列ConcurrentLinkedQueue3.并发编程中的阻塞队列概述4.JUC的各种阻塞队列介绍5.LinkedBlockingQueue的具体实现原理6.基于两个队列实现的集群同步机制
东阳马生架构·2025-02-25 15:53

Redis原理—3.复制、哨兵和集群

大纲1.Redis使用sync命令实现的复制功能2.Redis使用psync命令实现的复制功能3.Redis主从服务器之间的心跳检测4.从服务器如何实现复制主服务器的(复制的实现)5.Redis的复制拓扑介绍6.Redis主从复制数据延迟的处理7.Redis主从复制的问题8.RedisSentinel和高可用9.Redis如何保存更多的数据10.一个普通Redis服务器的初始化过程11.一个Sen
东阳马生架构·2025-02-25 15:53

基于docker-compose安装spark 1+3及Spark On Yarn模式集群

基于docker-compose安装spark1+3及SparkOnYarn模式集群1、`docker-compose.yml`：2、`spark.env`：此处的样例是参考别人的，之后自己整合一套可以使用的
dh12313012·2025-02-25 15:20

解决 kubeasz 安装k8s集群跨节点pod 无法使用cluster ip通讯问题

问题描述使用kubeasz搭建k8s集群后使用的配置文件#'etcd'clustershouldhaveoddmember(s)(1,3,5,...)
CHEN_RUI_2200·2025-02-25 13:00

从入门到放弃之生产环境基于Kubernetes V1.21.10搭建高可用集群

1.资源规划名称系统配置IP组件k8s-master01CentOS7.94核8G500G存储172.16.97.27kube-apiserverkube-controller-managerkube-scheduleretcdk8s-master02CentOS7.94核8G500G存储172.16.97.28kube-apiserverkube-controller-managerkube-s
收破烂的小白·2025-02-25 12:25

redis 集群 节点起不来_深入学习Redis：集群

写的时间有点长，喜欢的朋友点赞关注收藏素质三连，谢谢前言Redis集群解决了上述问题，实现了较为完善的高可用方案。
翻书汪·2025-02-25 11:48

关于#网络#的问题：网络是从楼上引一根网线下来，接了2台傻瓜交换机，也更换了ip还是不行

本文收录于《全栈Bug调优(实战版)》专栏，主要记录项目实战过程中所遇到的Bug或因后果及提供真实有效的解决方案，希望能够助你一臂之力，帮你早日登顶实现财富自由；同时，欢迎大家关注&&收藏&&订阅！
bug菌¹·2025-02-25 09:10

Zookeeper（71）Zookeeper在分布式数据库中的应用是什么？

节点管理：Zookeeper可以跟踪分布式数据库集群中的节点信息，监控节点的状态（上线、下线、故障等）。
辞暮尔尔-烟火年年·2025-02-25 09:38

Linux 系统性能调优技巧

目录一、性能调优的基本原则1、明确目标：调优前需明确性能瓶颈（如CPU、内存、磁盘I/O、网络等），避免盲目优化。
Morris只会敲命令·2025-02-25 09:07

云原生降本之路：技术创新与应用解析

内容，深入探讨了云原生技术在降低企业成本方面的应用，包括资源利用现状、成本优化思路、Kubernetes中的资源分配、横向与纵向伸缩、Kubernetes原生能力的不足、全链路降本的思考与价值主张、多种集群形态的利用
ITPUB-微风·2025-02-25 08:33

Spark性能调优方法总结

1、资源分配优化  Spark的分配资源主要就是executor、cpuperexecutor、memoryperexecutor、drivermemory等的调节，我们在生产环境中，提交spark作业时，用的spark-submitshell脚本，里面调整对应的参数：/usr/local/spark/bin/spark-submit–confspark.default.parallelism=1
Cynthiaaaaalxy·2025-02-25 08:32

Redis哨兵模式（sentinel）学习总结及部署记录（主从复制、读写分离、主从切换）

Redis哨兵模式（sentinel）学习总结及部署记录（主从复制、读写分离、主从切换）https://segmentfault.com/a/1190000020849841Redis的集群方案大致有三种
coding996·2025-02-25 06:47

lua垃圾回收机制

文章目录前言一、垃圾回收机制概述二、底层原理三、GC控制与调优四、GC的局限性总结前言Lua的垃圾回收（GarbageCollection,GC）机制是一种自动内存管理技术，主要基于标记-清除（Mark-and-Sweep
努力的小钟·2025-02-25 05:11

Spring Boot嵌入式服务器深度解析：从配置到调优的全方位指南

文章目录引言一、嵌入式服务器核心原理1.1架构设计特点1.2主流服务器对比二、嵌入式服务器配置实战2.1基础配置模板2.2HTTPS安全配置三、高级调优策略3.1线程池优化（Tomcat示例）3.2响应压缩配置
珠峰日记·2025-02-25 05:34

springboot单机支持1w并发，需要做哪些优化

可能涉及到多个层面，比如Web服务器配置、数据库优化、代码层面的调整，还有JVM调优之类的。首先，用户可能用的是内嵌的Tomcat，默认配置可能不够，比如最大线程数、连接数这些参数需要调整。
坚定信念，勇往无前·2025-02-25 05:34

联邦学习优化驱动医疗诊断新突破

这一技术突破为医学影像识别、病理特征分析等场景提供了新的技术路径，特别是在肿瘤筛查领域，通过迁移学习实现跨病种知识迁移，配合超参数自动调优机制，可使模型在有限标注数据下达到95%以上的病灶识别准确率
智能计算研究中心·2025-02-25 03:26

A10高效配置实战技巧

本文围绕A10Thunder系列设备的全流程调优展开，系统梳理从基础参数校准到高级功能部署的关键步骤，重点解析负载均衡算法与业务场景的适配逻辑、会话保持机制的性能平衡点以及SSL加速优化的硬件资源分配策略
智能计算研究中心·2025-02-25 03:55

A100核心加速：高效计算方案解析

建议技术团队在部署前，优先完成工作负载特征分析与集群拓扑规划。第三代TensorCore架构的突破性设计，不仅
智能计算研究中心·2025-02-25 03:25

YashanDB实例架构

#单机部署#分布式部署#共享集群部署#主要模块介绍数据库客户端一般是指客户基于YashanDB驱动开发的应用程序或YashanDB提供的客户端工具。驱动：应用程
YashanDB·2025-02-25 02:16

YashanDB体系架构

部署架构YashanDB支持三种部署形态，分别是单机（主备）部署（简称：单机部署）、分布式集群部署（简称：分布式部署）和共享集群部署。
YashanDB·2025-02-25 02:13

Hadoop之jdk的安装

并且在集群中每台主机操作一次，发现没有，不必卸载因为我的查看没有jdk，所以不需要卸载原有的，只需直接安装即可。2.安装此项的所有操作步
快来削我吖·2025-02-25 01:11

华为云GaussDB部署指南：主备架构的常见问题与解决方案

主备架构的常见问题与解决方案背景介绍部署步骤1.修改主机名2.软件安装检查3.禁用交换内存4.创建数据目录并挂载5.配置NTP时钟同步6.添加资源限制参数7.修改网卡的MTU8.上传安装工具包9.编辑集群配置文件
Byyyi耀·2025-02-24 21:13

Unity 性能调优技术集锦

性能调优，一直是游戏上线之前的很重要的一个环节,游戏帧率过低，手机发烫,低端机上跑不起来等,这些都需要来做优化，今天我们来给大家分享Unity做性能调优的常用技术手段。
Clank的游戏栈·2025-02-24 21:10

RabbitMQ集群搭建：使用HAProxy和Keepalived实现RabbitMQ的高可用负载均衡

在本文中，我们将探讨如何使用HAProxy和Keepalived来搭建RabbitMQ的高可用负载均衡集群。我们还将介绍如何将SpringBoot与RabbitMQ集成，以便在应用程序中使用消息队列。
EvktJava·2025-02-24 20:35

YashanDB自动选主

#主备自动选主在分布式集群节点组和单机一主多备（大于一个备库）部署形态下，可以开启主备自动选主功能来实现主库选举以及故障自动切换。主备自动选主采用Raft算法，并支持设置Quorum。
·2025-02-24 18:34

《Java高并发与多线程：从原理“破壁”到实战“狂飙”的硬核攻略》

看一眼不吃亏，万一对你有用呢，本文万字解析进程与线程本质，讲解了多线程和高并发的原理，详解synchronized锁升级机制，剖析JUC工具库与线程池异步，结合实时监控，电力调控等高并发场景，提供线程池调优
以恒1·2025-02-24 16:37
上一页 6 7 8 9 10 11 12 13 下一页
按字母分类： ABCDEFGHIJKLMNOPQRSTUVWXYZ其他