hpc集群

k8s 调度流程和资源管理

如下图所示，画了一个很简单的Kubernetes集群架构，它包括了一个kube-ApiServer，一组webhooks的Controller，以及一个默认的调度器kube-Scheduler，还有两台物理机节点
Cloud孙文波·2024-09-10 08:41

hive搭建 -----内嵌模式和本地模式

文章目录一、内嵌模式（使用较少）1、上传、解压、重命名2、配置环境变量3、配置conf下的hive-env.sh4、修改conf下的hive-site.xml5、启动hadoop集群6、给hdfs创建文件夹
lzhlizihang·2024-09-10 07:06

Kubernetes 架构及部署、调度、状态管理流程简介

它旨在提供“跨主机集群的自动部署、扩展以及运行应用程序容器的平台”。它支持一系列容器工具，包括Docker等。它是当前绝对主流的容器管
啊滑滑蛋·2024-09-10 06:32

redis 主从配置

今天主要内容便是redis主从实现简单的集群，实际上redis的安装配置砸门ttlsa之前就有个文章，废话少说，进入正题吧Redis简介redis是
zfl092005·2024-09-10 06:01

深度图解Redis Cluster原理

不是好的程序员，欢迎微信关注「SH的全栈笔记」前言上文我们聊了基于Sentinel的Redis高可用架构，了解了Redis基于读写分离的主从架构，同时也知道当Redis的master发生故障之后，Sentinel集群是如何执行
SH的全栈笔记·2024-09-10 06:30

Docker搭建MongoDB Replica Set高可用集群+数据丢失&被黑解决+自动备份与恢复脚本+持久化慢查询记录

文章目录引节点规划配置文件创建持久化目录创建并推送证书启动临时容器修改配置文件单节点参考mongod.confdocker-compose.ymlReplicaSet参考mongod.confdocker-compose.yml部署与配置部署集群配置集群验证集群增删节点增加节点删除节点查看节点常用命令重置集群备份数据关闭服务删除持久化数据启动集群配置集群验证集群创建用户验证集群用户管理权限说明创建
秋风お亦冷·2024-09-10 06:55

springboot指定依赖jar版本

，而我们的集群是6.*的版本，试了很多次最后解决问题如下：在父pom的dependencyManagement中添加指定版本就可以了因为！！！
m0_67402235·2024-09-10 05:24

IAAS: IT公司去IOE-Alibaba系统构架解读

从Hadoop到自主研发，技术解读阿里去IOE后的系统架构原地址：......................云计算阿里飞天摘要：从IOE时代，到Hadoop与飞天并行，再到飞天单集群5000节点的实现
wishchin·2024-09-10 04:18

项目架构设计

个技术点服务架构1.LVS：四层负载均衡，将用户分发到不同Nginx服务器上2.Nginx:是一个高性能的HTTP和反向代理的web服务器，用于部署前端应用3.Keepalived:高可用，此处指的是集群
先熬半个月·2024-09-10 04:44

在azure上搭建k8s+prometheus+grafana+ingress-controller

申请一个AKS集群在本地实现对AKS的控制安装kubectl连接到aks(可以直接点击aks概述中的连接获取命令)使用azurecli获取aks的配置信息（比如获取commercial-yanhuibin-test
Y.G Bingo·2024-09-10 03:10

大型网站核心架构要素

文章目录1性能1.1性能优化1.2性能度量2可用性2.1可用性指标2.2可用性目标2.3可用性方案2.4可用性度量3伸缩性3.1伸缩性度量3.2伸缩性方案3.2.1应用服务器集群3.2.2缓存服务器集群
贾欣晓·2024-09-10 02:33

K8s中如何使用etcd进行集群信息的备份与恢复

这里写目录标题ETCD是什么？1.**`etcd`（服务）**2.**`etcdctl`（客户端工具）**如何安装etcdctl（客户端工具）查看目前K8s自带etcd中的版本信息安装对应版本的etcdutl工具下载`etcdutl`3.5.7版本配置环境变量创建备份文件验证一下备份的快照文件备份文件恢复的效果演示查看一下当前etcd的容器服务信息查看当前etcd服务缓存的文件信息位置删除配置文件
舒一笑不秃头·2024-09-10 01:41

(error) ERR auth permission deny

分片集群需要新建用户。在Redis分片集群中新建用户的原因通常与安全性和权限管理有关。每个用户可以拥有不同的权限，这样可以限制用户对特定数据的访问，或者允许用户只执行特定的操作。
喝醉酒的小白·2024-09-10 00:05

【Hadoop|HDFS篇】NameNode和SecondaryNameNode

但如果只存在内存中，一旦断电，元数据丢失，整个集群就无法工作了。因此产生在磁盘中备份元数据的Fslmage。这样又会带来新的问题，当在内存中的元数据更新时，如果同时更新FsIm
Vez'nan的幸福生活·2024-09-09 23:00

Yarn介绍 - 大数据框架

它的出现其实是为了解决第一代MapReduce编程框架的不足，提高集群环境下的资源利用率，这些资源包括内存，磁盘，网络，IO等。Hadoop2.X版本中重新设计的这个YARN集群
why do not·2024-09-09 23:58

Hadoop YARN【一】

YARN概念YARN是一种新的Hadoop资源管理器，它是一个通用的资源管理和调度，它的引入为集群在利用率、资源统一管理和数据共享等方面带来了巨大好处。内部组件Client:负责提交应用程序。
冷雨夜下的星空·2024-09-09 22:26

kubernetes online depoly | kubeadm 快速部署kubernetes v1.25 集群 |单matser

目录一、环境准备二、安装Containerd三、安装Kubernetes四、部署网络插件一、环境准备软件环境：操作系统AlmaLinux9容器引擎ContainerdKubernetes1.25服务器规划：k8s-master192.168.200.11k8s-node1192.168.200.12k8s-node2192.168.200.13查看系统内核#查看当前系统的版本：[root@k8s-
深耕云原生·2024-09-09 21:21

Kubernetes Kubevirt ｜使用Kubevirt创建虚拟机

使用Kubevirt可以：创建虚拟机启动虚拟机停止虚拟机删除虚拟机在Kubernetes集群上调度虚拟机虚拟机运行在KubernetesPod中，利用标准的K8
深耕云原生·2024-09-09 21:21

Kafka2.8.0集群安装教程

Kafka2.8.0集群安装教程准备工作node01~node04（四个节点机器，三台也可以），kafka安装node01~~node03启动zookeeper，这里依次启动node131，node132
请叫我你好·2024-09-09 21:48

elasticsearch

cluster：代表一个集群，集群中有多个节点，其中有一个为主节点，这个主节点是可以通过选举产生的，主从节点是对于集群内部来说的。
图灵农场·2024-09-09 19:36

Cortex-X925的特性简介

Cortex-X925核被实现于DSU-120DynamIQ集群内部。它连接到DynamIQDSU120，后者作为完整的互连系统，具有L3缓存和嗅探控制功能。
代码改变世界ctw·2024-09-09 19:31

大数据新视界--大数据大厂之MySQL数据库课程设计：MySQL集群架构负载均衡故障排除与解决方案

亲爱的朋友们，热烈欢迎你们来到青云交的博客！能与你们在此邂逅，我满心欢喜，深感无比荣幸。在这个瞬息万变的时代，我们每个人都在苦苦追寻一处能让心灵安然栖息的港湾。而我的博客，正是这样一个温暖美好的所在。在这里，你们不仅能够收获既富有趣味又极为实用的内容知识，还可以毫无拘束地畅所欲言，尽情分享自己独特的见解。我真诚地期待着你们的到来，愿我们能在这片小小的天地里共同成长，共同进步。本博客的精华专栏：Ja
青云交·2024-09-09 18:26

【Arm Cortex-X925】 -【第二章】-Cortex-X925 core简介

Cortex-X925核心集成在DSU-120DynamIQ™集群内。它连接到DynamIQ™SharedUnit-120，该单元作为一个完整的互连系统，包含L3缓存和窥探控制。这种连接配置也适用于
代码改变世界ctw·2024-09-09 17:48

大数据新视界--大数据大厂之MySQL数据库课程设计：揭秘 MySQL 集群架构负载均衡核心算法：从理论到 Java 代码实战，让你的数据库性能飙升！

亲爱的朋友们，热烈欢迎你们来到青云交的博客！能与你们在此邂逅，我满心欢喜，深感无比荣幸。在这个瞬息万变的时代，我们每个人都在苦苦追寻一处能让心灵安然栖息的港湾。而我的博客，正是这样一个温暖美好的所在。在这里，你们不仅能够收获既富有趣味又极为实用的内容知识，还可以毫无拘束地畅所欲言，尽情分享自己独特的见解。我真诚地期待着你们的到来，愿我们能在这片小小的天地里共同成长，共同进步。本博客的精华专栏：Ja
青云交·2024-09-09 17:17

【云原生】Kubernetes----ETCD数据的备份与恢复

一）确定备份策略（二）使用etcdctl工具进行备份1.安装etcdctl命令2.设置ETCDCTL_API环境变量（三）执行备份二、数据还原（一）创建新资源（二）数据恢复1.停止etcd服务和K8s集群的相关组件
智能运维探索者·2024-09-09 14:00

Redis cluster 集群TLS and Jedis使用SSL调用redis服务

安装#安装依赖软件sudoaptupdatesudoaptinstallmakegcclibssl-devpkg-config#下载redis解压wgethttps://download.redis.io/releases/redis-6.2.6.tar.gztar-xvfredis-6.2.6.tar.gz#编译cdredis-6.2.6makeBUILD_TLS=yes#如果执行编译出错，提示
潘多编程·2024-09-09 14:29

Spring Cloud全解析：注册中心之Eureka架构介绍

类似多机房部署，保证服务稳定性A:Availability，可用性C:Consistency，一致性对于任意一个系统只能同时满足两个，一个分布式系统不可能同时很好的满足一致性、可用性和分区容错性CA单点集群
拾光师·2024-09-09 14:24

深度学习框架 人工智能操作系统 训练&前向推理 PyTorch Tensorflow MindSpore caffe 张量加速引擎TBE 深度学习编译器 多面体 polyhedral AI集群框架

深度学习框架人工智能操作系统训练&前向推理深度学习框架发展到今天，目前在架构上大体已经基本上成熟并且逐渐趋同。无论是国外的Tensorflow、PyTorch，亦或是国内最近开源的MegEngine、MindSpore，目前基本上都是支持EagerMode和GraphMode两种模式。AI嵌入式框架OneFlow&清华计图Jittor&华为深度学习框架MindSpore&旷视深度学习框架MegEn
EwenWanW·2024-09-09 13:54

Eureka vs. Nacos:注册中心角色之间的不同特性

当程序并发量大，提供者以集群部署时，应该如何选择？
8tydegrees·2024-09-09 12:46

K8S（Kubernetes）开源的容器编排平台安装步骤详解

安装KubernetesMaster：在集群中选择一台主机作为Master节点，安装K8S的控制平面组件，如APIServer、
爱摄影的程序猿·2024-09-09 12:11

Hbase的简单使用示例

使用HBase的Java示例前置条件HBase集群：确保HBase集群已经安装并启动。如果没有，你可以通过本地伪分布模式或Docker来运行HBase。Hadoop配置：HBas
傲雪凌霜，松柏长青·2024-09-09 11:40

MySQL8.0 集群搭建

文章目录环境准备安装MySQL8.0配置主服务配置从服务器主从复制：即主服务器上的所有操作（创建库，修改表等）会被同步到从服务器上，但是在从服务器上的操作不会进入到主服务器中环境准备两台服务器，一主一从安装docker#国内源curl-fsSLhttps://get.docker.com|bash-sdocker--mirrorAliyun启动dockersystemctlstartdocker配
我有一只肥螳螂·2024-09-09 08:46

k8s部署

kubelet组件简介kubernetes是一个分布式的集群管理系统，在每个节点（node）上都要运行一个worker对容器进行生命周期的管理，这个worker程序就是kubeletkubelet的主要功能就是定时从某个地方获取节点上
xml222z·2024-09-09 06:36

云计算技术与应用 - 了解认识云计算

云计算的背景互联网自1960年开始兴起，主要用于军方、大型企业等之间的纯文字电子邮件或新闻集群组服务。
ZuckD·2024-09-09 06:35

Infiniband网络架构的技术与性能分析

因此，如何最大限度地提高集群的计算资源成为了当前的核心问题。集群算力优化的关键在于GPU利用率和线性加速比。其中，GPU利用率受限于
科技互联人生·2024-09-09 04:51

双vip高可用的MySQL集群

下载软件包2、二进制安装PrometheusServer3、通过服务管理Prometheus4、安装node_exporter5、安装mysqld_exporter6、添加被监控的服务器部署MySQL集群
Hi，你好啊·2024-09-09 02:10

Docker的110个命令，高级开发运维工程师必备

6.容器运行选项命令7.DockerCompose命令8.DockerSwarm命令9.安全管理命令10.系统调试命令以下是分类列出的110个常用Docker命令，涵盖镜像、容器、网络、卷、Swarm集群等多个方面的管理操作
golove666·2024-09-09 02:38

Spring Cloud Alibaba面试题

SpringCloudAlibaba1SpringCloudAlibaba基础组件1.1解释SpringCloudAlibaba及其主要目标1.2分析Nacos服务注册与发现的原理服务注册服务发现心跳检测数据一致性Nacos集群和持久化基于
golove666·2024-09-09 02:37

新一代车载(E/E)架构下的中央计算载体---HPC软件架构简介

老规矩，分享一段喜欢的文字，避免自己成为高知识低文化的工程师：屏蔽力是信息过载时代一个人的特殊竞争力，任何消耗你的人和事，多看一眼都是你的不对。非必要不费力证明自己，无利益不试图说服别人，是精神上的节能减排。无人问津也好,技不如人也罢,你都要试着安静下来,去做自己该做的事.而不是让内心的烦躁、焦虑、毁掉你本就不多的热情和定力。时间不知不觉中，快要来到夏末秋初。一年又过去了一大半，成年人的时间是真的
车载诊断技术·2024-09-08 22:06

Redis分布式

Redis的分布式架构包括主从复制、哨兵模式（Sentinel）、RedisCluster集群模式。不同的分布式机制各自适用于不同的场景，提供了从简单的高可用性到复杂的水平扩展能力。
Flying_Fish_Xuan·2024-09-08 21:34

ClickHouse 分布式部署、分布式表创建及数据迁移指南

文章目录部署ClickHouse集群1.1环境准备1.2安装ClickHouse1.3配置集群创建分布式表2.1创建本地表2.2创建分布式表2.3删除分布式表测试分布式表3.1插入测试数据。
努力做一名技术·2024-09-08 21:03

Flink - CEP

Hadoop3.2集群新版本的搭建详细讲解过程，从下面第一张官方的图来看，最新版是3.2，所以大猪将使用3.2的版本来演示，过程中遇到的坑留给自己，把路留给你们，IT之路还有大猪。
kikiki1·2024-09-08 21:46

部署一套完整的架构系统有哪些步骤

架构图1、环境准备准备一台或多台服务器作为宿主机，确保服务器操作系统已安装（例如Linux）;安装Docker环境，宿主机需要支持容器化技术；安装Kubernetes集群环境，可以选择Minikube作为本地测试环境或其他方案例如
missterzy·2024-09-08 20:26

LVS+keepalived+nginx搭建高可用负载均衡集群(详细配置步骤讲解)

一.准备工作首先我们要准备四台虚拟机如下表所示:主机IPMASTER192.168.204.130192.168.204.208(VIP)real_server1192.168.204.135real_server2192.168.204.137BACKUP192.168.204.1381.在主机和备机上都要安装LVS和keepalived:安装LVS:yuminstallipvsadm-y安装k
纵享山河万里·2024-09-08 20:54

史上最全LVS+keepalived+nginx基于DR模式高可用安装部署

史上最全LVS+keepalived+nginx基于DR模式高可用安装部署lvs+keepAlived→效率最高的负载均衡在大型网站中一般服务端会做集群，同时利用负载均衡器做负载均衡。
徐兴强的博客·2024-09-08 19:21

分布式文件系统FastDFS动态扩容

当用户量越来越大，则集群中某个group总会到达其极限，这时就得扩展集群的容量了。
欢醉·2024-09-08 18:38

如何拿下TCP（数据库交付运维高级工程师TDSQL(MySQL版)）认证

数据库TDSQL（MySQL版）的产品架构与分布式特性掌握TDSQL（MySQL版）各组件的功能，以及启停方法掌握TDSQL（MySQL版）数据库实例的基本操作与使用方法掌握TDSQL（MySQL版）集群的基本操作与使用方法掌握
小伟C_C·2024-09-08 18:14

rke管理k8s节点的新增与删除

1删除worker节点#查看节点名kubectlgetnodes#标记节点不可调度kubectlcordonworker8#DaemonSet确保集群中的所有（或某些）节点上都运行了一个Pod的副本#排空节点上的
warrah·2024-09-08 16:32

Kubernetes 从集群中移除一个节点（Node）

确定工作节点名称1.2驱逐工作节点上的Pod1.3删除工作节点1.4重置该工作节点2.移除控制平面节点(ControlPlaneNode)2.1确定控制平面节点名称2.2驱逐控制平面节点上的Pod2.3更新etcd集群
Roc.Chang·2024-09-08 16:28

shiro 采用redis共享session，出现反序列化错误的排查过程

jfinal#shiroredis,采用outh2协议的方式，对多个子系统之间进行单点登录，以实现系统之间的session，由于速度方面的影响，现在要改造成多个系统之间共享session，并采用redis集群的方式
nightseventhunit·2024-09-08 16:26
上一页 1 2 3 4 5 6 7 8 下一页
按字母分类： ABCDEFGHIJKLMNOPQRSTUVWXYZ其他