hpc集群第7页

云端技术驾驭DAY07——Dockerfile详解、容器镜像制作、私有仓库

DAY01——云计算底层技术奥秘、云服务器磁盘技术、虚拟化管理、公有云概述云端技术驾驭DAY02——华为云管理、云主机管理、跳板机配置、制作私有镜像模板云端技术驾驭DAY03——云主机网站部署、web集群部署

川川野马·2024-08-30 04:45

Kafka常用知识点梳理

部署kafka支持两种启动方式KafkawithKRaftKafkawithZooKeeper（4.0后将会被废弃）核心APIProducerAPI允许应用程序将数据流发送到Kafka集群中的主题ConsumerAPI

zhangj1125·2024-08-30 02:06

K8s之自动扩缩容

Kubernetes(K8s)的动态扩缩容（自动伸缩）功能是集群管理中非常关键的一部分，能够根据工作负载的变化自动调整应用程序的副本数，以确保资源的高效利用和服务的稳定性。

james二次元·2024-08-30 00:17

云计算day35

⼀、Docker-compose定义1.dockercompose是docker官⽅的开源项⽬，负责实现对docker容器集群的快速编排(容器，依赖，⽹络，挂载。。)

巭氼·2024-08-29 23:42

从零开始：Kubernetes 集群的搭建与配置指南，超详细，保姆级教程

从零开始搭建Kubernetes集群从零开始搭建Kubernetes(K8s)集群部署方式准备工作（所有节点）1.关闭防火墙2.关闭SELinux3.关闭Swap分区4.设置主机名5.配置网络设置6.安装

Lentr0py·2024-08-29 22:38

为什么k8s节点要保持配置一致

K8s集群包含了多个节点，其中每个节点运行着Kubernetes代理（kubelet）和容器运行时（如Docker）。

骑上单车去旅行·2024-08-29 22:34

虚拟机安装hadoop，hbase（单机伪集群模式）

虚拟机安装Hadoop，Hbase工作中遇到了大数据方面的一些技术栈，没有退路可言，只能去学习掌握它，就像当初做爬虫一样（虽然很简单），在数据爆发的现在，传统的数据库mysql，oracle显然在处理大数据量级的数据时显得力不从心，所以有些特定的业务需要引进能够处理大数据量的数据库，hadoop提供了分布式文件系统（HDFS）来存储数据，又提供了分布式计算框架（mapreduce）来对这些数据进行

流~星~雨·2024-08-29 21:31

HIVE 数据模型

type=hive集群状态管理：http://tdxy-bigdata-03:7180/cmf/home基于HDFS没有专门的数据

HFDYCYY·2024-08-29 19:47

springboot集成kafka、消息发送、消费使用

jar引入代码示例:org.springframework.kafkaspring-kafka配置文件#kafka配置#指定kafka代理地址(集群配多个、中间、逗号隔开)spring.kafka.boot

‘’小磊·2024-08-29 18:42

QPS提升10倍怎么设计-JAVA后端经常用到的技术

例如，使用分布式服务器集群，将请求均匀地分配到各个节点上，避免单个服务器负载过高。升级服务器的硬件配置，如提高CPU性能、增加内存容量、使用更快的存储设备等。例如，采用多核处理

九张算数·2024-08-29 17:00

优秀的开源项目

目录热key多线程并行秒级百G级日志工具ES操作工具消息推送平台HTTP客户端业务层的分布式限流组件企业级微服务解决方案热keyhotkey:京东App后台中间件，毫秒级探测热点数据，毫秒级推送至服务器集群内存

点滴~·2024-08-29 16:28

hbase ExportSnapshot迁移hbase表

在源集群上准备快照：snapshot'credit_dict','credit_dict_snapshot20221117'list_snapshots复制快照到目标集群：hbaseorg.apache.hadoop.hbase.snapshot.ExportSnapshot

Rjunxiang·2024-08-29 16:56

HBase数据迁移实战

1.前期准备1.1确认集群使用的版本源HBase集群（以下称旧集群）和目的HBase集群（以下称新集群）的版本可能并不是一致的，特别是其底层所使用的HDFS版本信息。

网易数帆大数据·2024-08-29 16:25

分布式中间件

1.Nacos服务注册和服务发现原理图：1.服务提供方将集群信息注册到Nacos，并定期心跳包提供健康信息，宕机即剔除2.服务消费方定期拉取订阅信息，获取服务实例列表3.服务集群的负载均衡是在消费者一方进行选择负载均衡

C15751X·2024-08-29 16:54

全量、增量数据在HBase迁移的多种技巧实践

HBase全量与增量数据迁移的方法1.背景在HBase使用过程中，使用的HBase集群经常会因为某些原因需要数据迁移。

华为云技术精粹·2024-08-29 15:52

Hbase离线迁移

假设是hbase集群，那么数据存储在hdfs上。1.关闭2个hbase2.使用distcp将hdfs上的hbase数据迁移到另一个【相同路径】的hdfs上。

我要用代码向我喜欢的女孩表白·2024-08-29 15:22

【零基础02】实战企业级K8S本地部署ThingsBoard专业版集群之二：戴尔R630本地服务器安装Linux Centos7.9系统

目录1、制作服务器启动U盘1.1、制作启动U盘准备工作1.1.1、确保制作启动U盘的Windows电脑处于联网状态1.1.2、下载Rufus 烧录软件1.1.3、下载Centos镜像文件1.1.4、准备1个8G以上的U盘1.2、使用Windows电脑制作启动U盘1.2.1、鼠标双击“rufus-3.19.exe”打开烧录软件1.2.2、弹出“当前无法访问>SmartScreen”窗口，点击“运行”

龙亘川·2024-08-29 13:37

2019-10-23

macat配置mysql集群异常1：TheslaveI/OthreadstopsbecausemasterandslavehaveequalMySQLserverUUIDs问题分析问题提示主从使用了相同的

袁小胜·2024-08-29 10:24

09-redis-conf配置文件基础介绍

redis-conf配置文件基础介绍这篇文章介绍了Redis-6.2.11的配置文件中的大多数配置，但是缺少集群的相关配置和其他一些配置，望大家知晓。

风在枝头·2024-08-29 08:34

Apache Druid安装部署手册

Coordinator监控Historical处理，负责分配segments到指定的服务，确保存在HIstorical中是自平衡的2.Overlord监控MiddleManager处理和控制数据加载进druid集群

长了手的兔子精·2024-08-29 03:30

Metasploit漏洞利用系列（八）：MSF渗透测试 - PHPCGI漏洞利用实战

在本系列的第八篇文章中，我们将深入探索如何利用MetasploitFramework(MSF)来针对PHPCGI(PHPCommonGatewayInterface)的漏洞进行渗透测试。

Alfadi联盟萧瑶·2024-08-29 02:55

【kubernetes】kubernetes 核心组件、角色介绍

worker节点是集群中的计算资源提供者，它运行应用程序的工作负载（容器）并由主控制节点进行管理。ControlPlane硅谷总部ControlPlane相当于硅谷总部࿰

九师兄·2024-08-29 02:21

Openstack 与 Ceph集群搭建(下)： Openstack部署

文章目录文章参考部署节点准备1.修改Host文件与hostname名称2.安装NTP软件3.网卡配置信息4.开启Docker共享挂载5.安装python虚拟环境6.安装kolla-ansible7.加载AnsiblegalaxyrequirementsOpenstack安装前预配置1.配置密码2.配置multinode文件3.修改全局配置文件Openstack正式安装1.启动bootstrap-s

范枝洲·2024-08-29 01:43

39-nacos eureka zookeeper区别

支持集群部署和高可用。Eureka是Netflix开源的一款提供服务注册和发现的产品。设计思路是AP（可用性和分区容忍性）。不支

weixin_41775999·2024-08-28 22:56

Java高级技术day75：Zookeeper与Dubbo

的介绍1.Zookeeper介绍：顾名思义zookeeper就是动物园管理员，他是用来管hadoop（大象）、Hive(蜜蜂)、pig(小猪)的管理员，ApacheHbase和ApacheSolr的分布式集群都用到了

开源oo柒·2024-08-28 20:54

Ovirt中的GWT框架

参考文档：如何在ovirt中使用GWT框架为页面新增组件ovirt前端代码分析定位页面ovirt中的页面规则，以集群为例：集群列表页面MainClusterView.java，类似页面MainNetworkView.javaMainHostView.javatab

ctrlcvKing·2024-08-28 19:03

Clickhouse 集群部署安装

ClickHouse集群部署安装1、环境准备（1）、阿里云服务器两台集群节点信息192.168.5.13ch01192.168.5.14ch02（2）、修改/etc/cloud/cloud.cfg(所有节点

想当厨子的小章同学·2024-08-28 14:59

clickhouse集群部署

单节点设置为了延迟演示分布式环境的复杂性，我们将首先在单个服务器或虚拟机上部署ClickHouse。ClickHouse通常是从deb或rpm包安装，但对于不支持它们的操作系统也有其他方法。例如，您选择deb安装包，执行:sudoapt-getinstall-yapt-transport-httpsca-certificatesdirmngrsudoapt-keyadv--keyserverhkp

林鸟鸟·2024-08-28 14:29

汇总：20个Linux服务器性能调优技巧

Linux高可用服务器集群解决方案让IT系统管理员可以从容应对许多常见的硬件和软件故障，允许多台计算机一起工

开源Linux·2024-08-28 14:58

【离线安装clickhouse集群】

离线安装clickhouse集群clickhouse介绍Clickhouse是俄罗斯yandex公司于2016年开源的一个列式数据库管理系统，在OLAP领域像一匹黑马一样，以其超高的性能受到业界的青睐。

eddianliu·2024-08-28 14:56

clickhouse集群搭建

文章目录安装clickhouse修改集群配置文件启动clickhouse集群测试集群的可用性安装clickhouse本次用了4台服务器搭建clickhouse集群，使用rpm安装方式在4台服务器上安装clickhouse

颍天·2024-08-28 14:56

k8s上的clickhouse集群部署并创建分布式表（附详细参数说明和参考链接）

k8s上的clickhouse集群部署并创建分布式表制作docker镜像创建configmap创建clickhouseservicepod创建clickhouseclientpod创建Service创建分布式表部署总体参考

KirutoCode·2024-08-28 14:56

读写分离集群搭建

目录一、配置读写分离集群1、环境说明2、数据准备3、配置主库GRP1_RWW_01配置dm.ini配置dmmal.ini配置dmarch.ini配置dmwatcher.ini启动主库设置OGUID修改数据库模式

奥德彪的蕉·2024-08-28 11:41

kubeadm部署k8s1.25.3一主二从集群(Containerd)

第一章：K8S集群部署kubernetes集群规划主机IP主机名主机配置角色10.0.0.3master12C/4G管理节点10.0.0.4node12C/4G工作节点10.0.0.5node22C/4G

陌殇殇殇·2024-08-28 11:09

Spark on YARN

Spark提供了一个统一的编程模型，可以在单个集群上运行各种

静听山水·2024-08-28 09:26

Kubernetes (K8s) 监控方案：Prometheus 实战指南

然而，随着K8s集群规模和复杂性的增加，有效的监控变得至关重要。本文将详细介绍如何使用Prometheus构建一个全面而强大的K8s监控系统，帮助您实时掌握集群状态，快速定位问题，并优化资源利用。

ivwdcwso·2024-08-28 07:14

数据存储 - 聊聊 MongoDB 使用场景

日志系统的场景日志系统数据量特别大，如果用MongoDB数据库存储这些数据，利用分片集群支持海量数据，同时使用聚集分析和MapReduce的能力，是个很好的选择。

撸帝·2024-08-28 06:49

MongoDB 单机和集群环境部署教程

在Ubuntu上安装MongoDB2.2在CentOS上安装MongoDB2.3启动MongoDB服务2.4验证MongoDB安装2.5MongoDB基本安全设置3.单机部署注意事项二、MongoDB集群环境部署

闲人编程·2024-08-28 06:08

Kubernetes中的Kube-proxy：服务发现与负载均衡的基石

摘要Kube-proxy是Kubernetes集群中负责服务发现和负载均衡的关键组件。它通过维护集群内部的网络规则，确保网络流量能够正确地从服务访问点分发到后端的Pod上。

liuxin33445566·2024-08-28 06:07

k8s笔记 | helm包管理

Helmkubenetes包管理器，是查找，分享和使用软件构件kubernetes的最佳方式；可以做什么从头开始创建新的chart将chart打包成归档(tgz)文件与存储chart的仓库进行交互与现有的kubernates集群中安装和卸载

你的代码我的心·2024-08-28 05:58

打造扛得住的MySQL数据库架构视频教程-数据库结构优化高可用架构设计

打造扛得住的MySQL数据库架构视频教程-数据库结构优化高可用架构设计30套数据库系列Mysql/SQLServer/Redis/Mongodb/Nosql精讲训练营项目实战，数据库设计，架构设计，性能管理，集群搭建

cd137a460a79·2024-08-28 04:10

Ubuntu下部署Hadoop集群+Hive（三）

Hive部署准备环境apache-hive-4.0.0-bin.tar.gz、mysql-connector-j-8.1.0.jar如果是离线安装的话，使用mysql-8.0.34-1.el7.x86_64.rpm-bundle.tar，在线安装的话则不用；hive下载地址：Indexof/hive(apache.org)mysqlconnector下载地址：MySQL::DownloadConn

岩屿·2024-08-28 01:07

80、k8s概念及组件介绍

k8s理解成负责自动化运维管理多个容器化的应用的集群。谷歌基于go语言开发的。

ly1435678619·2024-08-28 01:35

学习笔记六：ceph介绍以及初始化配置

k8s对接cephceph是一种开源的分布式的存储系统，包含以下几种存储类型：块存储（rbd）文件系统cephfs对象存储分布式存储的优点：Ceph核心组件介绍安装Ceph集群初始化配置Ceph安装源安装基础软件包安装

风车带走过往·2024-08-27 23:49

kubectl命令详解

1.kubectl命令帮助kubernetes集群中的管理操作几乎都可以使用kubectl命令完成#kubectl-h2.kubectl命令说明类型命令描述基础命令create通过文件名或标准输入创建资源

闫利朋·2024-08-27 22:47

ubuntu22.04使用kubeadm部署k8s集群

使用kubeadm部署一个k8s集群，1个master+2个worker节点1.环境信息操作系统：ubuntu22.04内存：16GBCPU：4网络：能够互访，能够访问互联网hostnameip备注node0110.121.218.50masternode0210.121.218.49workernode0310.121.218.48worker2

闫利朋·2024-08-27 22:17

SpringCloud之一注册中心（Eureka）

1.注册中心：服务提供者可以将服务发布到注册中心，服务消费者从注册中心获取可以进行访问的服务列表;注册中心支持集群部署，集群中的机器，数据会进行同步复制更新(replicate

sinat_31986807·2024-08-27 20:05

Centos系统配置Redis哨兵高可用架构

我们现在开始搭建Redis哨兵集群配置，一主二存+三个哨兵组成Redis哨兵集群。Redissentinel哨兵是特殊的redis服务，不提供读写服务，主要用来监控redis实例节点。

sunaq691·2024-08-27 20:01

Kafka命令详解：从零开始，掌握Kafka集群管理、主题操作与监控的全方位技能，理解每一条命令背后的逻辑与最佳实践

长风清留扬·2024-08-27 16:37

Docker方式部署K8s集群

1.1集群创建说明Kubernetes支持多种容器运行时，包括Containerd、Docker和CRI-O。

麻辣头马头·2024-08-27 16:37

推荐频道

hpc集群