gpfs集群

在Hadoop集群中实现数据安全：技术与策略并行

在Hadoop集群中实现数据安全：技术与策略并行随着大数据技术的广泛应用，Hadoop已经成为处理和存储海量数据的首选平台。

Echo_Wish·2025-02-17 23:50

Redis+Sentinel安装与配置

在这里我们搭建的是一个1主3从的redis+3个哨兵集群的环境，由于是在一台物理机上，所有我们用端口区分。

weixin_30532973·2025-02-17 23:49

redis sentinel模式与 redis 分片集群配置

模式高可用性数据分片部署复杂度适用场景Sentinel模式高无中等中小规模，需要高可用性集群模式高支持复杂大规模，需要高可用性和数据分片RedisSentinel模式（在主从复制的基础上引入Sentinel

癸酉金鸡·2025-02-17 22:36

linux 搭建kafka集群

目录、一、环境准备二、文件配置三、集群启动一、环境准备1、我这里是准备三台服务器节点ipnode1192.168.72.132node2192.168.72.133node3192.168.72.1342

节点。csn·2025-02-17 21:04

从零构建高可用MySQL集群：Percona XtraDB Cluster 实战部署

实战指南：基于PerconaXtraDBCluster构建高可用MySQL集群架构引言：为什么选择PXC？

Deutsch.·2025-02-17 20:49

PXC搭建MySQL8集群

一、环境准备1、CentOS7.9.x2、PerconaXtraDBCluster8.0.x3、NavicatPremium15.0.274、准备3台CentOS7.9.x服务器IP_1：192.168.101.111IP_2：192.168.101.112IP_3：192.168.101.113二、使用yum安装pxc8.0.x在3台服务器上参考以下步骤依次安装2.1安装percona-rele

慕雨城·2025-02-17 20:47

YashanDB共享集群

本文内容来自YashanDB官网，原文内容请见https://doc.yashandb.com/yashandb/23.3/zh/%E6%A6%82%E5%BF%B5%...共享集群基于YashanDB

·2025-02-17 19:53

mysql8.0使用PXC实现高可用（Rocky8.0环境）

目录搭建PXC集群配置hosts解析用MySQL软件模块的命令（三台都需要）下载PXC安装包启用PXC80版本安装PXC集群初始化数据库第一个节点需要以引导模式启动：查看临时密码修改密码免密登录查询集群信息查看证书修改证书查询集群信息同步状态监控节点

致奋斗的我们·2025-02-17 19:13

python编写mapreduce job教程

它可以运行在本地模式或Hadoop集群上。以下是一个简单的MapReduce示例，它计算文本文件中每个单词的出现次数。安装mrjob首先，你需要安装mrjob库。

weixin_49526058·2025-02-17 19:12

RPC框架Dubbo深入分析

依赖于Zookeeper的稳定性Redis支持基于客户端双写的集群方式，性能高要求服务器时间同步，用于检查心跳过期脏数据Multicast去中心化，不需要安装注册中心依赖于网络拓普和路由，跨机房有风险SimpleDogfooding

radcb55226·2025-02-17 16:17

Sentinel

目录一、Sentinel简介核心特性二、环境准备1.控制台安装2.SpringBoot集成三、核心功能实战1.流量控制2.熔断降级3.热点参数限流四、高级配置1.规则持久化（Nacos集成）2.集群流控五

华农第一蒟蒻·2025-02-17 14:24

Knox原理与代码实例讲解

ApacheKnox是一个反向代理服务器,旨在为ApacheHadoop集群提供单一入口点,增强安全性和集中化管理。它位于Hadoop集群与客户端应用程序之间,充当网关和负载均衡器的角色。

AI天才研究院·2025-02-17 14:50

Linux Docker 部署 Elasticsearch (ES) 集群详解教程

1.安装Docker首先，确保你的Linux系统上已经安装了Docker。如果尚未安装，可以通过以下命令进行安装：sudoyuminstall-yyum-utilssudoyum-config-manager--add-repohttps://download.docker.com/linux/centos/docker-ce.reposudoyuminstalldocker-cedocker-c

努力的小T·2025-02-17 12:10

记GBase8a一次简单的典型sql优化

原文地址：https://www.gbase.cn/community/post/3549某客户反映一条业务测试sql查询缓慢（3节点集群），百万级数据量用时6-8s,不满足小于1秒的业务需求！

GBase技术大咖·2025-02-17 12:40

SpringBoot整合H2并使用Flyway管理数据库版本

H2是一个嵌入式数据库引擎，采用java语言编写，不受平台的限制，同时支持网络版和嵌入式版本，有比较好的兼容性，支持相当标准的sql标准，支持集群2、提供JDBC、ODBC访问接口，提供了非常友好的基于

程序猿Ryan·2025-02-17 11:29

深入解析 Vert.x 的关键特性、架构及其在异步编程中的应用

下面将对Vert.x进行更深入的解读，从其底层架构、事件驱动模型、线程模型、集群模式、以及与现代微服务体系的深度集成等方面来进行拓展，以便全面理解Vert.x作为一个异步非阻塞框架的优势和复杂性。

不是二师兄的八戒·2025-02-17 10:21

从入门到跑路（六）k8s配置ingress-nginx

Ingress-NGINX是一个基于NGINX的KubernetesIngress控制器，旨在将外部HTTP和HTTPS流量路由到Kubernetes集群中的服务。

m0_74825678·2025-02-17 10:50

LINUX系统优化

LINUX系统优化企业生产场景中Linux系统的分区方案及内核企业生产场景中Linux系统的分区方案常规的分区方案如下：方案1：针对网站集群架构中的某个节点服务器分区，该服务器上的数据有多份（其他节点也有

敖光 SRE·2025-02-17 09:41

Etcd教程 — 第二章 Etcd集群静态发现_etcd 双节点集群

监听用于和节点之间通信的url，可监听多个，集群内部将通过这些url进行数据交互(如选举，数据同步等)–initial-advertise-peer-urls建议用于和节点之间通信的url，节点间将以该值进行通信

2401_87361150·2025-02-17 08:38

MySQL的集群配置和读写分离配置

MySQL重点概念介绍分布式集群方案主从节点复制分库分表mycat读写分离参数配置MySQL主节点MySQL从节点实例讲演分布式部署性能演示独立mysql对比主从复制+读写分离参考资料：浅谈mysql集群浅谈

lqg_zone·2025-02-17 08:29

k8s 中的 service 如何找到绑定的 Pod 以及如何实现 Pod 负载均衡

service是一组具有相同labelpod集合的抽象，集群内外的各个服务可以通过service进行互相通信。

「已注销」·2025-02-17 06:18

【K8S系列】Kubernetes 集群中的网络常见面试题

在Kubernetes面试中，网络是一个重要的主题。理解Kubernetes网络模型、服务发现、网络策略等概念对候选人来说至关重要。以下是一些常见的Kubernetes网络面试题及其答案，帮助你准备面试。1.Kubernetes的网络模型是什么样的？问题：Kubernetes的网络模型是怎样的？答案：Kubernetes网络模型遵循“每个Pod都有一个唯一的IP地址”的原则。每个Pod都可以直接通

颜淡慕潇·2025-02-17 06:17

ubuntu安装k8s

centos：centos：K8Sv1.28.2集群搭建-docker版-一毛丶丶-博客园centos：Kubernetes详细安装教程_kubernetes安装-CSDN博客准备工作：1、主机名解析：

qq_41369135·2025-02-17 06:15

Apache ZooKeeper 分布式协调服务

1.ZooKeeper概述1.1定义与定位核心定位：分布式系统的协调服务，提供强一致性的配置管理、命名服务、分布式锁和集群管理能力核心模型：基于树形节点（ZNode）的键值存储，支持Watcher监听机制生态地位

slovess·2025-02-17 04:33

Redis高级特性解析——Redis核心技术与最佳实践

但是，作为一个高性能数据库，Redis还存在一些不足之处，比如内存管理、网络模型、集群架构、客户端连接、监控、持久化、主从复制等方面。因此，作者希望通过本文分析Redis高级特性

AI天才研究院·2025-02-17 01:11

云计算——AWS Solutions Architect – Associate（saa）7.放置群组

一、集群分区分布Cluster集群-将一个可用区中靠近的实例打包在一起。通过使用该策略，工作负载可以实现所需的低延迟网络性能，以满足HPC应用程序通常使用的紧密耦合的节点到节点通信的要求。

F——·2025-02-16 23:56

15. k8s二进制集群之CoreDNS部署

服务配置文件创建coredns.yaml配置文件（参考原始配置创建）提前准备好CoreDNS镜像资源【可选】如何启动CoreDNS服务当服务异常，如解决coredns启动失败问题总结当我们搭建完k8s集群之后可以为此部署一个

沙漠绿州（IT追随者）·2025-02-16 23:24

大数据之-hdfs+hive+hbase+kudu+presto集群(6节点)

几个主要软件的下载地址：prestohttps://prestosql.io/docs/current/index.htmlkudurpm包地址https://github.com/MartinWeindel/kudu-rpm/releaseshivehttp://mirror.bit.edu.cn/apache/hive/hdfshttp://archive.apache.org/dist/ha

管哥的运维私房菜·2025-02-16 22:50

hbase快照同步到目标集群出现ERROR Multiple regions have the same startkey问题分析

问题现象源集群表split/merge过程中创建快照，该快照同步到目标集群，目标集群恢复快照后，进行hbck检查，就会出现异常报错：ERRORMultipleregionshavethesamestartkey

spring208208·2025-02-16 22:19

docker compose部署zookeeper集群

networks:net:name:netservices:zookeeper1:image:zookeeper:3.7.0restart:alwayscontainer_name:zookeeper1hostname:zookeeper1privileged:trueports:-'2181:2181'environment:ZOO_MY_ID:1ZOO_SERVERS:server.1=zoo

现实、太残忍·2025-02-16 21:07

使用Docker搭建Flink集群

目录使用Docker搭建Flink集群docker-compose一键搭建步骤附录参考资料使用Docker搭建Flink集群在学习大数据框架的时候，需要一个真实的环境。

O_1CxH·2025-02-16 20:34

Java面试八股文：Memcached面试题专场（持续更新中......）

memcached服务在企业集群架构中有哪些应用场景？一、作为数据库的前端缓存应用二、作业集群的session会话共享存储。2、Memcached服务分布式集群如何实现？

Java凤梨·2025-02-16 17:11

高可用（HA）架构

http://aokunsang.iteye.com/blog/2053719浅谈web应用的负载均衡、集群、高可用(HA)解决方案http://zhuanlan.51cto.com/art/201612

weixin_34344403·2025-02-16 17:41

基于Istio Ambient Mesh的无边车架构：实现零侵入式服务网格的云原生革命

一、传统Sidecar模式的性能天花板1.1典型服务网格开销分析（千级节点集群）资源

桂月二二·2025-02-16 17:09

以下是一篇关于使用SLURM编写作业脚本的原创技术指南

在高性能计算（HPC）领域，SLURM（SimpleLinuxUtilityforResourceManagement）作为主流的作业调度系统，承担着集群资源分配的核心职责。

这题有点难度·2025-02-16 15:57

K8s第一章搭建集群

三台虚拟机分别非192.168.110.126192.168.110.127192.168.110.128关闭防火墙和swap分区systemctlstopfirewalldsystemctldisablefirewalldvi/etc/fstab把最后一行注释掉三台虚拟机相互ping通

R R·2025-02-16 13:13

Elasticsearch-API命令行相关操作手册

系列文章目录第一章es集群搭建文章目录系列文章目录前言esApi操作总结前言通过第一章学习es集群搭建流程及es基本概念后，在本章内容中，我们主要对es的基本命令行操作进行一次基本学习,来源于工作中的整理

少儿频道·2025-02-16 12:05

Java查询es很慢怎么办_elasticsearch索引和搜索慢问题分析解决

在使用的过程中，由于各种原因可能导致集群写入或者查询缓慢，本文主要讲述集中常见的原因和解决方法。

股票期货软件开发·2025-02-16 12:35

docker+es8+kibana单机及集群安装

安装过程遇到很多坑，涉及云服务器连接、配置等，这里把过程记录一下。1.es及kibana的版本最好一致es:dockerpull docker.elastic.co/elasticsearch/elasticsearch:8.11.3kibana:dockerpull docker.elastic.co/elasticsearch/elasticsearch:8.11.32.放开防火墙9200,9

qq_33935672·2025-02-16 12:33

ES 命令行查询

如果用linux命令来查询，其实就是转换成http请求，用curl来请求#查询所有索引名称curl-XGET"http://es集群ip地址:9200/_cat/indices?

不像程序员的程序媛·2025-02-16 11:55

如何在大规模集群中优化缓存性能？

Hadoop的分布式缓存机制是一种用于在MapReduce任务中高效分发和访问文件的机制。通过分布式缓存，用户可以将小文件（如配置文件、字典文件等）分发到各个计算节点，从而提高任务的执行效率。分布式缓存的工作原理文件上传：用户将需要缓存的文件上传到HDFS（HadoopDistributedFileSystem）。文件路径可以在作业配置中指定。作业提交：在提交MapReduce作业时，用户可以通过

晚夜微雨问海棠呀·2025-02-16 11:53

红队视角出发的k8s敏感信息收集——持久化存储与数据泄露

在Kubernetes集群中，持久化存储卷如同数据的保险箱，承载着应用运行所必需的各类敏感信息。然而，从红队视角出发，这些存储卷也可能成为攻击者觊觎的目标。

周周的奇妙编程·2025-02-16 10:51

k8s集群离线安装kuberay operator

1,安装方式采用helm安装方式，首先下载对应的helmchart，这里采用v1.2.2版本，下载地址：https://github.com/ray-project/kuberay-helm/releases/tag/kuberay-operator-1.2.22,解压并修改镜像源由于是在内网环境下搭建，因此需要将对应的镜像下载下来，并导入到本地镜像仓库，并修改values.yaml的镜像仓库地址

thinkerCoder·2025-02-16 10:19

Kubernetes 使用自定义资源（CRD）扩展API

K8sCRD即KubernetesCustomResourceDefinition，是Kubernetes提供的一种扩展机制，允许用户在Kubernetes集群中定义和使用自定义的资源类型。

zhangj1125·2025-02-16 09:13

集群与分片：深入理解及应用实践

目录引言什么是集群？集群的定义集群的类型什么是分片？

一休哥助手·2025-02-16 09:07

深入理解Elasticsearch集群与分片：原理及配置方案

一、Elasticsearch集群是什么想象一下，你有海量的数据，比如一个超大型图书馆的所有书籍信息，要是把这些数据都放在一台电脑里，不仅存不下，而且查询起来会超级慢。

一勺菠萝丶·2025-02-16 08:34

java 缓存篇2

缓存的部署方式单机主从哨兵集群特性主从（Master-Slave）哨兵（Sentinel）集群（Cluster）数据分片不支持不支持支持，基于slot进行水平分片高可用性部分支持（手动故障转移）高可用性

dzl84394·2025-02-16 06:48

spark-广播变量

本地的数据传输到集群上，会发到每一个线程，每一个分区。每一个进程executor，有多个线程分区，进程内的线程数据共享因此，给每一个线程发送数据会导致数据占用，浪费资源。

哈哈哈哈q·2025-02-16 05:12

《一文讲透》第4期：KWDB 数据库运维（2） —— 集群参数

因此，KWDB的一大任务就是：简化数据库集群配置。为避免每个节点单独编写配置文件或者重启中断服务，KWDB跳出传统的配置文件方式，采用了启动参数和集群参数组合的方式来控制数据库集群。

KWDB 数据库·2025-02-16 04:29

IoTDB 集群重启某节点失败

问题现象IoTDB1.3.3.6版本部署的3C3D集群，在重启某个节点服务时失败，报错信息为节点冲突，日志部分截图如下：问题原因当前IoTDB会根据data/confignode/system路径下的confignode-system.properties

铁头乔·2025-02-16 03:24

推荐频道