hue集群

浅谈Hive SQL的优化

目前团队的数据处理都在Hadoop集群上，一是因为需要处理的数据量都是亿级的，这种规模的数据适合用Hadoop集群并行处理；二是免除了分库分表给查询处理上带来的麻烦。
CodeZhuxh·2025-06-01 04:54

如何优化Hive的查询性能？请详细说明查询优化的各个层面（SQL优化、配置优化、资源优化等）和具体方法。

Hive查询性能优化涉及多个层面，需结合SQL语句、配置参数、集群资源及数据本身特性进行综合调优。以下是详细的优化方法：一、SQL语句优化1.过滤条件前置问题：未过滤的数据会增加后续处理开销。
安审若无·2025-06-01 04:50

一文彻底搞懂I/O多路复用及其技术

高性能架构设计主要集中在两方面：尽量提升单服务器的性能，将单服务器的性能发挥到极致如果单服务器无法支撑性能，设计服务器集群方案单服务器高性能的关键之一就是服务器采取的网络编程模型。
Linux服务器开发·2025-06-01 03:15

k8s Headless Service

Kubernetes无头服务（HeadlessService）配置与使用场景1.无头服务概述无头服务（HeadlessService）是Kubernetes中的一种特殊服务类型，它**不分配集群IP（ClusterIP
安顾里·2025-06-01 01:07

docker部署ELK+Filebeat之elasticsearch集群部署（一）

docker部署ELK之elasticsearch集群部署（一）本文旨在三台不同的服务器，搭建elasticsearch集群，版本为7.1.11、服务器列表及配置（服务器内存尽量不要低于4G）主机名IPdocker110.0.1.47docker210.0.1.83docker310.0.1.147
WFkwYu·2025-06-01 01:33

ELK系列-（一）Docker部署ELK核心组件

ELK系列-（一）Docker部署ELK核心组件一.背景情况笔者此前的公司没有日志收集分析系统，某个集群应用的日志文件难以查看催生了日志系统落地的需求，最后使用DockerCompose运行了最基本的的
流穿·2025-06-01 01:31

搭建elasticsearch集群，8.17.0版本

搭建集群的帖子有很多，但是似乎新版做了一些改动。
94待转业码农·2025-06-01 01:01

【NoSQL数据库】Redis Cluster集群（含redis集群扩容脚本）

RedisCluster集群RedisClusterRedis分布式扩展之RedisCluster方案功能数据如何进行存储redis集群架构集群伸缩向集群中添加一个新的master节点，并向其中存储num
划过手的泪滴t·2025-05-31 23:21

LVS+Keepalived群集（群集）

的概述1.1Keepalived的功能keepalived主要是用来提供故障切换和健康检查功能-----判断LVS负载调度器，节点服务器的可用性，及时隔离并替换为新的服务器，当故障主机恢复后将其重新加入集群
Jay&&·2025-05-31 23:13

Java在大数据处理中的应用：Hadoop与Spark

一、Hadoop简介与Java应用Hadoop是一个开源的大数据处理框架，它允许在集群中分布
微赚淘客机器人开发者联盟@聚娃科技·2025-05-31 19:19

GreenPlum+PostGIS实现海量空间数据存储

使用分布式集群数据库Greenplum结合PostGIS空间扩展，可存储结构化的海量地图数据，同时，使用分布式文件存储系统HDFS存储相关文件资源，可实现海量栅格数据的存储和读取，基于大数据技术架构的云平台
从地图看世界·2025-05-31 19:19

redis高并发问题

Redlock原理和存在的问题Redlock基于以下假设：有多个（一般建议是5个）彼此独立的Redis实例（不是主从复制，也不是集群模式），它们之间没有数据同步。客户端可以与所有Redis实例通信。
cubicjin·2025-05-31 15:23

分布式CAP理论总结

A：可用性我的理解是当有节点出现问题的时候，集群还能保证提供服务，数据可以不是一致的。
JHpku·2025-05-31 14:10

标题：凌晨3点数据库集体暴毙！BCC猎凶实录曝光，运维跪求拜师

血案现场：2025年某支付平台凌晨突发**数据库集群雪崩**，CPU100%却查不到进程惊天逆转：BCC工具`offcputime`揪出**内核调度死锁**，`ext4slower`捕获文件系统暗箭
人生万事须自为，跬步江山即寥廓。·2025-05-31 11:18

Redis全面介绍

互联网的高速发展不断挑战WEB系统的性能极限，随着分布式集群应用的日益广泛，对缓存技术的要求
weixin_30517001·2025-05-31 08:03

HUELOJ: 67 统计数字字符的个数

题目描述输入一行字符，以回车符作为输入结束的标志。统计其中数字字符的个数。输入描述多个字符，以回车符结束，回车符不作为有效字符。输出描述输出一个整数，表示数字字符的个数。输入样例12abrt12@2013输出样例8#includeintmain(){inti,m;chara;m=0;while(scanf("%c",&a),a!='\n'){if(a>='0'&&a<='9'){m++;}}pri
一粒沙白猫·2025-05-31 08:30

如何使用PHP创建一个安全的用户注册表单，包含输入验证、数据过滤和结果反馈教程。

接口盒子有数百个免费API，而且采用集群化服务
Estar.Lee·2025-05-31 08:58

Debezium系列之：TiCDC同步TiDB数据库数据到Kafka集群使用Debezium数据格式

Debezium系列之：TiCDC同步TiDB数据库数据到Kafka集群使用Debezium数据格式一、使用Debezium消息格式二、Message格式定义DMLEvent数据类型映射Debezium
快乐骑行^_^·2025-05-31 06:47

QEMU+OCFS2: 使用OCFS2作为虚拟机磁盘文件的SAN存储文件系统

本文介绍OCFS2共享集群文件系统，如何配置以及如何在线扩容。什么是OCFS2文件系统？
云联壹云·2025-05-31 04:28

LVS-DR高可用-Keepalived

Keepalved双机热备Keepalived双机热备是一种基于VRRP（VirtualRouterRedundancyProtocol，虚拟路由冗余协议）实现的高可用性解决方案，广泛应用于Linux服务器集群中
澜兮子·2025-05-31 04:57

Rocky Linux 9.4 (Blue Onyx)安装Prometheus及Grafana实现对服务器监控数据进行展示及告警

它可以监控主机，服务，容器，支持多种exporter采集数据，还支持pushgateway进行数据上报，Prometheus性能足够支撑上万台规模的集群。Grafana是什么Grafana是一种开
慢工出细活1155·2025-05-31 03:25

Hadoop常用端口号和配置文件

常用端口号有：hadoop2.xHadoop3.x访问HDFS端口500709870访问MR执行情况端口80888088历史服务器1988819888客户端访问集群端口90008020常用配置文件hadoop2
jiedaodezhuti·2025-05-31 00:05

Redis----数据结构

具有高性能高并发的特点，可以用来作为缓存降低mysql数据库的压力，还可以用来做分布式锁以及轻量级消息队列等与Memcached的区别具备许多Memcached不具备的功能，多种可满足不同需求的数据类型，数据持久化，原生集群为什么用
码破苍穹ovo·2025-05-31 00:31

RabbitMQ集群与负载均衡实战指南

文章目录集群架构概述仲裁队列的使用1.使用Spring框架代码创建2.使用amqp-client创建3.使用管理平台创建负载均衡引入HAProxy负载均衡：使用方法1.修改配置文件2.声明队列test_cluster3
灰阳阳·2025-05-30 22:19

麒麟v10+信创x86处理器离线搭建k8s集群完整过程

前言最近为某客户搭建内网的信创环境下的x8s集群，走了一些弯路，客户提供的环境完全与互联网分离，通过yum、apt这些直接拉依赖就别想了，用的操作系统和cpu都是国产版本，好在仍然是x86的，不是其他架构
xyhshen·2025-05-30 22:19

小型语言模型：为何“小”才是“大”？

GPT-4o每输出1K个token就要花费两美分，还得把数据发送到遥远的GPU集群，过程中还会有延迟峰值和隐私问题。
AI仙人掌·2025-05-30 21:42

RabbitMQ备份与恢复技术详解：策略、工具与最佳实践

在集群环境中
weixin_30777913·2025-05-30 15:56

kafka实践与C++操作kafka

一、集群Kafka架构是由producer（消息生产者）、consumer（消息消费者）、broker（kafka集群的server，负责处理消息读、写请求，存储消息，在Kafkacluster这一层里
源远流长jerry·2025-05-30 14:17

利用 Dubbo 构建 Java 分布式系统的分布式缓存集群

利用Dubbo构建Java分布式系统的分布式缓存集群关键词：Dubbo、Java分布式系统、分布式缓存集群、缓存一致性、性能优化摘要：本文旨在深入探讨如何利用Dubbo构建Java分布式系统中的分布式缓存集群
Java大师兄学大数据AI应用开发·2025-05-30 12:03

LVS-DR负载均衡群集

目录一.LVS-DR集群1.LVS-DR工作原理2.数据包流向分析3.LVS-DR模式特点二.直接路由模式(LVS-DR)1.准备案例环境2.配置负载调度器(1)配置虚拟IP地址(VIP)(2)调整proc
zhcong_·2025-05-30 12:32

使用Nginx + Keepalived配置实现Web站点高可用方案

但是它一般不会单独出现，而是与其它负载均衡技术（如LVS、HAProxy、Nginx）一起工作来达到集群的高可用。VRRP（VirtualRouterRedundancyProtocol），即虚
夜影风·2025-05-30 11:26

大数据学习（124）-spark数据倾斜

如果觉得博主的文章还不错的话，请点赞+收藏⭐️+留言支持一下博主哦1.倾斜表现某些Task执行时间远超其他Task（通常超过平均时间10倍以上）集群资源利用率不均（部分Executor负载过高）作业执行时间主要由少数几个
viperrrrrrr·2025-05-30 11:22

解释PV和PVC的关系，开发有状态应用时如何挂载持久化存储？

PV（持久卷）集群级别的存储资源池，由管理员预先创建apiVersion:v1kind:PersistentVolumemetadata:name:mysql-pvspec
搞不懂语言的程序员·2025-05-30 10:45

HUELOJ: 65 最大公约与最小公倍

题目描述输入两个正整数，输出其最大公约数和最小公倍数。输入描述输入两个正整数n和m（n,mintmain(){intm,n,t,x,y,c;scanf("%d%d",&m,&n);x=m;y=n;while(t=m%n,t!=0){m=n;n=t;}c=(y/n)*x;//先除后乘，防止溢出printf("%d%d\n",n,c);return0;}
一粒沙白猫·2025-05-30 08:37

RabbitMQ 集群搭建步驟

RabbitMQ集群搭建步驟RabbitMQ是一個流行的開源消息中間件，搭建集群可以提高其可用性和吞吐量。
初学者杰克·2025-05-30 08:36

RabbitMQ集群形成和要求

文章目录1、集群形成要求1.1、主机名解析1.2、端口访问1.3、集群中的节点1.3.1、复制1.3.2、节点是平等的1.3.3、CLI工具如何对节点（以及节点彼此）进行身份验证：ErlangCookie1.3.4
5忘初心·2025-05-30 08:05

Springboot整合Redis--基于Jedis

环境springboot2.4.5spring-boot-starter-data-redis2.4.5jedis3.3.0功能点基于Jedis进行整合可支持单机模式、集群模式的灵活配置切换(基于springboot
STW_持之以恒·2025-05-30 08:02

RabbitMQ搭建集群时异常

异常记录1.在远程服务器中搭建集群时需要在服务器端放开以下端口5672端口15672端口4369端口25672端口5672：RabbitMQ的通讯端口；4369:epmd，RabbitMQ节点和CLI工具使用的对等发现服务
三秋叶.·2025-05-30 08:01

三、zookeeper 常用shell命令

思维导图一、连接ZooKeeper服务使用zkCli.sh前，需连接到ZooKeeper服务器或集群。命令：zkCli.sh-serverh
IvanCodes·2025-05-30 06:18

如何修复cdn服务器异常,cdn服务器连接异常怎么解决

关闭应用失败排查思路失败原因解决方案同步集群OBS桶数据失败检查集群OBS桶策略权限，并且重启云服务器会话异常重启会话，若未解决再重启云服务器无法找到应用exe文件登录云当云服务器网络异常
黄嘉泰·2025-05-30 06:16

Web集群架构-Nginx深入(二)

nginx访问网站流程使用域名访问网站流程:DNS解析:域名IP地址连接80端口:tcp3次握手与网站的80端口建立连接http请求豹纹:请求方法,URI,HOST等信息GET/index.htmlHOST:cxk.oldboylinux.cnUser-Agent:Chrome/xxxngx处理:http请求,http区域处理不同的server{}区域(子配置文件)处理.端口域名:用户请求的域名与
阿里云架构师-取经版·2025-05-30 05:12

Redis集群在NoSQL中的应用与优化策略

目录一、Redis集群方式二、集群模式简介三、数据分片方式四、负载均衡的实现五、故障的处理六、Redis集群部署1.资源清单2.修改主机名3.安装Redis（每个节点都要安装）4.修改配置文件（每个节点都要配置
YJQ9967·2025-05-30 03:19

FastDFS集群部署与性能优化实战

目录一、介绍二、FastDFS原理三、FastDFS部署1.资源清单2.修改主机名3.安装libfastcommon（tracker01、tracker02、storage1、storage2）4.安装编译FastDFS（tracker01、tracker02、storage1、storage2）5.配置tracker服务器（tracker01、tracker02）6.配置Storage服务（st
YJQ9967·2025-05-30 02:48

基于 Netty + SpringBoot + Vue 的高并发实时聊天系统设计与实现

--------+WebSocket(wss)+------------------+NettyTCP+------------------+|Vue前端||SpringBoot网关||Netty服务集群
极客智谷·2025-05-30 02:42

MySQL集群、Redis集群、RabbitMQ集群

一、MySQL集群1、集群原理MySQL-MMM是Master-MasterReplicationManagerforMySQL（mysql主主复制管理器）的简称。脚本）。
伊人秋采唐·2025-05-30 02:11

Golang 领域 NSQ 集群搭建指南

Golang领域NSQ集群搭建指南关键词：Golang、NSQ、消息队列、分布式集群、微服务、高可用性、异步通信摘要：本文系统讲解基于Golang的分布式消息队列NSQ的集群搭建与运维实践。
Golang编程笔记·2025-05-29 23:52

Docker Swarm配置

Docker是目前应用部署常用方式，当对Docker方式部署的应用进行扩容时，一台服务器资源不足支撑应用扩容，就需要在多台物理服务器之间建立集群供应用扩容，就会使用到DockerSwarm。
默然zxy·2025-05-29 22:43

MongoDB 数据库迁移：完整指南与最佳实践

本文将详细介绍MongoDB数据库迁移的多种方法，包括mongodump/mongorestore、mongoexport/mongoimport、复制集迁移、分片集群迁移以及
vvilkin的学习备忘·2025-05-29 22:42

MongoDB-分片集

分片集群架构分片策略数据均衡分片集群架构使用分片的场景存储容量需求超出单机的磁盘容量活跃的数据集超出单机内存容量，导致很多请求都要从磁盘读取数据写IOPS超出单个MongoDB节点的写服务能力MongoDB
姜希成·2025-05-29 21:40

雪崩问题-

雪崩问题产生的原因：微服务相互调用，服务提供者出现故障或者阻塞微服务调用者没有做好异常处理，导致自身故障调用链中的所有服务级联失败，导致整个集群故障解决思路：尽量避免服务出现故障或阻塞（保持代码的健壮性
_r0bin_·2025-05-29 19:30
上一页 10 11 12 13 14 15 16 17 下一页
按字母分类： ABCDEFGHIJKLMNOPQRSTUVWXYZ其他