hive运维

降本增效新选择：下一代防火墙如何平衡安全性能与运维成本？

下一代防火墙（NGFW）通过智能硬件架构、自动化运维体系、弹性资源分配三大核心路径，实现安全性能与成本效益的最优平衡，成为数字化转型中的"降本增效刚需解"。
柏睿网络·2025-06-06 03:15

记一次·Spark读Hbase

记一次·Spark读Hbase一、背景过年回来，数仓发现hive的一个表丢数据了，需要想办法补数据。这个表是flume消费kafka写hive。
·2025-06-06 00:55

零风险操作！DolphinScheduler高可用架构下的无损扩缩容指南

本文将详细介绍DolphinScheduler集群的扩容和缩容操作流程，帮助运维人员安全、高效地调整集群规模。
·2025-06-05 20:08

Neo4j 监控全解析：原理、技术、技巧与最佳实践

本文将深入探讨Neo4j监控的核心原理、关键技术、实用技巧及行业最佳实践，助您构建强大的数据库运维体系。
weixin_30777913·2025-06-05 19:54

Hive的Parquet格式优化方法

一、Parquet格式的特点与优势1.列式存储架构核心特点：数据按列存储，同一列的数据连续存储在文件中，而非行式存储的“整行连续存储”。优势：查询性能高：仅读取查询所需列的数据，减少I/O量（如SELECTnameFROMtable仅扫描name列）。压缩效率高：同一列数据类型一致，更易通过字典编码、行程长度编码（RLE）等压缩算法实现高压缩比（通常压缩比为5-10倍），减少存储成本。支持谓词下推
安审若无·2025-06-05 19:20

Elasticsearch 集群运维常用命令详解

集群相关命令在介绍ES集群常用命令之前，我们先回顾下ES集群的分布式基本原理，从下图1中可以看出，ES集群是由多个节点组成，节点中会选举出一个Master节点，用于管理、调度集群；每个节点上存储部分索引数据，索引数据由分片来承载，即集群中有多个索引，每个索引中又会有多个分片，分片中有一到多个segment，segment中存储具体的doc数据。如下图1所示，当我们通过Client对集群执行写入操作
Jeremy_Lee123·2025-06-05 19:16

iceberg整合hive（从hive读取iceberg表数据）实践02

目录实现目标：1，创建hadoopcatalog在zeppelin创建hadoopcatalog2，创建基于hadoop_catalog的iceberg表3,从hadoop_catalog来创建hive
黄瓜炖啤酒鸭·2025-06-05 17:08

鸿蒙应用开发实战：AppGallery Connect集成指南与核心API解析

AGC的优势：华为官方提供的后端BaaS服务，涵盖认证、数据库、分析、推送等，免服务器运维，直接通过API调用。典型场景：用户登录（微信/手机号/邮箱一键授权）。
今日努力编程·2025-06-05 17:34

如何在IDE中通过Spark操作Hive

在IDE中通过Spark操作Hive是一项常见的任务，特别是在大数据处理和分析的场景中。
yt94832·2025-06-05 17:04

【hive sql】窗口函数

参考包括窗口函数在内的执行顺序from&join--确定数据源where--行级过滤groupby--分组having--组级过滤窗口函数--计算窗口函数结果select--选择列distinct--去重orderby--最终排序（可对窗口函数结果进行排序）limit/offset--分页将多行数据按照规则聚集为一行，称为聚集函数，如sum()、avg()、max()等；既要显示聚集前的数据，又要
soso（找工作版·2025-06-05 16:29

解锁 REDHAT 架构核心技术，实现 Linux 服务器故障秒级诊断修复

红帽认证工程师（RHCE）：在RHCSA的基础上，更侧重于系统的高级管理和运维，如服务器的部
····懂····2025-06-05 16:57

HiveSQL语法全解析与实战指南

HiveSQL完整语法体系与特性解析一、数据定义语言（DDL）库操作CREATEDATABASE[IFNOTEXISTS]dbname[COMMENT'描述'][LOCATION'hdfs_path']
不辉放弃·2025-06-05 16:57

大数据学习（127）-hive日期函数

大数据学习系列专栏：哲学语录:用力所能及，改变世界。如果觉得博主的文章还不错的话，请点赞+收藏⭐️+留言支持一下博主哦一、日期提取类函数1.dayofweek(date)功能：返回日期的星期几（1=星期日，2=星期一，...，7=星期六）。示例：SELECTdayofweek('2023-10-01');--返回1（星期日）2.year(date)/month(date)/day(date)功能：
viperrrrrrr·2025-06-05 16:26

【大数据测试 Hive数据库--保姆级教程】

大数据测试Hive数据库详细教程一、环境准备二、Hive数据库功能测试1.创建表2.插入数据3.查询数据4.使用条件过滤查询5.删除数据三、Hive数据库性能测试1.查询响应时间2.大数据量查询测试3.
生活De°咸鱼·2025-06-05 16:55

python一款简单的数据库同步dts小实现

一、实现说明在数据开发与运维场景中，数据库同步是一项基础且高频的需求。无论是开发环境与生产环境的数据镜像，还是多数据库之间的数据分发，都需要可靠的同步工具。
Felix_Fly·2025-06-05 13:12

Redis运维问题解决：QPS异常冲高

小亦平台会持续给大家科普一些运维过程中常见的问题解决案例，运维朋友们可以在往期文章中查看更多案例。
·2025-06-05 12:00

第21章 Puppet自动运维企业实战

Puppet是目前互联网主流三大自动化运维工具（Puppet、Ansible、Saltstack）之一，Puppet是一种Linux、Unix平台的集中配置管理系统，所谓配置管理系统，就是管理机器里面诸如文件
lihuhelihu·2025-06-05 11:54

【运维实战】使用Nvm配置多Node.js环境!

背景新项目使用Node.js-v16.17.1旧项目使用Node.js-v14.18.0【且依赖于node-saas模块，根据node-sass的官方文档，目前最新版本的node-sass（即v5.0.0）支持的Node.js版本范围是Node.js10.x、Node.js12.x、Node.js14.x。并没有明确支持Node.js16.x版本】Centos7.9nvm（NodeVersionM
遇见火星·2025-06-05 11:54

【运维实战】Rsync将一台主Web服务器上的文件和目录同步到另一台备份服务器!

在管理Web服务器时，确保数据安全且在发生故障时能够快速恢复至关重要，备份和镜像Web服务器数据最可靠的方法之一是使用rsync。Rsync工具可以帮助在两台服务器之间同步文件和目录，非常适合用于创建Web服务器数据的备份和镜像。下面将详细介绍使用rsync将Web服务器与备份服务器进行同步。同时介绍设置无密码登录，通过cron定时任务实现自动化的同步过程。1.环境说明现在有两台服务器，一台为主W
遇见火星·2025-06-05 10:21

Redis运维问题解决：哨兵集群QPS飙升排查及解决方案

小亦平台会持续给大家科普一些运维过程中常见的问题解决案例，运维朋友们可以在常见问题及解决方案专栏查看更多案例。
小亦智能运维·2025-06-05 10:18

windows server 2024 hyper-v虚拟机黑群辉安装教程_hyper-v 安装群辉设置网络10g

为了做好运维面试路上的助攻手，特整理了上百道【运维技术栈面试题集锦】，让你面试不慌心不跳，高薪offer怀里抱！
2401_83947398·2025-06-05 02:15

Linux 与 Windows：哪个操作系统适合你?

Linux与Windows作为主流选择，其差异不仅体现在技术架构上，更深刻影响着开发效率、运维成本与安全性。本文将从7个核心维度展开对比分析，并提供典型应用场景建议。
似水流年 光阴已逝·2025-06-05 01:13

实时数据湖架构设计：从批处理到流处理的企业数据战略升级

文章目录第一章：数据湖演进历程与现状分析第二章：实时数据湖核心架构剖析第三章：关键技术组件深度解析第四章：企业实施策略与路径规划第五章：典型应用场景与案例研究第六章：运维管理与最佳实践第一章：数据湖演进历程与现状分析数据处理架构演进时间线
大咖分享课·2025-06-04 23:55

微服务架构下的Java应用：Spring Cloud与Kubernetes集成实战

目录引言微服务架构基础SpringCloud生态系统Kubernetes基础知识SpringCloud与Kubernetes集成方案实战案例：构建微服务应用部署与运维最佳实践性能优化与监控总结与展望参考资源引言随着企业数字化转型的深入
天天进步2015·2025-06-04 23:54

【赵渝强老师】OceanBase中的租户

在OceanBase数据库中，租户是资源分配的单位，是数据库对象管理和资源管理的基础，对于系统运维，尤其是对于云数据库的运维有着重要的影响。租户在一定程度上相当于传统数据库的"实例"概念。
赵渝强老师·2025-06-04 22:17

微服务架构设计规范

技术多样性受控：允许针对不同服务采用最适合的技术栈，但须符合团队运维能力和标准化要求。可观测性：必须设计日志、监控、链路追踪，支持故障诊断与性能分
nbsaas-boot·2025-06-04 22:15

Nginx网站服务：从入门到LNMP架构实战

⏰️创作时间：2025年5月30日14点22分前言说起Web服务器，大家第一反应可能是Apache，但作为一个在运维路上摸爬滚打的技术人，我必须要为Nginx正名一下！
神秘泣男子·2025-06-04 21:41

【运维】内网中自建dns，smartdns，mosdns，实现dns转发，内外网分流

在自己的内网环境中，如pve内网环境，部分机器不能直接配置公网dns，或者需要使用dns来做国内/国外网络分流，此时考虑自建dns，以下两种方案为个人笔记记录，仅供参考smartdnsSmartDNS是一个运行在本地的DNS服务器，它接受来自本地客户端的DNS查询请求，然后从多个上游DNS服务器获取DNS查询结果，并将访问速度最快的结果返回给客户端，以此提高网络访问速度。SmartDNS同时支持指
chenzfp·2025-06-04 20:35

MySQL大表结构变更利器：pt-online-schema-change原理与实战指南

MySQL大表结构变更利器：pt-online-schema-change原理与实战指南MySQL数据库运维中，最令人头疼的问题之一莫过于对大表进行结构变更（DDL操作）。
AI新视界·2025-06-04 20:29

【Java开发300个实用技巧】243.架构演进单体到微服务

架构演进单体到微服务1.架构演进的必然性2.单体拆分的实战策略3.服务治理的三大坑位4.数据管理的终极考验5.团队协作的模式转型6.监控运维的降维打击从"祖传代码"到"微服务帝国"，架构演进背后的血泪教训与通关秘籍
精通代码大仙·2025-06-04 19:23

计算机毕业设计Hadoop+Spark+DeepSeek-R1大模型民宿推荐系统 hive民宿可视化 民宿爬虫 大数据毕业设计(源码+LW文档+PPT+讲解)

一、项目简介本项目基于Hadoop、Spark、DeepSeek-R1构建一个高效的大数据民宿推荐系统，涵盖数据爬取、存储、处理、分析、可视化、AI推荐等完整流程，并提供Hive可视化分析及大数据爬虫，
金枝玉叶9·2025-06-04 19:51

使用Jenkins和GitLab实现CI/CD流水线 - 容器编排平台的自动化运维与持续交付

本文介绍了如何利用Jenkins和GitLab来构建一个完整的CI/CD流水线，实现容器编排平台的自动化运维和持续交付。
技术星球·2025-06-04 18:44

TDengine 高级功能——流计算

在传统的时序数据解决方案中，常常需要部署Kafka、Flink等流处理系统，而流处理系统的复杂性，带来了高昂的开发与运维成本。
TDengine （老段）·2025-06-04 11:49

【赵渝强老师】OceanBase中的租户

在OceanBase数据库中，租户是资源分配的单位，是数据库对象管理和资源管理的基础，对于系统运维，尤其是对于云数据库的运维有着重要的影响。租户在一定程度上相当于传统数据库的"实例"概念。
·2025-06-04 11:08

【面试宝典】70道Hive高频题库整理(附答案背诵版)

简述什么是Hive？Hive是一个基于Hadoop的数据仓库工具，它可以将结构化的数据文件映射为一张数据库表，并提供简单的SQL查询功能，可以将SQL语句转换为MapReduce任务进行运行。
想念@思恋·2025-06-04 10:11

70道Hive高频题整理(附答案背诵版)

简述什么是Hive？Hive是一个基于Hadoop的数据仓库工具，它可以将结构化的数据文件映射为一张数据库表，并提供简单的SQL查询功能，可以将SQL语句转换为MapReduce任务进行运行。
编程大全·2025-06-04 09:08

Nginx 常见问题全解析：从 502 到 WebSocket 失败，如何逐一排查？

然而，许多开发者和运维人员在使用过程中都会遇到502BadGateway、413RequestEntityTooLarge、Nginx负载均衡异常、反向代理WebSocket失败等一系列问题。
秃头摸鱼侠·2025-06-04 07:48

TDengine 运维——巡检工具（安装工具）

背景TDengine的安装包自带安装脚本，但无法基于集群进行自动化安装部署，本文档旨在说明如何使用安装工具进行TDengine的集群式安装部署。安装工具支持功能安装方式详细说明单节点安装部署单节点环境安装部署TDengine集群安装部署集群环境安装部署TDengine指定机器安装部署指定集群中特定节点安装部署TDengine普通升级单节点或集群关闭服务后升级TDengine，仅推荐测试使用滚动升级
TDengine （老段）·2025-06-04 05:29

2025面试经验-阿里云智能-技术服务专家

阿里云智能作为阿里云客户技术服务的第一负责人，深入了解客户业务场景，与客户的架构、开发、运维团队深入合作，梳理分析客户现有云产品及应用架构，围绕行业客户云上业务设计稳定性优化方案，从云上监控，主动发现，
DK_Allen·2025-06-04 03:21

不兼容的签名实现,

接口也要写成sayHello(str:string=null);关键问题在于你要给函数参与默认值null，接口也要写上赋值转载于:https://www.cnblogs.com/jiahuafu/archive
weixin_30673611·2025-06-04 03:20

Windows 系统安装 Java JDK 1.8 全流程指南

验证安装一、下载JDK1.8安装包访问Oracle官方JavaSE8下载页面：链接：https://www.oracle.com/java/technologies/javase/javase8-archive-downloads.h
司南锤·2025-06-03 23:56

IT运维工具的选择标准有哪些？

选择IT运维工具时，可参考以下标准，确保工具适配业务需求且高效易用：1.明确业务需求与场景•核心目标：根据运维场景（如监控、自动化、安全等）匹配工具功能。
莲月唯翼·2025-06-03 23:49

hive 配置metastore连接参数

参照hive1.1.0完全分布式环境安装(有安装包步骤完整不走弯路)_Mr_Bright的博客-CSDN博客对hive进行配置，配置hive-site.xml时出现了与预想不一样的结果上文中修改hive-site.xml
大明__·2025-06-03 22:14

IT运维工具推荐

以下是一些常见的IT运维工具：监控工具•Prometheus：开源的监控和报警系统，适用于大规模集群环境，能收集多种监控数据。
莲月唯翼·2025-06-03 19:56

第5讲、Odoo 18 CLI 模块源码全解读

Odoo作为一款强大的企业级开源ERP系统，其命令行工具（CLI）为开发者和运维人员提供了极大的便利。Odoo18的odoo/cli目录，正是这些命令行工具的核心实现地。
何双新·2025-06-03 19:55

2024：CSDN上的收获与蜕变——我的技术成长之旅

我是博主“江湖有缘”，一位拥有十年企业基础架构运维经验的技术探索者。持有华为HCIE云计算、红帽RHCE以及华为数通HCIP等多项权威认证，专注于云计算、Linu
江湖有缘·2025-06-03 17:10

hive的数据库操作

前言基于hadoop集群搭建hive仓库，hadoop集群搭建和hive数据仓库搭建。关于hive的表和数据库详细操作。一、数据库操作1.创建数据库语法格式如下。
Supplant·2025-06-03 15:24

Linux常用命令介绍-系统管理

find命令-根据路径和条件搜索指定文件ind命令的功能是根据给定的路径和条件查找相关文件或目录，其参数灵活方便，且支持正则表达式，结合管道符后能够实现更加复杂的功能，是Linux系统运维人员必须掌握的命令之一
·2025-06-03 14:24

Ansible功能简介

一、Ansible定义Ansible是一款基于Python开发的自动化运维工具，通过SSH协议实现无代理（Agentless）的跨主机批量管理，适用于系统配置、软件部署、文件传输、命令执行等场景‌。
demonlg0112·2025-06-03 12:03

Jenkins：自动化流水线的基石，开启 DevOps 新时代

它通过插件化的架构支持几乎所有的开发、运维和测试工具，帮助团队快速构建、测试和部署代码，实现软件开发的自动化流水线。
茶本无香·2025-06-03 09:11
上一页 10 11 12 13 14 15 16 17 下一页
按字母分类： ABCDEFGHIJKLMNOPQRSTUVWXYZ其他