hive运维

mysql8.4+mysql router读写分离

community-router8.4下载mysql_shellmysql-shell-9.0.1-linux-glibc2.17-x86-64bit.tar.gz下载地址:https://downloads.mysql.com/archives
Alex_z0897·2025-02-21 00:42

Docker 与 CI/CD：自动化构建和部署

在现代软件开发中，CI/CD（持续集成/持续部署）是一种高效的软件开发和运维方法。CI/CD通过自动化构建、测试和部署流程，减少了人为错误，提高了软件交付的速度和质量。
drebander·2025-02-20 22:01

vue中原生表格的使用

代码如下：线路名称{{item.lineName}}巡检区段{{item.scope}}运维管理单位{{item.operationAndMaintenanceCompany}}运检作业单位{{item.insWorkCompany
今天吃了嘛o·2025-02-20 20:39

关于防火墙运维面试题2

三、防火墙配置与管理类21.如何根据企业的网络安全策略，制定一套全面的防火墙规则集？需要考虑哪些关键因素？以下是根据企业网络安全策略制定全面防火墙规则集的指导，以及需要考虑的关键因素：一、关键因素（一）网络架构与拓扑了解企业的网络结构明确企业网络是简单的星型拓扑、复杂的网状拓扑还是混合拓扑等。例如，在星型拓扑中，所有设备都连接到一个中心交换机或集线器，这种结构下防火墙规则可能相对集中和简单；而在网
编织幻境的妖·2025-02-20 14:48

关于防火墙运维面试题

一、防火墙基础概念类1.请详细阐述防火墙在网络安全体系中的具体作用及核心原理。以下是防火墙在网络安全体系中的具体作用及核心原理的详细阐述：防火墙在网络安全体系中的作用访问控制限制非法访问：防火墙可以根据预设的规则，允许或拒绝特定的网络流量通过。例如，企业内部网络可能只允许来自特定IP地址范围的员工访问敏感资源，而阻止其他未经授权的外部IP地址的访问，从而保护内部网络免受未经授权的访问和潜在的攻击。
编织幻境的妖·2025-02-20 14:18

安装配置MAVEN

安装配置MAVEN1.获取安装包下载apache-maven-3.8.1-bin.zip，下载地址：https://archive.apache.org/dist/maven/maven-3/3.8.1
ByteVoyager·2025-02-20 11:21

2025年三个月自学手册 网络安全（黑客技术）

基于入门网络安全/黑客打造的：黑客&网络安全入门&进阶学习资源包什么是网络安全网络安全可以基于攻击和防御视角来分类，我们经常听到的“红队”、“渗透测试”等就是研究攻击技术，而“蓝队”、“安全运营”、“安全运维
网安kk·2025-02-20 11:20

LLM与知识图谱融合:智能运维知识库构建

1.背景介绍随着信息技术的飞速发展，IT运维管理面临着越来越大的挑战。海量的设备、复杂的网络环境、日益增长的数据量，使得传统的运维方式难以满足需求。为了提高运维效率和质量，智能运维应运而生。
AI天才研究院·2025-02-20 11:45

MapReduce 读取 Hive ORC ArrayIndexOutOfBoundsException: 1024 异常解决

个人博客地址：MapReduce读取HiveORCArrayIndexOutOfBoundsException:1024异常解决|一张假钞的真实世界在MR处理ORC的时候遇到如下异常：Exceptioninthread"main"java.lang.ArrayIndexOutOfBoundsException
一张假钞·2025-02-20 09:33

运维分级发布_运维必备制度：故障分级和处罚规范

正文互联网产品提供7*24小时服务，而因人为操作、程序BUG等原因导致服务不可用是影响服务持续运行的重要原因，为了提高各业务产品的运维和运营质量，规范各业务线的服务、故障响应，拟定和发布“故障分级和处罚规范
weixin_39599046·2025-02-20 09:00

【面试准备】运维工程师

线路的监控、测试、报障；4、ERP账号、文件服务器等软件账号的开放与权限管理、维护；5、邮箱OA服务器、文件服务器、ERP数据库服务器的日常管理、维护；6、公司网络工程的规划、项目实施、技术支持;—对这个运维工程
C.尚水.Y·2025-02-20 08:26

《运维工程师如何利用DeepSeek实现智能运维：分级实战指南》

目录智能运维革命：DeepSeek带来的范式转变DeepSeek核心运维能力全景解析分级实战场景与解决方案3.1初级工程师：自动化运维入门3.2中级工程师：复杂系统诊断与优化3.3高级工程师：架构级智能运维典型项目案例深度剖析
进击的雷神·2025-02-20 08:49

Anaconda 配置镜像源

Anaconda安装包可以到https://mirrors.tuna.tsinghua.edu.cn/anaconda/archive/下载。
猿代码_xiao·2025-02-20 06:37

SaaS的多租户数据隔离有哪几种？

支持的租户数量较少，同时数据库独立安装带来的运维成本比较高物理数据库隔离中中一个数据库可支撑多个租户，同时成本也相对较低，而且也有一定
衫恋冰·2025-02-20 05:02

linux安装python开发环境

安装Anaconda下载Anacondawgethttps://repo.anaconda.com/archive/Anaconda3-5.3.0-Linux-x86_64.sh安装AnacondabashAnaconda3
燃冰结晶·2025-02-20 05:30

Linux运维常见问题排查

1.Linux系统安装初始状态时>找不到硬盘，无法进入下一步安装解决方法：进入BIOS/COMS设置，找到硬盘设置相关选项，并设置为兼容模式。2.Linux系统安装时，在硬盘分区完成后>无法继续安装解决方法：硬盘分区不符合安装要求，可能忘记创建根分区或swap交换分区。这一点与Windows系统安装有区别。3.Linux系统安装时，软件包选择困惑，安装完成后发现有组件未按需求安装；解决方法：对Li
Hadesls·2025-02-20 03:11

自动化运维工具ansible

Ansible批处理工具Ansible批处理工具功能图Ansible项目架构图一、Ansible介绍1、Ansible简介简介ansible是一种自动化运维工具，基于paramiko模块开发，实现了批量系统配置
theo.wu·2025-02-20 01:29

SSH/RDP 无法访问？云服务器让远程管理更简单

在日常运维和管理云服务器时，远程连接（SSH访问Linux服务器，RDP访问Windows服务器）是不可或缺的操作。
Anna_Tong·2025-02-19 22:31

麒麟管家全新升级，运维问题“一键修复”

麒麟管家是openKylin社区SystemManagerSIG开发的一款面向社区用户，能倾听用户烦恼和诉求，也能提供便利途径、解决用户问题的系统管理类应用，可以为用户提供问题反馈、系统垃圾清理、电脑故障排查、硬件设备管理及系统小工具等一站式服务，帮助用户更好地使用openKylin操作系统。产品的发展与提升离不开用户的信赖与支持。麒麟管家在openKylin0.9版本首次上线，并持续更新迭代，在
·2025-02-19 20:48

实现MySQL数据全量迁移至Hive的简单脚本

1、主要思路：编写脚本执行建表语句、sqoop命令1.1、编写建表语句脚本思路：在虚拟机下执行hive-f/脚本路径即可执行hql脚本1.2、编写shell脚本脚本内容为分为两部分执行hql建表语句脚本
xiaoxaoyu·2025-02-19 16:11

Hive的动态分区与静态分区（区别及详解）

静态分区与动态分区的区别：1、静态分区2、动态分区静态分区与动态分区的区别：静态分区是先把分区表创好，然后手动把数据导入到对应的分区里面去。静态分区实在编译期间指定分区名。静态分区支持load、insert两种插入方式。静态分区是用于分区少，分区名可以明确的数据。动态分区是有一份数据集（2015-2022年的），按照数据集的字段给动态的生成分区。动态分区实在SQL执行的时候确定的。动态分区前需打开
东南枝上的大雄·2025-02-19 16:41

hive—常用的函数整理

1、size(split(...))函数用于计算分割后字符串数组的长度1）实例：由客户编号列表计算客户编号个数--数据准备withtmp_test01as(select'tag074445270'tag_id,'202501'busi_mon,'012399931003,012399931000'index_valunionallselect'tag074445271'tag_id,'202501
风子~·2025-02-19 15:08

Hive 分区详解

在Hive中处理数据时，当处理的一张表的数据量过大的时候，每次查询都是遍历整张表，显然对于计算机来说，是负担比较重的。
mm_ren·2025-02-19 15:36

Hive的动态分区的原理

Hive动态分区原理详解1.什么是Hive动态分区？在Hive中，分区（Partition）是对表数据的一种划分方式，类似于关系型数据库中的分区表。
肥猪猪爸·2025-02-19 15:01

hive全量迁移脚本

/bin/bash#场景：数据在同一库下，并且hive是内部表（前缀的hdfs地址是相同的）#1.读取一个文件，获取表名#echo"时间$dt_jian_2-----------------------
我要用代码向我喜欢的女孩表白·2025-02-19 15:29

基于自动化发布流程，运用多个工具实现高效运维实战

【摘要】生产部署曾经是一件令运维极为头痛的事，充满着大量沟通和手动操作，自动化发布完全解决了过去发布的痛点。
罗伯特之技术屋·2025-02-19 14:57

笔记：DataSphere Studio安装部署流程

一、标准版部署标准版：有一定的安装难度，体现在Hadoop、Hive和Spark版本不同时，可能需要重新编译，可能会出现包冲突问题。适合于试用和生产使用，2~3小时即可部署起来。
右边com·2025-02-19 13:15

HIVE- SPARK

日常记录备忘Hive修改字段类型之后（varchar->string）Hive可以查到数据，Presto查询报错;分区字段数据类型和表结构字段类型不一样；spark-sql分区表和非分区表兼容问题，不能关联可以建临时表把分区数据导入
流川枫_·2025-02-19 13:14

Hive的ReduceJoin/MapJoin/SMBJoin

Hive中就是把Map，Reduce的Join拿过来，通过SQL来表示。
for your wish·2025-02-19 12:40

hive-site.xml 配置总结

在Hive安装后，hive主要的配置文件为conf中hive-site.xml那该文件中那么多的配置选项都是什么含义呢。
hxsln11·2025-02-19 12:07

2025年三个月自学手册 网络安全（黑客技术）

基于入门网络安全/黑客打造的：黑客&网络安全入门&进阶学习资源包什么是网络安全网络安全可以基于攻击和防御视角来分类，我们经常听到的“红队”、“渗透测试”等就是研究攻击技术，而“蓝队”、“安全运营”、“安全运维
网安kk·2025-02-19 10:19

轻松上手：2025年无服务器架构教程

首先，开发者无需担心服务器的部署和运维工作，这大大减少了学习曲线。以AWSLa
zxzy_org·2025-02-19 10:49

Python 运维（四）：使用 PyInstaller 将 Python 程序打包成可执行文件

本文收录于《Python入门核心技术》专栏，专栏总目录：点这里，订阅后可阅读专栏内所有文章。大家好，我是水滴~~PyInstaller是一款强大的Python打包工具，通过将Python程序转换成可执行文件，它简化了程序的分享和分发过程。本文从简介、安装、使用以及典型案例四个方面对PyInstaller进行了介绍。文章内容包含大量的示例代码，希望能够帮助新手同学快速入门。文章目录一、简介二、安装P
水滴技术·2025-02-19 09:18

小白也能安装：Ubuntu20.04 安装 RabbitMQ

写篇记一记安装基本依赖项更新源sudoapt-getupdate-y下载签名密钥和软件包所需的先决条件sudoapt-getinstallcurlgnupgdebian-keyringdebian-archive-keyring-y
Valishment·2025-02-19 06:22

最新Apache Hudi 1.0.1源码编译详细教程以及常见问题处理

1.最新ApacheHudi1.0.1源码编译2.Flink、Spark、Hive集成Hudi1.0.13.flinkstreaming写入hudi目录1.版本介绍2.安装maven2.1.下载maven2.2
Toroidals·2025-02-19 06:51

电力知识图谱与大模型的结合：从构建到行业应用的深度解析

电力知识图谱作为一种将数据转化为结构化知识的技术，正在赋能故障诊断、设备管理、运维优化等核心场景。而当知识图谱与大模型相结合，更能释放强大的知识推理和智能预测能力，为行业智慧化发展注入新动力。
Cc不爱吃洋葱·2025-02-19 02:44

IM 即时通讯系统-06-聊一聊 IM 要如何保证扩展性？

聊一聊IM要如何实现运维与监控？聊一聊IM要如何提升用户体验？聊一聊IM要如何进行测试与部署？聊一聊IM要如何编写文档+技术支持？聊一聊IM要如何打造差异化？聊一聊如何优化硬件聊一聊如何
·2025-02-18 22:06

2025年网络安全（黑客技术）三个月自学手册

基于入门网络安全/黑客打造的：黑客&网络安全入门&进阶学习资源包前言什么是网络安全网络安全可以基于攻击和防御视角来分类，我们经常听到的“红队”、“渗透测试”等就是研究攻击技术，而“蓝队”、“安全运营”、“安全运维
csbDD·2025-02-18 22:07

2024年网络安全（黑客技术）三个月自学手册

基于入门网络安全/黑客打造的：黑客&网络安全入门&进阶学习资源包前言什么是网络安全网络安全可以基于攻击和防御视角来分类，我们经常听到的“红队”、“渗透测试”等就是研究攻击技术，而“蓝队”、“安全运营”、“安全运维
csbDD·2025-02-18 22:37

2024年网络安全（黑客技术）三个月自学手册

基于入门网络安全/黑客打造的：黑客&网络安全入门&进阶学习资源包前言什么是网络安全网络安全可以基于攻击和防御视角来分类，我们经常听到的“红队”、“渗透测试”等就是研究攻击技术，而“蓝队”、“安全运营”、“安全运维
csbDD·2025-02-18 22:07

Python 算法交易秘籍（五）

原文：zh.annas-archive.org/md5/010eca9c9f84c67fe4f8eb1d9bd1d316译者：飞龙协议：CCBY-NC-SA4.0第十一章：算法交易-实际交易现在我们已经建立了各种算法交易策略
绝不原创的飞龙·2025-02-18 22:33

IM 即时通讯系统-05-聊一聊 IM 要如何保证安全性？

聊一聊IM要如何实现运维与监控？聊一聊IM要如何提升用户体验？聊一聊IM要如何进行测试与部署？聊一聊IM要如何编写文档+技术支持？聊一聊IM要如何打造差异化？聊一聊如何优化硬件聊一聊如何
·2025-02-18 22:59

基于eBPF的智能诊断平台：实现云原生系统的自愈型运维体系

引言：从被动运维到预测性自愈的进化当某电商平台通过eBPF实时诊断系统提前48小时预测到MySQL集群的锁竞争风暴时，其核心是千万级指标粒度的内核状态分析与AI驱动的根因定位算法的结合。
桂月二二·2025-02-18 21:58

关于前端产品在低代码上的探索：解锁中台架构的更多可能

这种架构的核心在于复用已有能力，实现快速上线和低成本运维。然而，前端业务高度依赖用户需求的变化，需要更灵活的动态能力，因此构建一个灵活的“前端中台”成为我们新的探索方向。在撮
代码简单说·2025-02-18 21:52

运维利器——阿里云操作系统控制台上线

传统方法局限：监控排查耗时低效，隐性问题难以发现，增加运维成本。通过操作系统内存全景功能，可一键扫描诊断，提升运维效率、降
·2025-02-18 18:22

Redis：深入理解阻塞列表弹出与消息发布订阅机制_brpop原理

因此收集整理了一份《2024年最新Linux运维全套学习资料》，初衷也很简单，就是希望能够帮助到想自学提升又不知道该从何学起的朋友。
高级工程师2024·2025-02-18 18:38

深度揭秘：我们是如何设计一个每天同步万亿数据的神器 - SeaTunnel架构解密

一个深夜的求助2021年的一个深夜，正准备关电脑休息，一个运维电话打了进来："救命！整个数据同步系统都崩溃了，3000多张表的同步全部积压，业务系统已经开始报警了..."
·2025-02-18 18:20

KubeEdge 1.20.0 版本发布

新版本针对大规模、离线等边缘场景对边缘节点和应用的管理、运维等能力进行了增强，同时新增了多语言Mapper-Framework的支持。
laowangsen·2025-02-18 08:04

Hive中文乱码解决方法

Hive中文乱码解决方法一、Hive中文乱码原因二、Hive中文乱码解决方法三、修改hive配置文件四、再次查看表信息，中文注释正常一、Hive中文乱码原因hive的元数据是由mysql管理的，mysql
快乐骑行^_^·2025-02-18 08:57

Amazon ec2 云服务免费一年

现在亚马逊有一年的免费体验，可以尝试一下，服务器在国外的好处就不多说了，运维国外应用服务，代理服务这些都可以玩起来了，下面简单介绍一下如果去把Amazon的ec2云服务给耍起来注册账户注册地址如下：点击这里然后按照流程一步一步填写用户信息填写信用卡信息
无己心·2025-02-18 03:35
上一页 8 9 10 11 12 13 14 15 下一页
按字母分类： ABCDEFGHIJKLMNOPQRSTUVWXYZ其他