【Hive】第7页

Oracle归档日志清理

进程是哪个用户运行ps-ef|greppmon2、切换用户su-xxx3、确认是Oracle归档目录满了df-Thdu-shxxx4、rman清理归档日志rmantarget/crosscheckarchivelogall

の正在缓存99%·2025-05-13 23:54

mssql 的sp_help好难看

//mysql的desc/转载于:https://www.cnblogs.com/LCX/archive/2009/12/22/1629542.html

diedangxiang4092·2025-05-13 19:26

数据收集之DataX服务器端关于动态传参的示例

在这里简单介绍下原理：在Linux服务器环境下，实现DataX从MySQL到Hive的动态传参+每日自动更新，核心是通过Shell脚本动态生成DataX任

佩可official·2025-05-13 16:36

【小贪】程序员必备：Shell、Git、Vim常用命令

主要技术包括：✅数据库常用：MySQL,HiveSQL,SparkSQL✅大数据处理常用：Pyspark,Pandas⚪图像处理常用：OpenCV,matplotlib⚪机器学习常用：SciPy,Sklearn

贪钱算法还我头发·2025-05-13 15:26

Spark基础介绍

UnifiedEngineforlarge-scaledataanalytics2）文档查看地址：Redirecting…3）下载地址：Downloads|ApacheSparkhttps://archive.apache.org

小白的白是白痴的白·2025-05-13 12:35

ARM终端 KylinOS 容器镜像导入排障

dockerload-ijdk8.arm.tar.gz显示如下错误：bd245ec49ee5:Loadinglayer[================================>]34.54MB/53.68MBarchive

meslog·2025-05-13 10:55

Hive大表join大表如何调优

目录一、调优思路1、SQL优化1.1大小表join1.2大大表join2、insertinto替换unionall3、排序orderby换位sortby4、并行执行5、数据倾斜优化6、小文件优化二、实战2.1场景2.2限制所需的字段，间接mapjoin2.2解决异常值倾斜，如NULL加随机数打散2.3扩容解决数据倾斜2.3.1客户表扩大N倍2.3.2部分倾斜key扩容，大卖家扩容2.3.3推荐：分

大数据知识搬运工·2025-05-13 07:36

浅谈层次化的AI架构

原文地址：http://www.aisharing.com/archives/86/comment-page-1记得在以前的一篇文章中谈到了一种类似于双缓冲的AI结构，最近在整理一些东西的时候，发现这样的

weixin_34292959·2025-05-13 04:18

五、Hive表类型、分区及数据加载

在Hive中高效构建、管理和查询数据仓库，核心在于精准运用表类型（内部/外部）与分区策略（静态/动态/多重）。这不仅决定数据的生命周期归属，更是优化海量数据查询性能的关键手段。

IvanCodes·2025-05-13 04:13

Hive常用字符串函数

1、字符串函数计算函数：Length语法：length(stringA)返回值：int说明：返回字符串A的长度例子：hive>selectlength('iteblog')fromiteblog;72、

逆水行舟如何·2025-05-12 17:39

IIS URL静态化伪静态组件ISAPI_Rewrite安装配置伪静态不生效解决办法避坑版

1步.下载IIS伪静态组件和ISAPI_Rewrite3安装文件第2步.安装IIS伪静态组件第3步.配置httpd.confISAPI_Rewrite3下载:http://v.s3.sh.cn/archives

资讯第一线·2025-05-12 17:33

深入探究大数据领域 Hive 的数据存储机制

深入探究大数据领域Hive的数据存储机制关键词：Hive数据存储、HDFS集成、分区表、分桶表、存储格式、数据组织、性能优化摘要：本文深入剖析ApacheHive的数据存储机制，从底层架构到上层逻辑组织全面解析

大数据洞察·2025-05-12 10:44

hive表级权限控制_数据库权限管理：表、行、列级别的权限控制

权限规则1.在配有主从集群时建议在主节点上做权限相关操作2.只有管理员和超级管理员才有将数据导入至表中的权限3.管理员用户赋予的是以整表为单位的权限，所有能赋予的权限为create/select/truncate/delete/drop4.管理员建表需要超管授权后才能创建，即使这张表不存在，直接创建也是没有权限的；管理员只具备create权限时，创建表后默认具备select权限，showtable

weixin_39649405·2025-05-12 09:41

SQL Standard Based Hive Authorization（基于SQL标准的Hive授权）

Hive0.13之前的权限管理Hive默认的权限不是为了防止恶意用户访问隐私数据。它仅能防止用户不经意的错误操作。它本身是不完整的，包括执行grant语句之内的很多操作，没有授权检查。

houzhizhen·2025-05-12 09:39

hadoop+hive+spark+zookeeper+hbase大数据环境搭建

master172.16.34.101CentOSLinuxrelease7.3.1611slave01172.16.34.102CentOSLinuxrelease7.3.1611slave03172.16.34.103CentOSLinuxrelease7.3.16112.软件版本软件名称版本hadoop2.7.7hive1.2.2spark2.3.4zook

fengwuxichen·2025-05-12 09:08

使用FastAPI和Apache Flink构建跨环境数据管道

系统概述本文介绍如何使用FastAPI微服务、ApacheFlink和AWSElastiCacheRedis构建一个可扩展的数据管道，实现本地ApacheHive数据仓库与AWS云上Redis之间的数据交互

weixin_30777913·2025-05-12 08:34

Hive 使用 set hive.conf.validation=false 跳过参数检查

Hive默认不允许设置HiveConf.ConfVars没有定义的参数，如sethive.stat.join.enable=false;Queryreturnednon-zerocode:1,cause

houzhizhen·2025-05-12 06:52

在windows笔记本电脑部署GLM4大模型

下载地址：Indexof/anaconda/archive/|清华大学开源软件镜像站|TsinghuaOpenSourceMirror在网页上找到Anaconda3-2024.02-1-Windows

weixin_39945822·2025-05-11 20:18

Linux服务器部署MySQL数据库（超详细~）

Linux服务器部署MySQL数据库网址：https://downloads.mysql.com/archives/get/p/23/file/mysql-5.7....上传到服务器定义好安装的目录和数据存储的目录

·2025-05-11 19:10

hadoop和hive的客户端安装与配置

1文件列表：hadoop_client.tar.gz（hadoop和hive的client环境）hadoop_java.tar.gz(java的环境)hadoop_python.tar.gz（python

yccn214·2025-05-11 17:57

Hive优化(2)——join优化

一、join优化在Hive中，优化JOIN操作是提高查询性能的关键之一。

麦当当MDD·2025-05-11 11:48

Hive JOIN 优化策略详解

在Hive中处理大规模数据JOIN操作时，针对不同场景可采用多种优化技术。

静听山水·2025-05-11 10:42

hive分桶表join_Hive:JOIN及JOIN优化 2015.10.25

1.Join的基本原理大家都知道，Hive会将所有的SQL查询转化为Map/Reduce作业运行于Hadoop集群之上。

贺叔·2025-05-11 09:07

Spark-SQL

HiveandSparkSQL，SparkSQL可以简化RDD的开发，提高开发效率，且执行效率非常快，所以实际工作中，基本上采用的就是SparkSQL。

海金沙33·2025-05-11 01:14

azkaban的写法

先创建一个.job文件和一个.sql文件sql语法写到一个test名字的文件里，之后job写法如下：type=commandcommand=hive-f'test6.sql'一定要严格写，不管是字母还是空格

轩昂7K·2025-05-10 23:27

《云计算》第三版总结

云计算》第三版总结云计算体系结构云计算成本优势开源云计算架构Hadoop2.0Hadoop体系架构Hadoop访问接口Hadoop编程接口Hadoop大家族分布式组件概述ZooKeeperHbasePigHiveOozieFlumeMahout

冰菓Neko·2025-05-10 10:34

mingw安装linux环境变量,Ubuntu14.04下MinGW编译环境搭建

编译环境搭建本人系统：Ubuntu14.0432bit①apt-get自动安装sudogedit/etc/apt/sources.list//在sources.list末尾添加，保存debhttp://us.archive.ubuntu.com

weixin_39790686·2025-05-10 10:33

vtk实战(十二)——读取.obj文件

具体内容可参照：http://www.cppblog.com/lovedday/archive/2008/06/13/53153.html本例主要用vtkOBJReader（）类读取Wavefront.obj

挥剑段天涯·2025-05-09 12:05

Flink + Kafka 构建实时指标体系的实战方法论

在数字化运营趋势下，分钟级指标反馈能力变得尤为重要：✅营销投放实时监控CTR/CVR✅业务增长实时观测UV/PV✅运维系统实时计算告警数/成功率传统离线计算（Hive/SparkBatch）难以满足这种实时性需求

晴天彩虹雨·2025-05-09 02:01

java jar命令介绍

"jar"是JavaArchive的缩写，是Java程序打包工具。"jar"命令可以创建、查看、提取JavaARchive(JAR)文件。

笨爪·2025-05-09 01:53

Java中的jar命令

1、jar包的初认识：点击打开链接2、jar命令：即归档命令（javaArchiveFile）jar文件类似zip文件的压缩格式。是java的一种文档格式。

Crazy_For_Net·2025-05-09 00:21

如何对比某个表在Hive和Doris磁盘空间大小和Doris表如何优化存储空间保姆级教程(亲试可用）

目录一、如何查看某个表在Hive占用的磁盘空间大小1.使用DESCRIBEFORMATTED查询2.使用HDFS命令查看目录大小3.使用hadoopfs-du命令二、如何查看某个表在Doris占用的磁盘空间大小

大模型大数据攻城狮·2025-05-08 12:32

大数据技术全景解析：Spark、Hadoop、Hive与SQL的协作与实战

本文将通过通俗类比+场景化拆解，带你深入理解四大关键技术：Hadoop、Hive、Spark和SQL，揭秘它们如何像“仓储-物流-管理”系统一样协同工作。

V文宝·2025-05-08 12:32

未来 CSS：变量、容器查询与新特性的探索

根据HTTPArchive的WebAlmanac的调查，超过86%的网站已采用至少一项现代CSS特性，这一数字仍在持续攀升。回想我初次接触前端开发时，还在为各种浏览器兼容性问题焦头烂额。

BitCat·2025-05-08 07:35

【QT】windows 平台 QT6.8 安装

qt-online-installer-windows-x64-4.8.1.exeIndexof/qt/archive/online_installers/4.8/mirror这里介绍了如何使用mir

等风来不如迎风去·2025-05-08 04:16

数据分析项目中的关键技术与工具

大数据技术：涵盖Hadoop（HDFS）、Hive、Spark、Fli

王子良.·2025-05-08 03:12

【Hive入门】Hive安全管理与权限控制：用户认证与权限管理深度解析

目录引言1Hive安全管理体系概述2Hive用户认证机制2.1Kerberos集成认证2.1.1Kerberos基本原理2.1.2Hive集成Kerberos配置步骤2.1.3Kerberos认证常见问题排查

IT成长日记·2025-05-08 01:54

macOS 上是否有类似 WinRAR 的压缩软件？

不过，macOS平台上有许多功能相似甚至更强大的替代工具，以下是一些推荐：1.TheUnarchiver（免费，基础解压工具）特点：macOS上最轻量、免费的解压工具，支持RAR、ZIP、7z、Tar、

fukai7722·2025-05-07 04:19

python邮件发送脚本

转载自cnblogs博文http://www.cnblogs.com/phinecos/archive/2010/09/28/1837578.html#!

刘秋杉·2025-05-07 02:32

安装深度环境anaconda+cuda+cudnn+pycharm＋qt＋MVS

下载cuda链接：https://developer.nvidia.com/cuda-toolkit-archive下载cudnn安装包,链接：https://developer.nvidia.com/

PinoLio·2025-05-06 16:36

Hive安装与配置教程

Hive安装与配置教程1.环境准备1.1系统要求Java8或更高版本Hadoop2.x或更高版本MySQL或其他关系型数据库（用于存储元数据）1.2安装依赖#安装Javasudoaptupdatesudoaptinstallopenjdk

爱编程的王小美·2025-05-06 14:55

如何将hive与mysql连接_hive与mysql的连接（本地安装模式）

由于hive的内嵌安装方式是将元数据存储在derby中，每次打开时候都会在其当前工作目录下创建一个derby文件和一个m**文件很不方便，而且这种方式是单用户连接模式，所以我们用hive的本地安装模式，

weixin_39949673·2025-05-06 14:54

本地连接hive

第一步:我们要将相对应集群的三个文件拷贝到本地来,就这三个位置在/etc/hadoop/conf和/etc/hive/conf下第二步:要注意core-site.xml中的fs.defaulfFs这个配置项是默认文件系统的名称

向往太空的鱼·2025-05-06 14:24

Hadoop总结

目录大数据概述Hadoop大数据开发平台资源管理YARN分布式文件系统HDFS非关系型数据库NOSQL分布式数据库HBASE批处理和MapReduce数据仓库查询分析和Hive基于内存计算的Spark流计算和

Ajekseg·2025-05-06 14:52

本地MySQL连接hive

找到bind-address行，将其修改为：bind-address=0.0.0.02、在本地MySQL中创建用户并授权（注意这里要使用虚拟机的IP地址）：#在本地MySQL中执行CREATEUSER'hive

爱编程的王小美·2025-05-06 14:21

h3c服务器管理口配置文件,05-配置文件管理命令

1配置文件管理命令【命令】archiveconfiguration【视图】用户视图【缺省级别】3：管理级【参数】无【描述】archiveconfiguration命令用来手工备份当前配置。

彭亡·2025-05-06 12:08

postgresql之查看pg_wal目录下xlog文件总大小

/archive_status193M./如果通过客户端怎么做呢？答案：pg_ls_waldir()函数。pg_ls_waldir()是pg10.0引入的函数，可以输出数据库WAL目录的所有文件。

PostgreSQL运维技术·2025-05-06 05:50

Linux 常用命令 - cp 【复制文件和目录】

使用方式cp[选项]...源文件目标文件cp[选项]...源文件...目标目录常用选项-a,--archive：实现归档功能，效果等同于-dR。

WKJay_·2025-05-06 05:49

【数仓重构】基于StarRocks的敏捷数仓

1.2实现这里注意date_trunc指定dt，类似Hive中的分区，如果不指定容易数据不均衡以及查询效率折扣。CREATETABLEbigdat

Sonnie0000001（马库斯）·2025-05-05 20:25

基于Hive + Spark离线数仓大数据实战项目（视频+课件+代码+资料+笔记）

AI方案2025·2025-05-05 16:32

推荐频道

【Hive】