hive动态分区第29页

【spark】基于Spark的电影推荐系统+[详细代码及配置]

BIG*BOSS·2024-01-10 06:25

大数据本地环境搭建-Zookeeper/Hadoop/Hive搭建

1.Zookeeper环境安装链接：https://pan.baidu.com/s/1wzbCiDxP7H5G_llwjSS3Rw?pwd=wgal提取码：wgal1.1上传tar包zookeeper-3.4.6.tar注意：上传文件位置为/export/server目录1.2解压缩cd/export/servertarxvf/export/server/zookeeper-3.4.6.tar.g

OnePandas·2024-01-10 06:01

Hive之函数解析

1.1查看系统自带的函数--查看系统自带函数showfunctions;--查看自带函数的用法desc/describefunction函数名;--查看自带函数的具体用法desc/describefunctionextended函数;1.2窗口函数1.2.1相关函数说明函数说明over()指定分析函数工作的数据窗口大小,这个数据窗口大小可能会随着行的变而变化。currentrow当前行nprece

OnePandas·2024-01-10 06:30

Hive之set参数大全-5

I限制外部表数据插入sethive.insert.into.external.tables=true;在ApacheHive中，通过INSERTINTO语句向外部表（ExternalTable）插入数据时

OnePandas·2024-01-10 06:00

Oozie WorkFlow中Shell Action使用案例

cp-rexamples/apps/shelloozie-apps/mvshellshell-hive-selecttouchstudent-select.sh#!

明明德撩码·2024-01-10 05:56

ubuntu20.04安装cuda11.7和显卡驱动

blacklistnouveausudoupdate-initramfs-usudoreboot输入命令，如果没有任何输出，证明禁用成功lsmod|grepnouveau2、安装cuda11.7CUDAToolkitArchive

莫克_Cheney·2024-01-10 04:25

大数据OLAP引擎发展原因及特性分析

在大数据高速发展时期，多个技术团队基于OLAP的应用需求，开发出多种OLAP技术，如Hive、SparkSql、FlinkSql、Impala、Kylin、ClickHouse、Doris等，或者在实现其他应用需求的时候

i7杨·2024-01-10 01:31

Hive的复杂数据类型

复杂数据类型：array、map、struct1.数组array，里边不能装不同类型的数据[hadoop@hadoop001data]$morehive_array.txtzhangsanbeijing

白面葫芦娃92·2024-01-10 00:35

2024-01-08 android studio CMakeLists.txt 把多个静态链接库打包成动态链接库so的方法

为了避免这种情况，您可以使用-Wl,--whole-archive和-Wl,--no-whole-archive这两个链接器标志包围您的静态库，这会告诉链接器把静

Donald Linux·2024-01-09 21:23

Docker基础镜像

镜像基础包安装1.Ubuntu/Debian#修改为阿里源（ubuntu）sudocp/etc/apt/sources.list/etc/apt/sources.list-baksudosed-is/cn.archive.ubuntu.com

boo_·2024-01-09 20:02

Flume的安装

下载地址：http://archive.apache.org/dist/flume/1.解压apache-flume-1.7.0-bin.tar.gz到/opt/module/目录下[honey@hadoop102software

静宸丶水默含声·2024-01-09 19:32

presto的hive connector连接以及JDBC访问(包含kerberos方式)

参考资料:https://prestodb.io/docs/current/connector/hive.html前言presto支持hiveconnector，并支持连接多个hiveconnector

早点起床晒太阳·2024-01-09 19:45

Oracle databas RMAN 备份脚本

RMAN删除归档日志进入rman管理操作rmantarget/查看所有的归档日志文件crosscheckarchivelogall;DELETEARCHIVELOGALLCOMPLETEDBEFORE‘

为什么不问问神奇的海螺呢丶·2024-01-09 17:19

解决：Unity : Error while downloading Asset Bundle: Couldn‘t move cache data 问题

问题日志如下：2-1815:04:10.9242869630223EUnity:Unabletoopenarchivefileforwr

魂玉天成·2024-01-09 15:06

hive函数及性能优化

--函数--查询当前系统提供的所有函数showfunctions;--模糊查询函数showfunctionsLIKE'x*y*';--查询指定函数的具体用法DESCFUNCTION函数名称;--查询指定函数的具体用法且带示例DESCFUNCTIONEXTENDED函数名称;--字符（串）函数【注，不分单双引号】--返回字符个数SELECTlength('abc'),length('你我他');se

xinxinyydss·2024-01-09 15:00

6.1.CentOS7下安装Sqoop安装与使用

python编程快速上手（持续更新中…）推荐系统基础一、Sqoop介绍二、Sqoop原理三、Sqoop安装事前准备安装包解压安装四、Sqoop使用1、MySQL->HDFS2、创建job3、导入数据到Hive

IT瘾君·2024-01-09 15:29

大数据学习6-Sqoop安装与使用

sqoop搭建还是挺简单的,前提是hadoop与hive搭建完成上传解压首先下载sqoop,sqoop的版本是1.4.7,sqoop-1.4.7.bin__hadoop-2.6.0.tar.gz,提取码

asXt·2024-01-09 15:57

基于spark的Hive2Pg数据同步组件

一、背景Hive中的数据需要同步到pg供在线使用，通常sqoop具有数据同步的功能，但是sqoop具有一定的问题，比如对数据的切分碰到数据字段存在异常的情况下，数据字段的空值率高、数据字段重复太多，影响

zcc_0015·2024-01-09 15:53

Hive基础知识（三）：Linux系统下的MySQL安装

1）检查当前系统是否安装过MySQL[zzdq@hadoop100hive]$rpm-qa|grepmariadbmariadb-libs-5.5.68-1.el7.x86_64#如果存在，就用下面这条命令卸载

依晴无旧·2024-01-09 13:26

Hive基础知识（二）：Hive 安装部署教程

1.安装Hive1）把apache-hive-3.1.2-bin.tar.gz上传到linux的/opt/software目录下2）解压apache-hive-3.1.2-bin.tar.gz到/opt

依晴无旧·2024-01-09 13:25

Hive基础知识（一）：Hive入门与Hive架构原理

1.什么是Hive1）hive简介Hive：由Facebook开源用于解决海量、结构化日志的数据统计工具。

依晴无旧·2024-01-09 13:25

Hive基础知识(个人总结)

声明:1.本文为我的个人复习总结,并非那种从零基础开始普及知识内容详细全面,言辞官方的文章2.由于是个人总结,所以用最精简的话语来写文章3.若有错误不当之处,请指出一.基础Hive的特点:Hive的执行延迟比较高

hellosrc | forward·2024-01-09 13:54

hive基础知识大全

一、Hive基本概念1.1hive是什么hive是基于hadoop的一个数仓分析工具，hive可以将hdfs上存储的结构化的数据，映射成一张表，然后让用户写HQL(类SQL)来分析数据telupdown138383843813451567138383843953451567138383844012411657713838384413453157571383838434353551567567

不爱吃鱼的馋猫·2024-01-09 13:23

Hive基础知识笔记（含MySQL metastore伪分布式安装配置流程）

该笔记涉及代码：https://github.com/hackeryang/Hadoop-Exercises/tree/master/src/main/java/Hive一、介绍1.Hive是一个构建在

书忆江南·2024-01-09 13:52

Hive基础知识

1.Hive的基本概念1.1hive的简介什么是hive?1）Hive是基于Hadoop的一个数据仓库工具，将结构化的数据文件映射为一张数据库的数据表，并且提供类SQL查询功能。

巷子里的猫X·2024-01-09 13:52

大数据开发：Hive基础知识点介绍

Hadoop生态下的各个组件，Hive的出现是为了解决海量日志数据分析而诞生，最初出自Facebook，后来归到了Apache旗下进行开源，本质上来说，Hive是一个帮助提升数据处理的工具。

加米谷大数据张老师·2024-01-09 13:52

Hive 基础知识

1.Hive和HBase的区别HBase是一个用来处理HDFS上文件的NoSQL数据库，建立于HDFS之上。

辰阳星宇·2024-01-09 13:22

基于hadoop的hive数据仓库基础操作知识整理

第1章Hive基本概念1.1什么是Hivehive简介Hive：由Facebook开源用于解决海量结构化日志的数据统计工具。

大包丫·2024-01-09 13:51

hive在mysql中总是不创建元数据库的解决办法

hive在mysql中总是不创建元数据库的解决办法这两天打算好好捣鼓捣鼓hivesql。遂搞了台centos搭环境，搭环境嘛，当然是怎么简单怎么来，怎么快怎么来。

黄道婆·2024-01-09 13:21

Hadoop的数据仓库Hive的基础知识和安装部署

1、数据仓库和Hive 数据仓库是为了协助分析报告，支持决策，为需要业务智能的企业提供业务流程的改进和指导，从而节省时间和成本，提高质量。

姠惢荇者·2024-01-09 13:21

Hive基础知识（四）：Hive 元数据配置到 MySQL

1.拷贝驱动将MySQL的JDBC驱动拷贝到Hive的lib目录下[zzdq@hadoop100software]$cp/home/atguigu/mysql-connector-java-5.1.37

依晴无旧·2024-01-09 13:50

在企业网中部署SDN

2、用户名/密码：hive/hive。进入桌面以后，“Ctrl+Alt+t”打开命令终端后可以根据自己的环境，去更改为环

huangzwei·2024-01-09 13:16

深度学习常用的下载链接/下载地址（CUDA/cuDNN）

1.CUDA各个版本的下载链接https://developer.nvidia.com/cuda-toolkit-archive2.cuDNN各个版本的下载链接https://developer.nvidia.com

Mobius8086·2024-01-09 12:56

Spark与Hive的集成与互操作

ApacheSpark和ApacheHive是大数据领域中两个非常流行的工具，用于数据处理和分析。Spark提供了强大的分布式计算能力，而Hive是一个用于查询和管理大规模数据的数据仓库工具。

晓之以理的喵~~·2024-01-09 11:30

hive sql的常用日期处理函数总结

1）date_format函数（根据格式整理日期）作用：把一个字符串日期格式化为指定的格式。selectdate_format('2017-01-01','yyyy-MM-ddHH:mm:ss'); --日期字符串必须满足yyyy-MM-dd格式结果：2017-01-0100:00:002）date_add、date_sub函数（加减日期）作用：把一个字符串日期格式加一天、减一天。selec

*Snowgrass*·2024-01-09 09:43

SQL数据分析常用案例总结

Hive计算最大连续登陆天数3个常考的SQL数据分析题（干货建议收藏）sql数据分析案例和学习资料https://mp.weixin.qq.com/mp/appmsgalbum?

fragrans·2024-01-09 09:41

mysql存储引擎

主要的存储引擎包括Myisam、InooDB、BDB、MEMMORY、ARCHIVE、CSV等，其中InooDB和BDB引擎提供事务安全表，其他是非安全的，一般采用InooDB引擎。

程序媛-jjl·2024-01-09 08:56

Hive操作命令上手手册

内容来自于《大数据Hive离线计算开发实战》Hive原理Hive是一个基于Hadoop的数据仓库和分析系统，用于管理和查询大型数据集。

枫叶梨花·2024-01-09 08:50

PySpark-Spark SQL基本介绍

目录SparkSQL基本介绍SparkSQL特点SparkSQL与Hive的异同SparkSQL的数据结构SparkSQL的入门创建SparkSession对象DataFrame详解DataFrame基本介绍

Sisi525693·2024-01-09 07:37

Hive查询之函数(二)

炸裂函数把一个容器的多个数据炸裂出单独展示:explode(容器)炸裂函数配合侧视图使用如下格式:select原表别名.字段名,侧视图名.字段名from原表原表别名lateralviewexplode(要炸开的字段)侧视图名as字段名;--UDTF:一进多出selectexplode(array('binzi','666','888'));selectexplode(map('a',1,'b',2

Sisi525693·2024-01-09 07:36

Hive查询之常用语法

目录语法结构基本查询知识点数据准备练习多表查询数据准备练习hive排序操作示例抽样查询知识点示例正则模糊查询union联合查询CTE表达式内置虚拟列语法结构select[distinct]字段名from

Sisi525693·2024-01-09 07:35

Redis的常用命令

：1、基于内存存储，读写性能高redis官网：Redis中文网Redis下载与安装Redis安装包分为Windows版和Linux版windows版下载地址：Releases·microsoftarchive

suweijie768·2024-01-09 07:27

hive的基本操作

最近新学了hive，想通过写文章的方式对所学知识进行巩固，同时希望可以帮助到大家Hive是基于Hadoop的一个数据仓库工具1.创建数据库（创建方法是和Mysql一样的）createdatabase数据库名字

暴打小赵·2024-01-09 06:49

实验6 熟悉Hive的基本操作

一、实验目的（1）理解Hive作为数据仓库在Hadoop体系结构中的角色。（2）熟练使用常用的HiveQL。

Z.Q.Feng·2024-01-09 06:47

【Hive】Hive基本操作

Hive定义了一套自己的SQL，简称HQL，它与关系型数据库的SQL略有不同，但支持了绝大多数的语句如DDL、DML以及常见的聚合函数、连接查询、条件查询。

New soul~·2024-01-09 06:47

hive基本操作与应用

1、通过hadoop上的hive完成WordCount启动hadoop2、Hdfs上创建文件夹/3、上传文件至hdfs4、启动Hive5、创建原始文档表6、导入文件内容到表docs并查看7、用HQL进行词频统计

weixin_34416649·2024-01-09 06:16

物理机搭建hive

一、修改Hadoop配置修改core-site.xml配置yarn-site.xml分发文件，然后重启集群二、Hive解压安装上传文件添加hive环境便量，source生效启动高可用集群，启动hive三

DIY……·2024-01-09 06:45

Hive基本操作

hive简单认识Hive是建立在HDFS之上的数据仓库，所以Hive的数据全部存储在HDFS上。

X晓·2024-01-09 06:45

Hive 的安装与部署

目录1安装MySql2安装Hive3Hive元数据配置到MySql4启动HiveHive官网1安装MySql为什么需要安装MySql?

夏木夕·2024-01-09 06:41

Hive学习（14）json解析get_json_object()函数

一、语法目的：在一个标准JSON字符串中，按照指定方式抽取指定的字符串。stringget_json_object(string,string)参数说明json：必填。STRING类型。标准的JSON格式对象，格式为{Key:Value,Key:Value,…}。如果遇到英文双引号（"），需要用两个反斜杠（\）进行转义。如果遇到英文单引号（'），需要用一个反斜杠（\）进行转义。path：必填。ST

一个天蝎座白勺程序猿·2024-01-09 06:40

推荐频道

hive动态分区