hiveconf

org/apache/hadoop/hive/shims/ShimLoader

Exceptioninthread"main"java.lang.NoClassDefFoundError:org/apache/hadoop/hive/shims/ShimLoaderatorg.apache.hadoop.hive.conf.HiveConf
木生火18624·2024-01-31 08:38

一文说全HiveConf类（Hive3.1.2版本）

一文说全HiveConf类（Hive3.1.2版本）作者：Eeeddieee工作中大部分时间都用到了Hive，虽然对Hive的架构、运行原理、调优方式有一定了解，但是很多都是在前人总结的基础上进行学习，
Eeeddieee·2024-01-20 13:17

控制map个数与性能调优参数

1.Hive有哪些参数，如何查看这些参数Hive自带的配置属性列表封装在HiveConfJava类中，因此请参阅该HiveConf.java文件以获取Hi
xuanxing123·2023-12-24 13:13

Hive参数操作和运行方式

Hive参数操作和运行方式1、Hive参数操作1、hive参数介绍hive当中的参数、变量都是以命名空间开头的，详情如下表所示：命名空间读写权限含义hiveconf可读写hive-site.xml当中的各配置变量例
新鲜氧气·2023-12-21 14:58

Hive 定义变量 变量赋值 引用变量

Hive定义变量变量赋值引用变量变量hive中变量和属性命名空间命名空间权限描述hivevar读写用户自定义变量hiveconf读写hive相关配置属性system读写java定义额配置属性env只读shell
李昊哲小课·2023-11-20 21:11

Hive 基于hadoop来构建数仓的工具(三) 概念及原理介绍

参数配置三种方式：配置文件（全局有效默认hive-default.xml自定义配置会覆盖默认配置）命令行参数（对hive启动实例有效bin/hive--hiveconf）参数声明（对hive连接的当前session
章云邰·2023-11-20 19:55

sqoop1.4.7报ERROR hive.HiveConfig: Could not load org.apache.hadoop.hive.conf.HiveConf.

sqoop从mysql向hive中导入数据报错如下：20/07/1804:13:38ERRORhive.HiveConfig:Couldnotloadorg.apache.hadoop.hive.conf.HiveConf.MakesureHIVE_CONF_DIRissetcorrectly
森屿旅人996·2023-11-05 04:00

sqoop1.4.7导mysql数据到hive报错:ERROR hive.HiveConfig: Could not load org.apache.hadoop.hive.conf.HiveConf

环境:sqoop版本:1.4.7.hadoop2.7.6.hive2.3.1.导入参数:bin/sqoopimport--connectjdbc:mysql://192.168.0.55:3306/test?tinyInt1isBit=false--usernameroot--password'123456'--tabletest_table--fields-terminated-by'\001'
a904364908·2023-11-05 04:24

Hive获取指定日期的星期一和星期天

selectDATE_SUB('${hiveconf:belong_date}',PMOD(DATEDIFF('${hiveconf:belong_date}','2020-05-04'),7));--
RessCris·2023-11-01 03:27

基于UGI鉴权的Hive Metastore Client 并发访问方式

packageorg.jeff.r.tools;importorg.apache.commons.lang.StringUtils;importorg.apache.hadoop.hive.conf.HiveConf
井地儿·2023-10-26 02:03

Hive用户中文使用手册系列（二）

使用hive命令行中的set命令或-hiveconf参数设置的任何c
日复一日伐树的熊哥·2023-10-19 15:23

【大数据】Hive查询（select 1）源代码分析详解

查询结果总共花费了0.5毫秒日志2021-02-03T10:50:05,288INFO[HiveServer2-Handler-Pool:Thread-83393]:conf.HiveConf(HiveConf.java
笑起来贼好看·2023-10-15 12:05

大数据Hive参数配置

修改配置1.2BeelineCLI2ConfigurationProperties配置属性2.1配置属性概述2.2修改配置属性方式2.2.1方式1：hive-site.xml配置文件2.2.2方式2：hiveconf
赵广陆·2023-10-11 12:25

已解决：sqoop mysql导入hive报错

背景：使用sqoop工具将MySQL表导入到hive时报错如下报错内容：ERRORhive.HiveConfig:Couldnotloadorg.apache.hadoop.hive.conf.HiveConf.MakesureHIVE_CONF_DIRissetcorrectly
waylyw·2023-09-21 10:12

DataGrip连接hive

Struct:TOpenSessionReq(client_protocol:null,configuration:{set:hiveconf:hive.server2.thrift.resultset.d
ZLin.Tang·2023-08-29 07:53

Hive基础操作

都是让用户在命令行自定义用户自定义变量以便在hive脚本中使用在CLI命令中可以使用SET命令显示或者修改变量值$hivehive>setenv:HOME;hive>set;#set命令会打印出命名空间hivevar，hiveconf
Yuri7·2023-07-25 12:19

Hive：开发中使用变量的两种方法

目录方法1：shell中设置变量，hive-e中直接使用方法2：使用-hiveconf定义，在SQL文件中使用在使用hive开发数据分析代码时，经常会遇到需要改变运行参数的情况，比如select语句中对日期字段值的设定
花和尚也有春天·2023-07-18 08:48

HiveSQL脚本传参&使用

一、基础语法运行hive命令时，如果想动态传入参数，可以使用如下2种方式：参数格式说明--hivevar传参数，专门提供给用户自定义变量--hiveconf①传参数；②覆盖hive-site.xml中配置的
江畔独步·2023-07-18 08:44

Hive参数和动态分区

调优时，相应的参数配置修改配置文件原始数据，动态分区设置两个参数，支持动态分区、非严格模式分区：把数据文件导入到不同目录里去Hive参数、变量命名空间读写权限含义hiveconf可读写hive-site.xml
geekAppke·2023-03-28 18:54

hive参数传递，hive常用函数

目录1、hive参数传递1、hiveconf使用说明2、hivevar使用说明2、Hive的常用函数1、系统内置函数2、数值计算3、日期函数3、条件函数（重点）4、字符串函数5、集合统计函数7、复杂类型长度统计函数
捡黄金的少年·2022-07-07 10:24

hive 变量和参数

hiveconf：Hive相关的配置属性。可读可写。system：Java定义的配置属性。可读可写。env：Shell环境定义的环境变量。只可读。
worthy·2020-10-09 12:42

利用开窗函数+spark.sql.shuffle.partitions避免小文件合并

遇到一个常见sql使用场景insertoverwritetablexxx(date='${hiveconf:date}')select*fromtable1unionallselect*fromtable2
L13763338360·2020-09-17 05:32

Hive的执行生命周期

1.CliDriver进行交互模式1.入口：/bin/hive2.调用CliDriver类进行初始化过程3.处理-e，-f，-h等信息，如果是-h，打印提示信息，并退出4.读取hive的配置文件，设置HiveConf5
SunmonDong·2020-09-16 16:35

Hive MetaStore 源码分析

可以看到入口类org.apache.hadoop.hive.metastore.HiveMetaStore2.入口类(1)cli.parse解析参数(2)LogUtils.initHiveLog4j设置日志,创建hiveConf
wangwenting2016·2020-08-14 20:51

hive metastore java api使用

使用importorg.apache.hadoop.hive.conf.HiveConf;importorg.apache.hadoop.hive.metastore.HiveMet
苍老流年·2020-08-14 16:23

hive：函数：size(数组字段)获取array长度和 length(字段)获取字符串长度

，或split()某个字段得到数组获取数组长度：size(数组字段)参考sql：setedate=2019-07-21SETcompany=***;SETrecomrecords=ods.ods_${hiveconf
花和尚也有春天·2020-08-12 00:25

hive 参数设置

-hiveconf:用于定义hive执行时的属性，即配置参数，可覆盖hive-site.xml中配置的hive全局变量。egg:hive-e查询：hive-S-e"usetv;
奇子君·2020-08-08 18:31

flink 1.11 application模式提交hive任务遇到的坑

文章目录背景方案原因探索添加带有HiveConf的构造方法背景flink在1.11版本提供了一个新的提交任务模式–Applicaton模式，具体的使用可以参考[详解flink1.11中的新部署模式-Application
大数据技术与应用实战·2020-08-05 04:09

Sqoop 把表导入 hive 出现的问题解决汇总

以下解决方案都是亲测可用的,但不保证相同但处理方案错误1.Couldnotloadorg.apache.hadoop.hive.conf.HiveConf.MakesureHIVE_CONF_DIRissetcorrectly
长弓射大狗·2020-08-04 09:21

Hive中jline.jar与Hadoop中的jline.jar版本不同，启动hive出错

错误如下：[root@wanghyconf]#hive15/05/3010:36:52WARNconf.HiveConf:HiveConfofnamehive.metastore.localdoesnotexistLogginginitializedusingconfigurationinfile
天佑凡人·2020-08-04 03:10

Hive 之 -e -f -i

u010220089/article/details/492317051、bin/hive-help[html]viewplaincopybin/hive-help15/10/1806:34:46WARNconf.HiveConf
hankl1990·2020-08-03 11:08

Hive启动metastore的出错org.apache.thrift.transport.TTransportException

servicemetastore&[1]3530[[email protected]]#StartingHiveMetastoreServer15/02/0715:21:38WARNconf.HiveConf
LittleFatz·2020-08-01 13:57

Hive

时候指定数据库，默认进入default数据库-e命令行执行一段SQL语句-ffilename文件中保存HQL语句，执行其中的语句-H,–help显示帮助信息-h连接远程HiveServer，后续介绍–hiveconf
kimibob·2020-07-30 12:23

数仓--Hive-面试之向Hive中传入变量的方式

向程序中传递变量的方式暴力替换字符串替换正则替换模板引擎系统环境变量shell环境变量：${env:varname}system系统变量：${system:varname}hive命令参数hivevar方式：${hivevar:varname}hiveconf
李小李的路·2020-07-29 16:41

HIVE：hivevar、hiveconf与define参数的差异与用法

HIVECLI中有三种定义属性或变量的参数，分别是：文章目录1.hiveconf2.hivevar3.define1.hiveconfhiveconf用于定义HIVE执行上下文的属性(配置参数)，可覆盖覆盖
蚁方阵·2020-07-29 01:11

hive的union all语句的顺序问题

有这么一个查询：select-count(*)from(selectdistinct${hiveconf:colname}from${hiveconf:tablename}where${hiveconf
老胡当道卧·2020-07-14 22:54

kylin: NoClassDefFoundError: org/apache/hadoop/hive/conf/HiveConf

1.背景kylinloadhivedata报错后台日志2019-05-0811:40:34,046ERROR[http-bio-7070-exec-3]controller.TableController:197:org/apache/hadoop/hive/conf/HiveConfjava.lang.NoClassDefFoundError:org/apache/hadoop/hive/con
九师兄·2020-07-14 17:40

hive启动报错：Caused by: java.lang.RuntimeException: The root scratch dir: /tmp/hive on HDFS should be

/hive17/02/1723:27:57WARNconf.HiveConf:HiveConfofnamehive.metastore.localdoesnotexistLogginginitializedusingconfigurationinfile
johnmay--Blog·2020-07-09 23:10

hive 基础笔记

字符集乱码(将LC_ALL=c修改):localeunsetLC_ALL参数内部调用用hiveconf，外部调用用hivevar,hivevar内部调用会报错；!!
小徐xfg·2020-07-09 01:32

hive 安装警告 WARN conf.HiveConf: HiveConf of name hive.metastore.local does not exist

解决方法：在0.100.11或者之后的HIVE版本hive.metastore.local属性不再使用。在配置文件里面：hive.metastore.localfalsecontrolswhethertoconnecttoremovemetastoreserveroropenanewmetastoreserverinHiveClientJVM删除掉，再次登录警告就消失了hive-site.xml中
小嘎子闯天涯·2020-07-06 12:54

hive报错 java.lang.NoClassDefFoundError: org/apache/hadoop/hive/conf/HiveConf

启动Hive时报错如下：wamdm@WAMDM5:~/hive/build/dist/bin$./hiveExceptioninthread"main"java.lang.NoClassDefFoundError:org/apache/hadoop/hive/conf/HiveConfatjava.lang.Class.forName0(NativeMethod)atjava.lang.Class
Scojen·2020-07-06 08:30

ERROR hive.HiveConfig: Could not load org.apache.hadoop.hive.conf.HiveConf. Make sure HIVE_CONF_DIR

错误内容：19/03/1816:23:13ERRORhive.HiveConfig:Couldnotloadorg.apache.hadoop.hive.conf.HiveConf.MakesureHIVE_CONF_DIRissetcorrectly
Adder&&·2020-07-06 04:52

ERROR hive.HiveConfig: Could not load org.apache.hadoop.hive.conf.HiveConf.

Sqoop导入mysql表中的数据到hive，出现如下错误：ERRORhive.HiveConfig:Couldnotloadorg.apache.hadoop.hive.conf.HiveConf.MakesureHIVE_CONF_DIRissetcorrectly
weixin_34348111·2020-07-06 01:21

[Hadoop] Sqoop 从MySQL导入数据到hive表报错“Could not load org.apache.hadoop.hive.conf.HiveConf”解决

Sqoop从MySQL导入数据到Hive表报错：ERRORhive.HiveConfig:Couldnotloadorg.apache.hadoop.hive.conf.HiveConf.MakesureHIVE_CONF_DIRissetcorrectly
cindysz110·2020-07-05 20:23

ERROR hive.HiveConfig: Could not load org.apache.hadoop.hive.conf.HiveConf. Make sure HIVE_CONF_DIR

LoadinguploadeddataintoHive19/07/1909:27:54ERRORhive.HiveConfig:Couldnotloadorg.apache.hadoop.hive.conf.HiveConf.MakesureHIVE_CONissetco
qq_44982182·2020-07-05 10:53

解决Sqoop将mysql表数据导入到Hive时报错HiveConf和derby driver问题

执行sqoopimport语句将mysql表数据导入到Hive表$sqoopimport--connectjdbc:mysql://localhost:3306/ua1--usernameroot--password123--tableEMP--fields-terminated-by'\t'--num-mappers1--hive-databasedefault--hive-import--hi
Hadoop_Liang·2020-07-05 09:16

sqoop报错： Could not load org.apache.hadoop.hive.conf.HiveConf. Make sure HIVE_CONF_DIR is set 解决方法

今天在用sqoop将mysql数据导入hive时报错：hive.HiveConfig:Couldnotloadorg.apache.hadoop.hive.conf.HiveConf.MakesureHIVE_CONF_DIRissetcorrectly
iQian²·2020-07-05 03:38

sqoop：【error】mysql导出数据到hive报错HiveConfig:无法加载org.apache.hadoop.hive.conf.HiveConf。确保HIVE_CONF_DIR设置正确

19/06/0510:03:38ERRORhive.HiveConfig:Couldnotloadorg.apache.hadoop.hive.conf.HiveConf.MakesureHIVE_CONF_DIRissetcorrectly
drl_blogs·2020-07-04 15:34

kylin_异常_02_java.lang.NoClassDefFoundError: org/apache/hadoop/hive/conf/HiveConf 解决办法

一、异常现象在kylin的web管理界面，设置hive数据源时，报错：查找kylin的日志时发现，弹出提示框的原因是因为出现错误：ERROR[http-bio-7070-exec-10]controller.TableController:189:org/apache/hadoop/hive/conf/HiveConfjava.lang.NoClassDefFoundError:org/apach
didi9310·2020-07-04 14:39

Sqoop RDBMS到Hive报错：Could not load org.apache.hadoop.hive.conf.HiveConf的解决方法

Sqoop从RDBMS导入数据到Hive表报错“Couldnotloadorg.apache.hadoop.hive.conf.HiveConf”解决方法：1、mysql导入到hive[donghao@
dh12313012·2020-07-04 14:33
上一页 1 2 3 4 下一页
按字母分类： ABCDEFGHIJKLMNOPQRSTUVWXYZ其他