metastore

hive单用户模式（Derby方式）配置及踩坑实录

文件拷贝一份并将名称改为hive-site.xml第三步：在hive-site.xml文件中加入以下内容：javax.jdo.option.ConnectionURLjdbc:derby:;databaseName=metastore_db
温文尔雅的流氓·2020-09-11 01:34

derby 的配置及jdbc连接

hive-default.xmljavax.jdo.option.ConnectionURLjdbc:derby:;databaseName=metastore_db;create=true表示使用嵌入式的
王诗龄·2020-09-10 23:24

hive数据权限管理

从mysql存储的Hive元数据表数据字典（metastore数据库）看，Hive是基于元数据mysql管理多用户权限，用户权限信息都存储在元数据
jinliwei1990·2020-09-10 22:15

[翻译]Hive的Security配置

hive.files.umask.value0002Thedfs.umaskvalueforthehivecreatedfolders当hive.metastore.authoriz
吐槽达达仔·2020-09-10 22:47

大数据（Hive的MetaStore切换及其Hive的语法细节）

大数据课程第六天MetaStore1.MetaStore在Hive中是非常重要的一个概念,通过MetaStoreHive存储HDFS与表的对应关系,MetaStore通过RDB进行数据的存储.2.MetaStore
di917348·2020-08-25 14:37

For direct MetaStore DB connections, we don't support retries at the client level.)

报错使用hive导入数据到分区中报错如下：FailedwithexceptionMetaException(message:FordirectMetaStoreDBconnections,wedon'tsupportretriesattheclientlevel
脚丫先生·2020-08-25 08:09

For direct MetaStore DB connections, we don't support retries at the client level解决

mysql-connctor版本可能存在问题所以先检测版本是否存在问题,修改mysql数据库对应hive'库编码alterdatabasehivecharactersetlatin1;
Tangerine_bisto·2020-08-25 06:56

hive报错 For direct MetaStore DB connections, we don‘t support retries at the client level

hive2.3.6解决方法:网上解决方法都不行,自己偶然发现,之前虚拟机配置单节点伪集群时,spark和hive中存储的mysql的jar包版本不一致,调成一致版本就好了
健忘主义·2020-08-25 06:46

impala

有三个主要组件，即Impaladaemon（Impalad），ImpalaStatestore和Impala元数据或metastore。
vernwang·2020-08-25 03:22

FAILED: Execution Error, return code 1 from org.apache.hadoop.hive.ql.exec.DDLTask.

ExecutionError,returncode1fromorg.apache.hadoop.hive.ql.exec.DDLTask.MetaException(message:FordirectMetaStoreDBconnections
喝粥也会胖的唐僧·2020-08-24 18:57

HIVE 乱码问题

2.解决方案进入数据库Metastore中执行以下5条SQL语句修改表字段注解和表注解altertableCOLUMNS_V2modif
wtzhm·2020-08-24 18:41

hive -- return code 2 from org.apache.hadoop.hive.ql.exec.mr.MapRedTask

ExecutionError,returncode2fromorg.apache.hadoop.hive.ql.exec.mr.MapRedTask(state=08S01,code=2)查看日志信息：原因，没有开启Metastore
kismetG·2020-08-24 17:56

【HIVE】hive中解决中文乱码问题

问题详情：为了解决Hive中创建表的时候，注解等中文显示的乱码问题需要设置MetaStoreDataBase中某些字段的字符编码为utf-8HiveMetaStore配置说明MySQL授权GRANTALLPRIVILEGESON
sofeld·2020-08-24 16:53

presto 连接hive

修改hive-site.xml增加hive.metastore.localfalsehive.metastore.uristhrift://localhost:9083启动hive--servicehiveserver2&
冰_茶·2020-08-24 16:18

关于使用hive删除表时出现的return code 1 from org.apache.hadoop.hive.ql.exec.DDLTask. MetaException

ExecutionError,returncode1fromorg.apache.hadoop.hive.ql.exec.DDLTask.MetaException(message:FordirectMetaStoreDBconnections
星梦心·2020-08-24 16:47

FAILED: Execution Error, return code 1 from org.apache.hadoop.hive.ql.exec.DDLTask. MetaException(me

ExecutionError,returncode1fromorg.apache.hadoop.hive.ql.exec.DDLTask.MetaException(message:FordirectMetaStoreDBconnections
meiLin_Ya·2020-08-24 15:30

Hive的架构原理

hive的架构Hive接收到用户的指令(HQL)以后，使用自己的Driver和元数据(MetaStore)，将这些HQL解析为MapReduce，提交到Hadoop中执行，执行结束后将结果返回到用户交互接口
lshcc01·2020-08-24 14:54

kudu库下所有表迁移，从a库到b库

{table}4.重启HiveMetastoreServe
cclovezbf·2020-08-24 13:15

Hive连接Mysql---FAILED: Execution Error, return code 1 from org.apache.hadoop.hive.ql.exec.DDLTask.

returncode1fromorg.apache.hadoop.hive.ql.exec.DDLTask.java.lang.RuntimeException:Unabletoinstantiateorg.apache.hadoop.hive.metastore.HiveMetaStoreClient
光于前裕于后·2020-08-24 13:32

黑猴子的家：Sqoop 命令&参数：metastore

1、命令启动sqoop的metastore服务[[email protected]]$bin/sqoopmetastore关闭sqoop的metastore服务[victor@node1sqoop
黑猴子的家·2020-08-24 01:18

Hive数据仓库搭建--远程模式

结点规划IPHostname角色192.168.0.104masterClient192.168.0.102slave1metastore192.168.0.106slave2Mysql搭建步骤1、安装
Erase Me·2020-08-23 18:57

Hive--MetaException(message:Version information not found in metastore.)

报错：MetaException(message:Versioninformationnotfoundinmetastore.)atorg.apache.hadoop.hive.metastore.RetryingHMSHandler
Erase Me·2020-08-23 18:57

Hive--MetaException(message:Required table missing : “`DBS`“ in Catalog ““ Schema ““. DataNucleus re

在开启Hive-metastore的时候报错：MetaException(message:Requiredtablemissing:“DBS”inCatalog“”Schema“”.DataNucleusrequiresthistabletoperformitspersistenceoperations.EitheryourMetaDataisincorrect
Erase Me·2020-08-23 18:57

Hive-WARN: Establishing SSL connection without server‘s identity verification is not recommended. Ac

刚在在开启HiveClint和metastore的时候出现这个警告：TueJul1412:17:28CST2020WARN:EstablishingSSLconnectionwithoutserver'sidentityverificationisnotrecommended.AccordingtoMySQL5.5.45
Erase Me·2020-08-23 18:56

元数据管理|Hive Hooks和Metastore监听器介绍

本文主要介绍HiveHook和MetaStoreListener，使用这些功能可以进行自动的元数据管理。
西贝木土·2020-08-23 11:54

Spark sql 连接hive时，读取不到hive元数据问题

解决方案：hive：修改hive-site.xml:添加这个启动hivemetastore：hive--servicemetastore后台启动：hive--servicemetastore2>&1>>
Wo0_0aa7·2020-08-23 11:13

元数据管理|Hive Hooks和Metastore监听器介绍

本文主要介绍HiveHook和MetaStoreListener，使用这些功能可以进行自动的元数据管理。
西贝木土·2020-08-23 09:19

SparkSQL thrift server环境搭建

一．前提条件启动hdfs集群start-all.sh192.168.4.31:50070启动hive的metastore服务node2上启动：servicemysqldrestartcd/opt/apache-hive
scandly·2020-08-23 03:32

cdh-禁用和重新部署HDFS HA

6.更新hivemetastorenamenodeCloud
lisery_nj·2020-08-22 22:56

hive和spark版本问题

SemanticExceptionorg.apache.hadoop.hive.ql.metadata.HiveException:java.lang.RuntimeException:Unabletoinstantiateorg.apache.hadoop.hive.ql.metadata.SessionHiveMetaStoreClient
没有合适的昵称·2020-08-22 19:53

spark 读取 hdfs 数据分区规则

下文以读取parquet文件/parquethivetable为例：hivemetastore和parquet转化的方式通过spark.sql.hive.convertMetastoreParquet控制
哥伦布112·2020-08-22 18:54

Java代码访问hive数仓

hadoop.proxyuser.hadoop.groups*其中配置中的第二个hadoop是登陆主机的用户名2、启动hive的服务，包括启动元数据服务和hiveserver2服务器，执行如下两条命令hive--servicemetastore
sunqingok·2020-08-22 13:06

Hive metastore mysql

SemanticExceptionorg.apache.hadoop.hive.ql.metadata.HiveException:java.lang.RuntimeException:Unabletoinstantiateorg.apache.hadoop.hive.ql.metadata.SessionHiveMetaStoreClient
shanghome·2020-08-22 13:38

HIVE使用PG(postgreSQL)做元数据启动异常解决

上午10点58:39.292分WARNQuery[main]:Queryforcandidatesoforg.apache.hadoop.hive.metastore.model.MVersionTableandsubclassesresultedinnopossiblecandidatesRequiredtablemissing
Anan9527·2020-08-22 12:47

Hive数据模型的几种表 和 窗口函数 和 排序方法

Hive默认情况下回将这些表的数据存储在由配置项hive.metastore.warehouse.dir所定义的目录（比如/user/hive/warehouse）的子目录下。
CWS_chen·2020-08-22 11:26

Flink 1.10 SQL、HiveCatalog与事件时间整合示例

本文用根据埋点日志计算PV、UV的简单示例来体验Flink1.10的两个重要新特性，一是SQLDDL对事件时间的支持，二是HiveMetastore作为Flink的元数据存储（即HiveCatalog）
LittleMagic·2020-08-21 17:42

SparkSQL thrift server 搭建

去连接是需要对外提供服务的，因此可以配置线程池最大连接数sparksql的源数据还是依赖hive的一．前提条件启动hdfs集群start-all.sh192.168.4.31:50070启动hive的metastore
scandly·2020-08-21 09:33

hive2.*安装部署常见错误总结(连载)

java.lang.RuntimeExceptionExceptioninthread"main"java.lang.RuntimeException:java.lang.RuntimeException:Unabletoinstantiateorg.apache.hadoop.hive.ql.metadata.SessionHiveMetaStoreClientatorg.apache
weixin_30925411·2020-08-21 06:00

mysql作为hive元数据库读取时提示communication failure

但是hive命令行进入后，showtables提示·metastore无法读取，查了很久的原因，都查不到，mysql登陆也正常，同事突然说在hivecli中setjavax.jdo.option.ConnectionURL
sanms·2020-08-21 05:18

Column name pattern can not be NULL or empty.

1.美图2.背景19/02/1315:34:53WARNQuery:Queryforcandidatesoforg.apache.hadoop.hive.metastore.model.MDatabaseandsubclassesresultedinnopossiblecandidatesExceptionthrownobtainingschemacolumninformationfromdata
九师兄·2020-08-21 04:33

hive-2.1.1报错Failed to start database 'metastore_db' with class loader sun.misc.Launcher$AppClassLoad

求帮忙,帮忙看看问题出在哪里：hive-2.1.1安装报错如下：org.apache.hadoop.hive.metastore.HiveMetaException:Failedtogetschemaversion
RiverCode·2020-08-20 22:09

Caused by: java.sql.SQLException: Failed to start database 'metastore_db' with class loader sun.misc

Causedby:java.sql.SQLException:Failedtostartdatabase'metastore_db'withclassloadersun.misc.Launcher$AppClassLoader
哪有天生的学霸，一切都是厚积薄发·2020-08-20 21:44

Sqoop 导入数据到hdfs和hive总结

Sqoophelpimport查看import命令的帮助Eg:sqoop导入到HDFS的一个简单示例:sqoopimport       --connectjdbc:mysql://192.168.56.121:3306/metastore
天涯蓝药师·2020-08-20 20:07

知乎 Hive Metastore 实践：从 MySQL 到 TiDB

HiveMetastore是Hive的元信息管理工具，它提供了操作元数据的一系列接口，其后端存储一般选用关系型数据库如Derby、MySQL等。现在很多除了Hive之外计算框架
PingCAP·2020-08-20 17:26

知乎 Hive Metastore 实践：从 MySQL 到 TiDB

HiveMetastore是Hive的元信息管理工具，它提供了操作元数据的一系列接口，其后端存储一般选用关系型数据库如Derby、MySQL等。现在很多除了Hive之外计算框架
PingCAP·2020-08-20 17:25

大数据学习笔记——用dbeaver6.2.4连接hive1.2

数据库，hive的元数据存储在mysql中2、cd/export/servers/apache-hive-1.2.1-bin/bin进入hive安装的bin目录3、nohuphive--servicemetastore-p9083
新宿一次狼·2020-08-20 05:40

sqoop使用hcatalog抽取数据异常

脚本执行任务失败，错误日志如下:Jobcommitfailed:org.apache.hive.hcatalog.common.HCatException:2006:Erroraddingpartitiontometastore.Cause
kevin_wf·2020-08-19 22:12

Hive获取最大分区

我们知道hive中有HiveMetaStoreClientapi可以直接获
zhengqiangtan·2020-08-19 20:46

使用 Cloudera Hive Jdbc 查询 Hive 数据

引入工具包示例将需要的jar包引入，此处使用mavenlocalhive_metastore0.0system${basedir}/lib/cloudera-hive-jdbc/hive_metastore.ja
sunknew·2020-08-19 20:07

数据库迁移问题

MapReduce程序把Oracle数据导入到Hive中的所以我们应该使用hive的引擎去读这些表，需要在Spark代码中添加配置hiveContext.setConf("spark.sql.hive.convertMetastoreParquet
lhxsir·2020-08-19 18:56
上一页 7 8 9 10 11 12 13 14 下一页
按字母分类： ABCDEFGHIJKLMNOPQRSTUVWXYZ其他