Metastore

Hive on Mapreduce、Hive on Spark、SparkSQL、Spark on Hive

executeQuery接口，发送HQL查询语句给DriverStep2：Driver为查询语句创建会话句柄，并将查询语句发送给Compiler，等待其进行语句解析并生成执行计划Step3and4：Compiler从metastore
L13763338360·2020-09-12 02:55

hive中数据仓库位置的配置

1.数据库的默认配置路径为：/user/hive/warehouse2.修改数据仓库的原始位置只需在hive-site.xml文件中配置如下信息即可：hive.metastore.warehouse.dir
学习中....·2020-09-11 22:50

Hive简介及核心概念（未完）

文章目录一、简介二、Hive的体系架构2.1command-lineshell&thrift/jdbc2.2Metastore2.3HQL的执行流程三、数据类型3.1基本数据类型一、简介Hive是一个构建在
进击的Z同学·2020-09-11 19:56

Apache Hue 集成Hive

10000hive_conf_dir=/export/servers/hive/confserver_conn_timeout=120auth_username=rootauth_password=123456[metastore
大数据AIRDE·2020-09-11 11:44

idea 配置spark hive踩坑

SparkSession.builder().appName(APPname).config("spark.sql.crossJoin.enabled","true").master("local").config("hive.metastore.uris
问天海东青·2020-09-11 11:46

hue(3):Hue与Hive集成

1.修改hive-site.xmlhive.server2.thrift.bind.hosthadoophive.metastore.uristhrift://hadoop:9083ThriftURIfortheremotemetastore.Usedbymetastoreclienttoconnecttoremotemetastore
RayBreslin·2020-09-11 10:37

启动spark-shell遇到的问题

Causedby:org.apache.derby.iapi.error.StandardException:Failedtostartdatabase'metastore_db'withclassloaderorg.apache.spark.sql.hive.client.IsolatedClientLoader
小肖学数据分析·2020-09-11 09:28

启动hive时：Hive Failed to connect to the MetaStore Server

启动hive时：HiveFailedtoconnecttotheMetaStoreServer标签（空格分隔）：大数据问题问题描述Exceptioninthread"main"java.lang.RuntimeException
forrestxingyunfei·2020-09-11 06:20

hive权限管理之用户在哪里创建的

hive存储时分为两部分，metastore即元数据和HDFS文件。metastore存储在mysql数据库中。1.hive的元数据存储在mysql表
杏青小·2020-09-11 06:01

hive权限控制（二）

Hive支持的权限有Users,Groups,Roles一个角色可以包含组或者用户Bydefault,theMetastoreusestheHadoopDefaultAuthenticatorfordeterminguser
slx_2011·2020-09-11 03:05

Hive学习之Metastore及其配置管理

在学习Hive的配置管理参数时，曾将参数分为四类：Hive管理参数、Hive元存储（Metastore）管理参数、与Hadoop交互的管理参数、用于传递运行时信息的参数，当时并没有对Metastore参数进行深入的学习
skyWalker_ONLY·2020-09-11 03:33

Hive数据仓库--centos7下安装Mysql（rpm）

结点规划IPHostname角色192.168.0.104masterClient192.168.0.102slave1metastore192.168.0.106slave2Mysql搭建步骤1、安装
Erase Me·2020-09-11 03:23

Hive权限管理

一、3种授权模型1、StorageBasedAuthorizationintheMetastoreServer基于存储的授权（也就是HDFS的授权模型）-可以对Metastore中的元数据进行保护，但是没有提供更加细粒度的访问控制
墨玉浮白·2020-09-11 03:13

hive多用户模式

多用户模式安装hive多用户模式分开服务端和客户端hive单用户模式参考http://blog.csdn.net/qq_33127597/article/details/76210417服务端配置如下hive.metastore.warehouse.dir
一只勤奋的小猪·2020-09-11 02:59

使用mysql数据库作为Hive的元数据库

修改一下内容：hive.metastore.localtruejavax.jdo.option.ConnectionURLjdbc:mysql://master:3306/metastoreJDBCconnectstringforaJDBCmetastorejavax
昆山人在上海·2020-09-11 01:58

元数据管理|Hive Hooks和Metastore监听器介绍

本文主要介绍HiveHook和MetaStoreListener，使用这些功能可以进行自动的元数据管理。
西贝木土·2020-09-11 01:02

hive单用户模式（Derby方式）配置及踩坑实录

文件拷贝一份并将名称改为hive-site.xml第三步：在hive-site.xml文件中加入以下内容：javax.jdo.option.ConnectionURLjdbc:derby:;databaseName=metastore_db
温文尔雅的流氓·2020-09-11 01:34

derby 的配置及jdbc连接

hive-default.xmljavax.jdo.option.ConnectionURLjdbc:derby:;databaseName=metastore_db;create=true表示使用嵌入式的
王诗龄·2020-09-10 23:24

hive数据权限管理

从mysql存储的Hive元数据表数据字典（metastore数据库）看，Hive是基于元数据mysql管理多用户权限，用户权限信息都存储在元数据
jinliwei1990·2020-09-10 22:15

[翻译]Hive的Security配置

hive.files.umask.value0002Thedfs.umaskvalueforthehivecreatedfolders当hive.metastore.authoriz
吐槽达达仔·2020-09-10 22:47

大数据（Hive的MetaStore切换及其Hive的语法细节）

大数据课程第六天MetaStore1.MetaStore在Hive中是非常重要的一个概念,通过MetaStoreHive存储HDFS与表的对应关系,MetaStore通过RDB进行数据的存储.2.MetaStore
di917348·2020-08-25 14:37

For direct MetaStore DB connections, we don't support retries at the client level.)

报错使用hive导入数据到分区中报错如下：FailedwithexceptionMetaException(message:FordirectMetaStoreDBconnections,wedon'tsupportretriesattheclientlevel
脚丫先生·2020-08-25 08:09

For direct MetaStore DB connections, we don't support retries at the client level解决

mysql-connctor版本可能存在问题所以先检测版本是否存在问题,修改mysql数据库对应hive'库编码alterdatabasehivecharactersetlatin1;
Tangerine_bisto·2020-08-25 06:56

hive报错 For direct MetaStore DB connections, we don‘t support retries at the client level

hive2.3.6解决方法:网上解决方法都不行,自己偶然发现,之前虚拟机配置单节点伪集群时,spark和hive中存储的mysql的jar包版本不一致,调成一致版本就好了
健忘主义·2020-08-25 06:46

impala

有三个主要组件，即Impaladaemon（Impalad），ImpalaStatestore和Impala元数据或metastore。
vernwang·2020-08-25 03:22

FAILED: Execution Error, return code 1 from org.apache.hadoop.hive.ql.exec.DDLTask.

ExecutionError,returncode1fromorg.apache.hadoop.hive.ql.exec.DDLTask.MetaException(message:FordirectMetaStoreDBconnections
喝粥也会胖的唐僧·2020-08-24 18:57

HIVE 乱码问题

2.解决方案进入数据库Metastore中执行以下5条SQL语句修改表字段注解和表注解altertableCOLUMNS_V2modif
wtzhm·2020-08-24 18:41

hive -- return code 2 from org.apache.hadoop.hive.ql.exec.mr.MapRedTask

ExecutionError,returncode2fromorg.apache.hadoop.hive.ql.exec.mr.MapRedTask(state=08S01,code=2)查看日志信息：原因，没有开启Metastore
kismetG·2020-08-24 17:56

【HIVE】hive中解决中文乱码问题

问题详情：为了解决Hive中创建表的时候，注解等中文显示的乱码问题需要设置MetaStoreDataBase中某些字段的字符编码为utf-8HiveMetaStore配置说明MySQL授权GRANTALLPRIVILEGESON
sofeld·2020-08-24 16:53

presto 连接hive

修改hive-site.xml增加hive.metastore.localfalsehive.metastore.uristhrift://localhost:9083启动hive--servicehiveserver2&
冰_茶·2020-08-24 16:18

关于使用hive删除表时出现的return code 1 from org.apache.hadoop.hive.ql.exec.DDLTask. MetaException

ExecutionError,returncode1fromorg.apache.hadoop.hive.ql.exec.DDLTask.MetaException(message:FordirectMetaStoreDBconnections
星梦心·2020-08-24 16:47

FAILED: Execution Error, return code 1 from org.apache.hadoop.hive.ql.exec.DDLTask. MetaException(me

ExecutionError,returncode1fromorg.apache.hadoop.hive.ql.exec.DDLTask.MetaException(message:FordirectMetaStoreDBconnections
meiLin_Ya·2020-08-24 15:30

Hive的架构原理

hive的架构Hive接收到用户的指令(HQL)以后，使用自己的Driver和元数据(MetaStore)，将这些HQL解析为MapReduce，提交到Hadoop中执行，执行结束后将结果返回到用户交互接口
lshcc01·2020-08-24 14:54

kudu库下所有表迁移，从a库到b库

{table}4.重启HiveMetastoreServe
cclovezbf·2020-08-24 13:15

Hive连接Mysql---FAILED: Execution Error, return code 1 from org.apache.hadoop.hive.ql.exec.DDLTask.

returncode1fromorg.apache.hadoop.hive.ql.exec.DDLTask.java.lang.RuntimeException:Unabletoinstantiateorg.apache.hadoop.hive.metastore.HiveMetaStoreClient
光于前裕于后·2020-08-24 13:32

黑猴子的家：Sqoop 命令&参数：metastore

1、命令启动sqoop的metastore服务[[email protected]]$bin/sqoopmetastore关闭sqoop的metastore服务[victor@node1sqoop
黑猴子的家·2020-08-24 01:18

Hive数据仓库搭建--远程模式

结点规划IPHostname角色192.168.0.104masterClient192.168.0.102slave1metastore192.168.0.106slave2Mysql搭建步骤1、安装
Erase Me·2020-08-23 18:57

Hive--MetaException(message:Version information not found in metastore.)

报错：MetaException(message:Versioninformationnotfoundinmetastore.)atorg.apache.hadoop.hive.metastore.RetryingHMSHandler
Erase Me·2020-08-23 18:57

Hive--MetaException(message:Required table missing : “`DBS`“ in Catalog ““ Schema ““. DataNucleus re

在开启Hive-metastore的时候报错：MetaException(message:Requiredtablemissing:“DBS”inCatalog“”Schema“”.DataNucleusrequiresthistabletoperformitspersistenceoperations.EitheryourMetaDataisincorrect
Erase Me·2020-08-23 18:57

Hive-WARN: Establishing SSL connection without server‘s identity verification is not recommended. Ac

刚在在开启HiveClint和metastore的时候出现这个警告：TueJul1412:17:28CST2020WARN:EstablishingSSLconnectionwithoutserver'sidentityverificationisnotrecommended.AccordingtoMySQL5.5.45
Erase Me·2020-08-23 18:56

元数据管理|Hive Hooks和Metastore监听器介绍

本文主要介绍HiveHook和MetaStoreListener，使用这些功能可以进行自动的元数据管理。
西贝木土·2020-08-23 11:54

Spark sql 连接hive时，读取不到hive元数据问题

解决方案：hive：修改hive-site.xml:添加这个启动hivemetastore：hive--servicemetastore后台启动：hive--servicemetastore2>&1>>
Wo0_0aa7·2020-08-23 11:13

元数据管理|Hive Hooks和Metastore监听器介绍

本文主要介绍HiveHook和MetaStoreListener，使用这些功能可以进行自动的元数据管理。
西贝木土·2020-08-23 09:19

SparkSQL thrift server环境搭建

一．前提条件启动hdfs集群start-all.sh192.168.4.31:50070启动hive的metastore服务node2上启动：servicemysqldrestartcd/opt/apache-hive
scandly·2020-08-23 03:32

cdh-禁用和重新部署HDFS HA

6.更新hivemetastorenamenodeCloud
lisery_nj·2020-08-22 22:56

hive和spark版本问题

SemanticExceptionorg.apache.hadoop.hive.ql.metadata.HiveException:java.lang.RuntimeException:Unabletoinstantiateorg.apache.hadoop.hive.ql.metadata.SessionHiveMetaStoreClient
没有合适的昵称·2020-08-22 19:53

spark 读取 hdfs 数据分区规则

下文以读取parquet文件/parquethivetable为例：hivemetastore和parquet转化的方式通过spark.sql.hive.convertMetastoreParquet控制
哥伦布112·2020-08-22 18:54

Java代码访问hive数仓

hadoop.proxyuser.hadoop.groups*其中配置中的第二个hadoop是登陆主机的用户名2、启动hive的服务，包括启动元数据服务和hiveserver2服务器，执行如下两条命令hive--servicemetastore
sunqingok·2020-08-22 13:06

Hive metastore mysql

SemanticExceptionorg.apache.hadoop.hive.ql.metadata.HiveException:java.lang.RuntimeException:Unabletoinstantiateorg.apache.hadoop.hive.ql.metadata.SessionHiveMetaStoreClient
shanghome·2020-08-22 13:38

HIVE使用PG(postgreSQL)做元数据启动异常解决

上午10点58:39.292分WARNQuery[main]:Queryforcandidatesoforg.apache.hadoop.hive.metastore.model.MVersionTableandsubclassesresultedinnopossiblecandidatesRequiredtablemissing
Anan9527·2020-08-22 12:47
上一页 7 8 9 10 11 12 13 14 下一页
按字母分类： ABCDEFGHIJKLMNOPQRSTUVWXYZ其他