metastore

hive-site.xml

createDatabaseIfNotExist=trueJDBCconnectstringforaJDBCmetastorejavax.jdo.option.ConnectionDriverNamecom.mysql.jdbc.DriverDriverclassnamefo
weixin_30765319·2020-08-14 08:55

Hive简介、DDL操作(建表、分区、导入导出等)

HDFS中的数据进行分析与管理Hive架构的核心/本质--将数据通过SQL语句转换成MapReduce操作/转成hdfs操作数据仓库--主要用来分析和管理数据，一般是查询操作，需要定期加载和刷新数据元数据Metastore
人生路且修且行·2020-08-14 01:54

Caused by: org.xml.sax.SAXParseException; systemId: file:/opt/modules/hive-1.2.1-bin/conf/

首先，hive中无论是创建的数据库还是表，这些元数据metaStore需要存储默认情况下存储在Derby数据库里面的，属于嵌入式数据，每次仅仅支持一个会话所以可以配置使用MySQL存储元数据linux下安装
-Ares·2020-08-13 17:24

Hive环境配置

1、安装rpm包1）包选择：hive、hive-metastore、hive-server22）安装：sudoyuminstallhivesudoyuminstallhive-metastoresudoyuminstallhive-server23
平凡的思想者·2020-08-12 16:02

大数据技术之_32_大数据面试题_01_Hive 基本面试 + Hive 数据分析面试 + Flume + Kafka 面试

大数据技术之_32_大数据面试题_01一、Hive基本面试1、什么是metastore2、metastore安装方式有什么区别3、什么是ManagedTable跟ExternalTable？
黑泽君·2020-08-12 13:58

【Hive从入门到精通之基础篇】Hive的内部表与外部表区别与使用场景

1、Hive的内部表（管理表）（1）基本概念：在Hive中，默认创建的表都是管理表（内部表），它与表的原始数据息息相关，Hive默认情况下会将管理表的数据存储在由配置参数hive.metastore.warehouse.dir
hi枫林客·2020-08-12 00:11

hive的一些重要的知识点

1.内部表，外部表，相同与区别相同：都是表区别：内部表数据由Hive自身管理，外部表数据由HDFS管理；内部表数据存储的位置是hive.metastore.warehouse.
弹你们小丁丁·2020-08-11 05:49

Hive架构组成

Hive架构包括如下组件：Client、ThriftServer、Metastore和Driver。
Enzo_bigdata·2020-08-11 04:56

IDEA中Spark读写Hive测试

读1.将集群上的hive-site.xml文件拷贝到maven工程的resource目录下并新增下面代码即可 hive.metastore.uris thrift://hadoop000:9083参考官方文档
滑冰选手库里·2020-08-11 04:12

Spark 读写Hive 表

Spark操作Hive可以采用两种方式，一种是在Spark-sql中操作Hive表，另一种是通过Hive的MetaStore在IDEA中操作Hive表，接下来分别介绍这两种方式Spark-Shell操作
Nice_N·2020-08-11 02:02

Hive学习笔记 —— Hive的体系结构

1.Hive的体系结构Hadoop用HDFS进行存储，利用MapReduce进行计算元数据存储（MetaStore）通常是存储在关心数据库，如mysql、derby中在Hive执行HQL语句，其HQL语句会被解析成一个
慢行慢行·2020-08-11 02:53

Apache Hudi表自动同步至阿里云数据湖分析DLA

1.引入Hudi0.6.0版本之前只支持将Hudi表同步到Hive或者兼容Hive的MetaStore中，对于云上其他使用与Hive不同SQL语法MetaStore则无法支持，为解决这个问题，近期社区对原先的同步模块
leesf·2020-08-10 19:00

Sqoop1: Sqoop-HCatalog Integration

IcreateaHCattableusingHuemetastoremanager,andsubmitasqoopjobwithhcatthroughhue,thecommandshowasblow:import
ylzhjlinux·2020-08-10 13:05

Hive新版本工作原理详解——不要在看老版本的工作原理了

2.MetaStore组件：存储着hive的元数据信息，将自己的元数据存储到了关系型数据库中，支持的数据库主要有MySQL、Derby，支持把metast
学海无涯2.0·2020-08-10 08:31

hive schematool 初始化 发生 'NUCLEUS_ASCII' Error

Afterinstallinghive,ifthefirstthingyoudidwasrunhive,hiveattemptedtocreate/initializethemetastore_db,butapparentlymightnotgetitright.Onthatinitialrun
windancer·2020-08-09 02:13

java.lang.RuntimeException: Hive metastore database is not initialized.Please use schematool

问题：Exceptioninthread“main”java.lang.RuntimeException:Hivemetastoredatabaseisnotinitialized.Pleaseuseschematool
SunmonDong·2020-08-08 21:33

安装hive+mysql，卡在schematool -dbType mysql -initSchema这一步的解决方案

这两天安装hive时，在最后一步，schematool-dbTypemysql-initSchema报org.apache.hadoop.hive.metastore.HiveMetaException
码破苍穹·2020-08-08 17:09

hive启用,输入什么命令都报错

HiveExceptionjava.lang.RuntimeException:Unabletoinstantiateorg.apache.hadoop.hive.ql.metadata.SessionHiveMetaStoreClient
Joypage·2020-08-08 16:56

初始化HIVE时，执行bin/schematool -dbType mysql -initSchema 报错

初始化HIVE时，执行bin/schematool-dbTypemysql-initSchema报错异常一：MetastoreconnectionURL:jdbc:mysql://192.168.56.112
Aying_seeya·2020-08-08 10:15

HiveServer2 Impersonate

HiveServer2Impersonate使用hadoop用户启动hs2和hmshive-site.xmljavax.jdo.option.ConnectionURLjdbc:mysql://localhost:3306/metastore
KOBE1288·2020-08-07 23:20

sparksql与hive整合

hive配置编辑$HIVE_HOME/conf/hive-site.xml,增加如下内容: hive.metastore.uris thrift://master:9083 Thrifturifortheremotemetastore.Usedbymetastoreclienttoconnecttoremotemetastore
iteye_6622·2020-08-07 14:00

Hive操作——删除表(drop、truncate)

因为外部表里的数据并不是存放在HiveMetastore中。创建表的时候指定了EXTERNAL，外部
独孤风·2020-08-07 14:00

Java项目中调用Kettle转换

Kettle版本：6.0.0.0.0.353JDK：1.7_75需要的Jar包（kettle-core-6.0.0.0-353.jar、kettle-engine-6.0.0.0-353.jar、metastore
彳辶·2020-08-06 12:33

星环大数据平台 TDH inceptor 问题排查

一、四点1.metastore2.mysql3.Inceptorserver4.ldap二、日志收集1.Inceptorserver&metastore日志2.Inceptorserver&metastorejstack
心明媚的很干净·2020-08-06 11:29

Java 调用 Impala - JDBC 调用Impala

Maven项目中pom.xml引用org.apache.hadoophadoop-common2.7.1org.apache.hivehive-jdbc1.2.1org.apache.hivehive-metastore1.2.1org.apache.hivehive-service1.2.1Java
jast_zsh·2020-08-05 21:21

Hive-HQL数据定义DDL

Hive中的数据库本质上仅仅是HDFS的一个目录，数据库中的表将会以这个数据库目录子目录的形式存储；3、如果用户没有指定数据库，Hive将会使用默认的数据库default；4、数据库的目录位于属性hive.metastore.warehouse.dir
young2simple·2020-08-04 22:07

记录一下安装hive遇到的坑

坑1：格式化hive时，一直格式化不成功[root@hadoop03lib]#schematool-dbTypemysql-initSchemaMetastoreconnectionURL:jdbc:mysql
mmaqzxc·2020-08-04 21:30

Hive基础sql语法(DDL)

的数据存储结构，抽象图如下：1.Database:Hive中包含了多个数据库，默认的数据库为default，对应于HDFS目录是/user/hadoop/hive/warehouse，可以通过hive.metastore.war
weixin_34343308·2020-08-04 20:47

Apache Hive安装及配置

ApacheHive安装及配置安装Mysql本文选用mysql作为Hive的metastore。
w13770269691·2020-08-04 19:20

Drill下配置Hive存储插件

安装好Drill、Hive、Hadoop，且Hive以MySQL作为元数据库启动hivemetastore必须先启动hivemetastore，否则无法添加存储插件a@DataServer:~$hive
qq_42797457·2020-08-04 17:10

spark运行模式中的一些错误

错误一Causedby:ERRORXJ040:Failedtostartdatabase'metastore_db'withclassloaderorg.apache.spark.sql.hive.client.IsolatedClientLoader
爆发的~小宇宙·2020-08-04 09:38

centos mysql 操作命令、指令合集

显示数据库：mysql>showdatabases;+--------------------+|Database|+--------------------+|information_schema||metastore
噜噜噜阿鲁～·2020-08-04 07:39

Spark常见问题总结

1.java.lang.RuntimeException:Unabletoinstantiateorg.apache.hadoop.hive.sql.metadata.SessionHiveMetaStoreClientspark
掌舵的鹰·2020-08-04 06:38

Hive中jline.jar与Hadoop中的jline.jar版本不同，启动hive出错

错误如下：[root@wanghyconf]#hive15/05/3010:36:52WARNconf.HiveConf:HiveConfofnamehive.metastore.localdoesnotexistLogginginitializedusingconfigurationinfile
天佑凡人·2020-08-04 03:10

Apache-hive2.1.1安装部署

2、Hadoop集群搭建参考:点击打开链接3、准备mysql数据库作为hive的metastore库centos安装mysql服务端：sudoyuminstallmysql-servercentos安装
坏蛋呆呆·2020-08-03 17:20

Hive Metastore 代码简析

1.hivemetastore内部结构1.1包结构从package结构来看，主要的5个package，让我们来看看这几个package的内容(1)metastorepackage是metastore模块的入口
godfrey90·2020-08-03 17:18

Hive Metastore 初探

1.WhatisHiveMetastore?
godfrey90·2020-08-03 17:18

Hive 之 -e -f -i

492317051、bin/hive-help[html]viewplaincopybin/hive-help15/10/1806:34:46WARNconf.HiveConf:DEPRECATED:hive.metastore.ds.retry
hankl1990·2020-08-03 11:08

Spark SQL｜Spark，从入门到精通

SparkSQL在Hive兼容层面仅依赖HQLparser、HiveMetastore和HiveSerDe。也就是说，从HQL被解析成抽象语法树(AST)起，就全部由SparkSQL接管了。
yiyidsj·2020-08-03 09:48

spark整合hive

conf目录下2.将复制到SPARK_HOME/conf目录下2.将复制到SPARKHOME/conf目录下2.将复制到SPARK_HOME/conf目录下hive-site.xml进行修改，如下hive.metastore.uristhrift
weixin_43283748·2020-08-03 07:07

Hive架构原理-官网中文翻译

目录Hive架构图Hive数据模型Metastore动机-设计目标元数据对象Metastore架构MetastoreInterfaceHiveQueryLanguageCompilerOptimizerHiveAPIsHive
RunningShare·2020-08-02 16:46

大数据技术之Hive

什么是Hive1.2Hive的优缺点1.2.1优点1.2.2缺点1.2.2.1Hive的HQL表达能力有限1.2.2.2Hive的效率比较低1.3Hive的架构原理1）用户接口：Client2）元数据：Metastore3
夜、那么美จุ๊บ·2020-08-02 15:11

Hive 的安装之启动 Hive

Hive的安装之Hive的启动文章目录Hive的安装之Hive的启动6、Hive的启动6.1初始化元数据库6.2启动metastore和hiveserver26.3HiveJDBC访问6、Hive的启动
TANCHISE·2020-08-02 14:55

Hive的DDL数据定义语言

createdatabaseifnotexistsmyhive;hive>showdatabases;hive>showdatabaseslike'*t*';说明：hive为创建的数据库生成了相对应的目录(*.db)，目录在{hive.metastore.warehouse.dir
weixin_30508241·2020-08-02 14:35

Impala和Hive的关系

Impala是基于Hive的大数据实时分析查询引擎，直接使用Hive的元数据库Metadata,意味着impala元数据都存储在Hive的metastore中。
adu_ustc·2020-08-01 13:32

Hive启动metastore的出错org.apache.thrift.transport.TTransportException

以下是启动metastore时出现的exception[[email protected]]#hive--servicemetastore&[1]3530[root@hadoop1hadoop
LittleFatz·2020-08-01 13:57

Hive的metastore安装配置方式

Hive的metastore安装方式共有三种1)内嵌模式使用内嵌的derby数据库储存元数据,默认即为内嵌模式运行hive会在当前目录生成一个derby文件和一个metastore_db目录同一个目录下同时只能有一个
Rayfun·2020-08-01 12:54

Hadoop应用架构-OReilly 2015-读书笔记

HadoopApplicationArchitectures-OReilly2015-ReadingNotes.md数据建模p23HBase基于TTL的旧数据清除（合并到新HFile时跳过）p25为了能够在Hive外部使用metastore
志_祥·2020-08-01 11:27

Hive的metastore和hiveserver2服务

1.Hive的metastore服务Metadata概念：元数据包含用Hive创建的database、table等的元信息。元数据存储在关系型数据库中。如Derby、MySQL等。
wyl9527·2020-07-30 18:41

Hive的概念、原理及其与Hadoop和数据库关系（图文讲解）

二、Hive的优缺点1.优点2.缺点三、Hive的架构原理1.两种客户端2.四种驱动Driver3.元数据库Metastore四、Hive和数据库的区别（1）数据存储位置不同（2）数据更新（3）执行机制
攻城狮Kevin·2020-07-30 18:08
上一页 9 10 11 12 13 14 15 16 下一页
按字母分类： ABCDEFGHIJKLMNOPQRSTUVWXYZ其他