metastore

Ambari+Hive+HDFS的权限认证配置

~Python大数据与SQL优化笔QQ群：771686295一.Hive配置里的几个概念Authorization：授权，也就是用户权限Authentication：验证，也就是用户身份认证MetastoreServer
yrg5101·2020-06-30 09:06

Hive Beeline HiveServer2使用

主要配置Hive，配置好后，启动该服务器的meterstore，并配置hive.metastore.uristhrift://bidev-cdh005:9083同时配置mysql的存储hive的元数据。
wmky_kk·2020-06-30 09:49

【Spark学习】使用Spark SQL操作外部hive数据库

即删除metastore_db和spark-warehouse文件夹②将外部hive中的hive-site.xml文件复制到spark/conf中③将mysql-connector-java-5.1.39
迪奥不及你的美·2020-06-30 01:52

spoolingdir-kafka-hive典型日志收集flume配置

1,准备工作hive添加分区信息,orc表,分区,分桶,字段小写ALTERTABLEhttpaddPARTITION(day=20181228,hour=18);hivemetastore服务开启hive
liang家之言·2020-06-30 01:20

Hive安装过程遇到的问题（启动hive --service metastore &）

异常：WARNconf.HiveConf:DEPRECATED:hive.metastore.ds.retry.
顺顺顺子·2020-06-30 01:27

Hive metastore三种配置方式

hive官方wiki详细介绍了这三种方式，链接为：HiveMetastore。
湘西刀疤客·2020-06-30 00:08

Couldn t find grammar element for class javax.ws.rs.core.Response(没有搞定)

测试hiveontez,启动顺序如下:启动hadoophive--servicemetastorehiveserver2starthisyarntimelineserverhivetimelineserver
Applied Sciences·2020-06-29 23:27

HIVE(hive-site.xml)配置

createDatabaseIfNotExist=trueJDBCconnectstringforaJDBCmetastorejavax.jdo.option.ConnectionDriverNamecom.mysql.jdbc.DriverDriverclass
wql_zero·2020-06-29 20:57

Hive概述

1）Hive处理的数据是在HDFS上，2）Hive分析数据底层的实现是MapReduce，3）执行程序运行在Yarn上注意一下元数据（Metastore）元数据包含表名，表所属的数据库，表的拥有者，列/
白小纯纯·2020-06-29 16:54

Hive-CDH-5.14.2添加Hive

目录标题1.分发mysql-connector2.CDH添加Hive服务3.对hive-site.xml进行修改4.进行mysql进行操作5.使用hive的Schema创建metastore库6.继续安装
程序猿与汪·2020-06-29 15:55

Flink 1.10 和 Hive 3.0 性能对比（附 Demo 演示 PPT）

如今的大数据批计算，随着Hive数仓的成熟，普遍的模式是Hivemetastore+计算引擎。
Ververica·2020-06-29 14:47

hive将HQL转换为MR任务执行

总的来说，Hive是通过给用户提供的一系列交互接口，接收到用户的指令(SQL)，使用自己的Driver，结合元数据(MetaStore)，将这些指令翻
十有八九·2020-06-29 14:41

hive解决注释中文乱码

1、进入数据库Metastore中执行以下5条SQL语句（1）修改表字段注解和表注解altertableCOLUMNS_V2modifycolumnCOMMENTvarchar(256)charactersetutf8
额～·2020-06-29 09:53

hive执行删除表操作报错

在hive执行droptabletable_name时报下错SemanticExceptionUnabletofetchtablemovie.FordirectMetaStoreDBconnections
爱晒太阳的猫丶·2020-06-29 03:42

Hive是如何将hql语法转换成MR任务

总的来说，Hive是通过给用户提供的一系列交互接口，接收到用户的指令(SQL)，使用自己的Driver，结合元数据(MetaStore)，将这些指令翻
weixin_41186141·2020-06-29 01:15

大数据Hive 面试以及知识点

3.编译器Compiler根据用户任务去MetaStore中获取需要的Hive的元数据信息。
忍哥·2020-06-28 23:44

大数据_HUE

Demo：启动和使用HUE1、启动：hadoop：start-all.shhbase:start-hbase.shhbase-daemon.shstartthrifthive:hive--servicemetastorehiveserver2HUE
Casablanca_jhBi·2020-06-28 20:27

Hive架构优点及使用场景

架构图client三种访问方式1、CLI(hiveshell)、commandlineinterface（命令行接口）2、JDBC/ODBC(java访问hive)，3、WEBUI(浏览器访问hive)Metastore
weixin_34315485·2020-06-28 16:45

伪分布式环境配置Hive

1.相关概念HiveMetastore有三种配置方式（根据元数据划分，元数据一般存储在关系型数据库里面），分别是：EmbeddedMetastoreDatabase(Derby)内嵌模式把元数据存在内嵌的
simon000·2020-06-28 12:02

hive acid笔记

关闭hdp3.0创建表自动为acid表的参数：1、hive.create.as.insert.only=false2、metastore.create.as.acid=false3、hive.strict.managed.tables
weixin_33946020·2020-06-28 08:54

【原创】大叔问题定位分享（21）spark执行insert overwrite非常慢，比hive还要慢

InsertIntoHiveTablespark-sql>explaininsertoverwritetabletest2select*fromtest1;==PhysicalPlan==InsertIntoHiveTableMetastoreRelationtemp
weixin_30740295·2020-06-28 00:00

hive bug

SHELL$hive-S-e“set”|grepwarehousehive.metastore.warehouse.dir=/user/hive/warehousehive.warehouse.subdir.inherit.perms
weixin_30553777·2020-06-27 21:42

Hadoop2.7.2之Hive-2.1.1的Hiveserver2服务和beeline远程调试

1.开启metastore和hiveserver2服务[root@sht-sgmhadoopnn-01bin]#hive--servicemetastore&[1]31092[root@hadoop-01bin
wdier·2020-06-27 14:37

SparkSql连接hive表出现的问题

Userclassthrewexception:org.apache.spark.sql.AnalysisException:Tablenotfound在代码中添加：hiveContext.setConf("hive.metastore.uris
vxkangkang·2020-06-27 11:15

PySpark做LinearRegression遇到的问题

Unabletoinstantiateorg.apache.hadoop.hive.ql.metadata.SessionHiveMetaStor此问题报错的原因有很多，一般会想到Hive安装及环境配置问题，但是我只是要搞PySpark，仔细看了一下报错提示：“metastore_dbcannotbecreated
李代数·2020-06-27 10:25

大数据平台搭建（四）：hive中的表及UDF

2.hive表的hdfs路径     在hive-site.xml中，由参数hive.metastore.warehouse.dir指定，我的是/hivedata
闹闹的BaBa·2020-06-27 03:38

flume加载问题整理

failedtostartagentbecausedependencieswerenotfoundinclasspathflume-env.sh中需要同时设置JAVA_HOME和HCAT_HOMEfailedtoconnectingtoEndpointhive服务器没有启动bin/hive--servicemetastore
shakedown·2020-06-27 02:17

CDH启用 sentry

BeforeEnablingtheSentryService设置hive.metastore.warehouse.dir配置项(默认路径是/user/hive/warehouse)的权限和own
老鼬·2020-06-26 22:08

Sqoop导入关系数据库到Hive

yuminstallsqoopsqoop-metastore-y安装完之后需要下载mysqljar包到sqoop的lib目录。
tswisdom·2020-06-26 20:29

利用Zeppelin来操作Hive数据仓库。

/hive--servicemetastore&//后台启动./hive--servicehiveserver2&./beeline-ujdbc:hive2://172.16.0.37:10
Bonyin·2020-06-26 20:08

hive远程模式搭建

centos7主机：master192.168.200.128（hive客户端）slave1192.168.200.129（hive服务端）slave2192.168.200.130（MySQL数据库存储metastore
Bug.object·2020-06-26 17:16

Hive入门学习之三：Hive客户端的连接

在Hive入门学习之二：Hive的部署中讲述了如何搭建一个Hive的环境，本文主要讲解基于metastore启动多个client的方法要求说明centos01中已经配置好了hive环境，需要在该机器上启动
铁猴·2020-06-26 15:16

Hive在spark2.0.0启动时无法访问../lib/spark-assembly-*.jar: 没有那个文件或目录的解决办法

最近将整个架构升级到spark2.0.0之后，发现一个问题，就是每次进行hive--servicemetastore启动的时候，总是会报一个小BUG。
sparkexpert·2020-06-26 14:53

hive权限控制（一）

Xml代码hive.files.umask.value0002Thedfs.umaskvalueforthehivecreatedfolders当hive.metastore.aut
slx_2011·2020-06-26 13:55

hive内部表和外部表的区别

修饰的是内部表（managedtable）可省略，被external修饰的为外部表（externaltable）；区别：内部表数据由Hive自身管理，外部表数据由HDFS管理；内部表数据存储的位置是hive.metastore.warehouse.dir
小李1998·2020-06-26 12:28

Hive-1.Hive入门介绍

2.Hive元数据保存的方法以及特点Hive元数据存储metastore中。
走在前方·2020-06-26 08:41

hive使用中常见错误

1.1.hive错误1.1.1.hive2.3初始化mysql不起作用[root@localhost65bin]#schematool-initSchema-dbTypemysql--verboseMetastoreconnectionURL
1057718341_h·2020-06-26 08:24

使用了hive为什么要加mysql?

metastore是hive元数据的集中存放地metastore默认使用内嵌的derby数据库作为存储引擎Derby引擎的缺点：一次只能打开一个会话使用Mysql作为外置存储引擎，多用户同时访问Hive
seaReal1·2020-06-26 07:19

hive

2.1.版本的选择2.2.步骤2.3.软件的基本操作2.3.1.进入hive2.3.2.操作2.3.3.退出2.3.4.hive对本地文件数据进行表的映射操作2.3.5.转移元数据的存储路径2.3.6.metastore
飛翔的大雁·2020-06-26 04:07

Hive体系架构

Thrift：一种协议需要java代码，通过jdbc提交（thrift/jdbc）(server/jdbc)WebUI(HUE/Zepelin)：通过可视化展示metastore:==>MySQLdatabase
慢熟的孩子·2020-06-26 03:07

CDH集群hive使用以及性能测试

1.CDH集群里面的Hive角色分配及作用如图所示，Hive主要有三个角色：HiveServer2、MetastoreServer、以及代理角色Gateway主要两个服务端守护进程：1、Hiveserver2
CharonLR·2020-06-26 00:27

错误：org.apache.hadoop.hive.metastore.HiveMetaException: Failed to get schema version

HiveExceptionjava.lang.RuntimeException:Unabletoinstantiateorg.apache.hadoop.hive.ql.metadata.SessionHiveMetaStoreClient
葉_蕖·2020-06-26 00:14

CM部署CDH安装组件到Hive时报错： Cause:Table 'scm.VERSION' doesn't exist.

ClouderaManager部署CDH到首次运行页面，安装运行Hive时，报错：HiveMetaException:Failedtogetschemaversion,Cause:Table‘metastore.VERSION
Troyong·2020-06-25 16:19

Hive安装搭建(三种模式）

Hive中最最重要的角色就是metastore因此按照metastore的管理共有四种hive的安装搭建方式：官网参考地址如下：https://cwiki.apache.org/confluence/display
双椒叔叔·2020-06-25 13:13

HIVE参数

其中默认的配置都在hive-default.xml.templatemetastore配置文件：hivemetastore-site.xmlhiveserver2配置文件：
Carltmf·2020-06-25 11:00

HIve修改字段或者增加字段后，Spark访问不生效问题

altertableadd…来实现原来的表：ALTERTABLEtestADDCOLUMNS(weightSTRING)CASCADE加上一列weight字段后（这里使用cascade就是为了同步到hivemetastore
BackToMeNow·2020-06-25 11:08

Hive学习（一）

【metastore】——存储在Mysql中–DBS：存储hive的所有数据库的元数据–TBLS：存储hive的所有数据表的元数据【数据类型】NumericTypesTINYINT(1-bytesignedinteger
DataSheep·2020-06-25 10:46

hive启动命令以及hive介绍(个人总结)

sbin/start-all.shhive服务器启动命令:启动:nohupbin/hive--servicemetastore&查看运行过程:tail-fnohup.out客户端
墨染繁华执念心悠·2020-06-25 10:34

HIVE架构

现在推荐使用beelineDRIVER：1.用于接收客户端提交的SQL，并实现了session控制2.并提供了jdbc/odbc的fetch和execute功能COMPILER：编译器，负责解析SQL，并从METASTORE
Carltmf·2020-06-25 10:00

HIVE架构

现在推荐使用beelineDRIVER：1.用于接收客户端提交的SQL，并实现了session控制2.并提供了jdbc/odbc的fetch和execute功能COMPILER：编译器，负责解析SQL，并从METASTORE
Carltmf·2020-06-25 10:00
上一页 13 14 15 16 17 18 19 20 下一页
按字母分类： ABCDEFGHIJKLMNOPQRSTUVWXYZ其他