E-COM-NET
首页
在线工具
Layui镜像站
SUI文档
联系我们
推荐频道
Java
PHP
C++
C
C#
Python
Ruby
go语言
Scala
Servlet
Vue
MySQL
NoSQL
Redis
CSS
Oracle
SQL Server
DB2
HBase
Http
HTML5
Spring
Ajax
Jquery
JavaScript
Json
XML
NodeJs
mybatis
Hibernate
算法
设计模式
shell
数据结构
大数据
JS
消息中间件
正则表达式
Tomcat
SQL
Nginx
Shiro
Maven
Linux
HiveServer2
DataGrip数据仓库工具
需要用到jdbc协议连接hive,所以要启动
hiveserver2
点加号选database,可选择hivename是自己起的连接名,Host写
hiveserver2
所在的主机名服务器名hiveserver
大数据小理
·
2022-08-10 13:32
大数据
数据仓库
数据仓库
hive
大数据
Hive基于UDF进行文本分词
Hive系列文章Hive表的基本操作Hive中的集合数据类型Hive动态分区详解hive中orc格式表的数据导入Java通过jdbc连接hive通过
HiveServer2
访问HiveSpringBoot
忍者1
·
2022-08-08 21:18
大数据
hive
数据仓库
udf
数仓4.0笔记——数仓环境搭建—— DataGrip准备和数据准备
1DataGrip准备1.1启动
HiveServer2
[zhang@hadoop102hive]$
hiveserver2
1.2配置DataGrip连接启动DataGrip,创建连接配置连接属性所有属性配置
丝丝呀
·
2022-08-05 14:36
hive
大数据
hadoop
第3节 hudi hive 数据同步,实现湖仓一体 cdh6.3.2存在版本兼容问题,spark可以查询HoodieParquetRealtimeInputFormat格式表,hive查询报错
对接hive(1)将Hudi目录编译好的hudi-hadoop-mr-bundle-0.9.0.jar,复制到hive的lib下让hive支持hudi,需要重启
hiveserver2
服务,或者不加入也可
第一次看海
·
2022-05-31 07:11
hudi
hive
spark
hudi
数据湖(五):Hudi与Hive集成
大数据联盟地址:https://bbs.csdn.net/forums/lanson文章目录Hudi与Hive集成一、配置
HiveServer2
1、在Hive服务端配置hive-site.xml2、在每台
Lansonli
·
2022-05-31 07:39
数据湖技术
hive
hadoop
数据仓库
Hive(总)看完这篇,别说你不会Hive!
文章目录1.Hive入门1.1什么是Hive1.2Hive的优缺点1.2.1优点1.2.2缺点1.3Hive架构原理2.Hive安装2.1Hive安装2.2HiveJDBC访问2.2.1启动
hiveserver2
子清.
·
2022-04-24 14:22
#
Hive
Hadoop
hive
大数据
Missing version in readMessageBegin
org.apache.thrift.protocol.TProtocolException:MissingversioninreadMessageBegin,17/11/1620:59:35[
HiveServer2
·
2022-03-26 17:58
java
看SparkSQL如何支撑企业级数仓
Hive有JDBC客户端,支持标准JDBC接口访问的
HiveServer2
服务器,管理元数据服务的HiveMet
·
2022-02-21 12:54
数据库字节跳动
看SparkSql如何支撑企业数仓
Hive有JDBC客户端,支持标准JDBC接口访问的
HiveServer2
服务器,管理元数据服务的HiveMet
字节跳动数据平台
·
2022-02-21 12:00
HiveServer2
源码分析
本文基于hive-1.2.2源码Metastore模块在service目录下入口文件service/src/java/org/apache/hive/service/server/
HiveServer2
david9
·
2022-02-18 07:24
Hive之同比环比的计算
Hive系列文章Hive表的基本操作Hive中的集合数据类型Hive动态分区详解hive中orc格式表的数据导入Java通过jdbc连接hive通过
HiveServer2
访问HiveSpringBoot
大数据技术派
·
2022-02-17 22:00
HiveServer2
运行慢,不定时宕机,问题排查
HiveServer2
运行慢,不定时宕机,问题排查文章目录
HiveServer2
运行慢,不定时宕机,问题排查1.问题描述2.原因分析(分析方法)3.解决方案总结1.问题描述大数据组件
HiveServer2
spark_dev
·
2022-02-06 11:58
jvm
hiveserver2
hadoop
hive
big
data
大数据常用命令
markdown代码折叠】点击查看完整代码【Linux搜索指定文件类型的指定内容】grep-rin"9820"--include"*.xml"/export/server/【启动hive的metastore、
hiveserver2
大数据小陈
·
2022-02-05 12:56
big
data
hive
linux
大数据
hadoop
启动hive2
版本:2.3.3首先启动metasotre:hive--servicemetastore&然后启动
hiveserver2
:
hiveserver2
&配置:hive客户端连接端口9083:hive.metastore.uristhrift
金刚_30bf
·
2022-02-03 02:23
Spark综合学习笔记(二十九)SparkSQL分布式SQL引擎
p=66说明Hive的SQL交互方式方式1∶交互式命令行(CLI)·bin/hive,编写SQL语句及DDL语句方式2:启动服务
HiveServer2
(HiveThriftServer2)·将Hive当做一个服务启动
斯特凡今天也很帅
·
2021-12-01 19:29
大数据
spark
scala
spark
big
data
scala
使用 JDBC 方式访问 Hive
1)在hive-site.xml文件中添加如下配置信息2)启动
hiveserver2
[atguigu@hadoop102hive]$bin/hive--service
hiveserver2
3)启动beeline
song_quan_
·
2021-11-23 16:35
Hive
hive
使用JDBC操作hive的两种方式
JDBC操作Hive一、准备二、启动hadoop集群三、在hive的安装目录下的bin/目录下启动
hiveserver2
四、两种使用JDBC的方式一、在虚拟机中的hive的beeline端二、Windows
数据是个宝
·
2021-11-19 13:34
hive
linux
centos
vmware
Apache Kyuubi 助力 CDH 解锁 Spark SQL
ApacheKyuubi(Incubating)(下文简称Kyuubi)是⼀个构建在SparkSQL之上的企业级JDBC网关,兼容
HiveServer2
通信协议,提供高可用、多租户能力。
·
2021-11-18 16:07
Hadoop Meetup 2021 回顾 - Apache Kyuubi 助力 CDH 解锁 Spark SQL
ApacheKyuubi(Incubating)(下文简称Kyuubi)是⼀个构建在SparkSQL之上的企业级JDBC网关,兼容
HiveServer2
通信协议,提供高可用、多租户能力。
网易杭研
·
2021-11-17 11:48
大数据
大数据
java
Spark
CDH
Hadoop
datagrip连接虚拟机的hive数据库
要用datagrip访问虚拟机的hive数据库,首先要启用
HiveServer2
服务。
Chris_FKYM
·
2021-11-15 20:47
部署配置
hive
数据库
hadoop
开发工具
hive 高可用搭建
RemoteMetastoreServer一般情况下,我们在学习的时候直接使用hive–-servicemetastore的方式启动服务端,使用hive的方式直接访问登录客户端,除了这种方式之外,hive提供了
hiveserver2
manba_yqq
·
2021-11-14 18:55
大数据
#
Hive
hive
hadoop
big
data
Hive架构及搭建方式
Hive架构及搭建方式[TOC]前言本文档基于hive3.1.2编写hive的基础知识基本架构整个hive由
hiveserver2
和hive客户端组成hive客户端有三种,beeline、使用jdbc链接
·
2021-10-23 15:24
数据库
Hadoop开发--Hive--DDL
一、DDL操作启动服务:hive--servicemetastore&hive--service
hiveserver2
&(一)数据库操作1.创建数据库CREATE(DATABASE|SCHEMA)[IFNOTEXISTS
无剑_君
·
2021-06-22 08:24
Hive的JDBC连接
HiveJDBC驱动连接分为两种,早期的是HiveServer,最新的是
HiveServer2
,前者本身存在很多的问题,如安全性、并发性等,后者很好的解决了诸如安全性和并发性等
·
2021-06-18 21:06
SpringBoot连接Hive实现自助取数的示例
1.需要的依赖配置为了节省篇幅,这里给出
hiveserver2
方式连接hive主要的maven依赖,
·
2021-06-15 15:07
Spark Thrift Server改造:返回执行进度日志
此前为了解决任务提交入口收敛的问题也对
HiveServer2
作了改造,了解过其内部的相关具体实现,
stuxuhai
·
2021-06-15 14:14
hive服务启动异常定位记录
环境说明hadoop-2.7.4hive-2.3.2hbase-1.4.2jdk1.8.0_161问题现象原先启动
hiveserver2
和metastore的两个服务一直运行状况良好,重启这个两个服务后都出现如下异常信息启动命令示例
soycici
·
2021-06-15 13:58
1、
hiveserver2
启动失败查错过程
1.问题描述:连接模式是:启动
hiveserver2
后,通过beeline连接;启动
hiveserver2
后,beeline连接:!
七匹狼_cd8f
·
2021-06-09 19:22
Apache hive 3.1.2从单机到高可用部署
HiveServer2
高可用 Metastore高可用 hive on spark
hiveserver2
web UI 高可用集群启动脚本
hive部署下载apachehive3.1.2http://archive.apache.org/dist/hive/注:先看hive编译文档,使用编译好的安装包进行部署官方的hive3.1.4和sprk3.0.0不兼容,需要重新编译。后面配置hiveonspark可以使用spark2.3.0。而spark2.3.0对应的hadoop版本是2.x。重新编译,参考本人写的另一篇文章hive3.1.4
薛定谔的猫不吃猫粮
·
2021-05-21 16:59
Hive
hive
大数据
hadoop
spark
生态圈
组件架构:
hiveserver2
(beeline),hive,metadbExecutionEngine–Thecomponentwhichexecutestheexecutionplancreatedbythecompiler.TheplanisaDAGofstages.Theexecutionenginemanagesthedependenciesbetweenthesedifferentst
satyrs_sh
·
2021-05-10 11:15
Hive入门(二)
Hive入门(二)Hive客户端与服务端HiveShellbeeline与
hiveserver2
配置用户授权关闭HDFS和YARN:修改core-site.xml分发启动HDFS和YARN复制standalone
杀智勇双全杀
·
2021-05-02 23:21
云计算大数据
笔记
hive
linux
shell
sql
hadoop
Hadoop实战(9)_Hive进阶及UDF开发
JDBC方式访问Hive基于
HiveServer2
服务。SecureRT,sz设置下载目录,Options-Xmodem/Zmodem-Download。
HiveServer2
端口,10000。#us
padluo
·
2021-05-02 20:13
Kyuubi服务源码解析:KyuubiServer
Kyuubi服务与
HiveServer2
服务非常相似,在Kyuubi中很多类的设计和代码逻辑都参照了
HiveServer2
(SparkSQLThriftServer也是同样的道理)。
此间少年仍犹在
·
2021-05-02 15:33
Data Integration (kettle) 7.0 连接Hive
步骤1.启动
hiveServer2
kettle是通过jdbc来连接hive的,而jdbc方式连接hive需要启动
hiveServer2
(thrift接口程序),执行如下命令来启动
hiveServer2
.
data_haozi
·
2021-04-28 02:30
hive高可用部署
HiveServer2
高可用(HA)Metastore高可用(HA)基于Apache hive 3.1.2
HiveServer2
高可用修改配置hive-site.xml,增加一下内容hive.server2.support.dynamic.service.discoverytruehive.server2.
薛定谔的猫不吃猫粮
·
2021-04-20 17:46
Hive
大数据组件
hive
hadoop
zookeeper
大数据
hdfs
Spark Multi Tenancy系列 - 5 集成spark-authorizer权限控制组件
项目地址AFully
HiveServer2
-likeMulti-tenancySparkThriftServerSupportingImpersonationandMulti-SparkContexthttps
Kent_Yao
·
2021-04-20 08:06
使用Dbeaver远程连接Hive的详细方法
0.Linux上Hive启动Hadoop启动Hiveshhive--service
hiveserver2
&需要总共有7个进程。1.下载DBeaver下载与安装DBeaver过程,略过。
·
2021-04-14 20:37
企业大数据实战:Kyuubi 与 Spark ThriftServer 的全面对比分析
本文从企业大数据应用场景关注的问题出发,对比了Kyuubi与SparkThriftServer的差异与优劣,并引入
HiveServer2
进行全面的分析。
NetEaseResearch
·
2021-03-19 19:01
大数据
大数据
分布式
Kyuubi
THrift
JDBC
hive&hue优化
huehue的server_conn_timeout调大点hive:1、自定义hive配置中,增加这个属性:hive.server2.parallel.ops.in.session=true2、hive将
hiveserver2
在路上很久了
·
2021-03-10 23:31
Hive 高可用搭建
Hive高可用搭建节点配置文件hive-site.xml(node2)hive-site.xml(node3)节点NN-1NN-2DNZKZKFCJNNRSNM
Hiveserver2
beelinenode1
小而困难
·
2021-02-01 20:24
大数据
hive
Hive源码本地IDEA调试的正确姿势
Hive源码本地IDEA调试的正确姿势背景环境准备初始化配置修改配置初始化元数据库编译代码启动HiveMetaStore启动Hivesql客户端ClientDriver模式
HiveServer2
模式启动
喜剧之皇
·
2021-01-11 11:58
源码分析
大数据
hive
源码
大数据
通过
HiveServer2
访问Hive
hiveserver2
:hive服务端。提供hive服务。客户端可以通过beeline,j
不负此生
·
2020-12-24 23:10
hive
大数据
通过
HiveServer2
访问Hive
hiveserver2
:hive服务端。提供hive服务。客户端可以通过beeline,j
不负此生
·
2020-12-21 11:19
hive
大数据
三十、Hive的数据类型以及常用的属性配置
关注专栏《破茧成蝶——大数据篇》,查看更多相关的内容~目录一、Hive的数据类型1.1基本数据类型1.2集合数据类型1.2.1介绍1.2.2示例1.3数据类型转换二、常用的属性配置2.1
HiveServer2
象在舞
·
2020-12-13 10:42
破茧成蝶——大数据篇
hive
使用DataGrip连接Hive的详细步骤
第一步第二步第三步可以在虚拟机上拷贝到本地jar包获取链接第四步第五步:在主节点上执行如下代码(后台开启hive服务)不开启此服务无法连接[root@node01/]#nohuphive--service
hiveserver2
&
·
2020-11-30 20:30
使用Datagrip连接Hive
并且,hive是通过
hiveserver2
命令启动。nohup
hiveserver2
1>/home/kfk/logs/hive/
ryang420
·
2020-11-26 15:44
Hive 高可用HA搭建
1、使用
HiveServer2
提供HA的好处1.在应用端不用部署Hadoop和Hive客户端;2.相比hive-cli方式,
HiveServer2
不用直接将HDFS和Metastore暴漏给用户;3.有安全认证机制
狂奔的乌牛
·
2020-11-12 16:53
Hive
开源框架使用
hive
DataGrip 连接
HiveServer2
报错的问题
DataGrip连接
HiveServer2
报错一、HeapmemoryExceptioninthread"main"java.lang.OutOfMemoryError:Javaheapspace因为DataGrip
·
2020-09-29 15:40
python 连接
hiveserver2
pipinstallpyhs2首先得安装saslhttps://www.lfd.uci.edu/~gohlke/pythonlibs/#sasl下载环境windows64python3.6.5
itgraph
·
2020-09-17 15:54
python3
hive
impala
No LZO codec found, cannot run.
直接Hive启动执行select语句无异常,但使用JDBC方式连接
Hiveserver2
报如下错误0:jdbc:hive2://hadoop102:10000>select*fromods_start_loglimit10
同道大叔
·
2020-09-16 17:57
Hive
jdbc
hive
lzo压缩
上一页
1
2
3
4
5
6
7
8
下一页
按字母分类:
A
B
C
D
E
F
G
H
I
J
K
L
M
N
O
P
Q
R
S
T
U
V
W
X
Y
Z
其他