E-COM-NET
首页
在线工具
Layui镜像站
SUI文档
联系我们
推荐频道
Java
PHP
C++
C
C#
Python
Ruby
go语言
Scala
Servlet
Vue
MySQL
NoSQL
Redis
CSS
Oracle
SQL Server
DB2
HBase
Http
HTML5
Spring
Ajax
Jquery
JavaScript
Json
XML
NodeJs
mybatis
Hibernate
算法
设计模式
shell
数据结构
大数据
JS
消息中间件
正则表达式
Tomcat
SQL
Nginx
Shiro
Maven
Linux
hive3
[Spark]spark3.0.0 on yarn 安装测试
hive3
也支持hadoop,完美的组合。
大跃ET
·
2020-08-19 10:24
spark
spark
Hortonwork hdp3.1平台配置使用hplsql及测试
一、hplsql安装配置Hortonworkhdp3.0平台自带的
hive3
已集成了hplsql,无需安装,但是需要手工新建配置文件hplsql-site.xml,并更新对应的hive-hpsql-xxx.jar
邮差265
·
2020-08-14 21:05
选型测试
datax同步mysql数据到hive
另外,虽然
hive3
支持decimal格式,但是datax还不支持。。。因此datax
ASN_forever
·
2020-08-02 12:44
ETL
hive
安装
hive3
报错java.lang.NoSuchMethodError:
hive报错:java.lang.NoSuchMethodError:com.google.common.base.Preconditions.checkArgument(ZLjava/lang/String;Ljava/lang/Object;)V(已解决)报错详情:从报错信息来看:一,java.lang.NoSuchMethodError原因:1.系统找不到相关jar包2.同一类型的jar包有
Hero.Lin
·
2020-07-30 12:35
大数据
hive
大数据学习之
hive3
hive中的数据定义语言(ddl):hive中的数据定义语言有如下:HiveQLDDLstatementsaredocumentedhere,including:CREATEDATABASE/SCHEMA,TABLE,VIEW,FUNCTION,INDEX//创建数据库,schama,表,视图,函数,索引DROPDATABASE/SCHEMA,TABLE,VIEW,INDEX//删除TRUNCAT
qq_32182461
·
2020-07-28 06:57
大数据
Hive3
启动 提示:com.ctc.wstx.exc.WstxParsingException: Illegal character entity: expansion character
Windows10系统启动
Hive3
提示如下错误信息:com.ctc.wstx.exc.WstxParsingException:Illegalcharacterentity:expansioncharacter
在奋斗的大道
·
2020-07-09 05:39
hadoop
(一)Hive 介绍
(一)Hive介绍前言1、什么是Hive2、为什么使用
Hive3
、Hive的优势和特点一、Hive体系架构1、用户接口2、跨语言服务3、底层的Driver4、元数据存储系统执行流程二、Hive数据组织1
GodSuzzZ
·
2020-07-01 09:33
Hive
大数据入门教程系列之Hive篇汇总
大数据入门教程系列之Hive篇汇总1、Hive概述、体系架构、分区、桶与倾斜2、大数据入门教程系列之Hive环境搭建--Linux(Centons7)下配置安装
Hive3
、HiveDDLDML及SQL操作
zjh_746140129
·
2020-06-30 18:18
hive
Apache Griffin 安装与简介
目录一、Griffin简介二、安装部署2.1依赖准备1、初始化2、Hadoop和
Hive3
、Scala安装4、ES的安装与启动2.2源码打包部署一、Griffin简介数据质量模块是大数据平台中必不可少的一个功能组件
kangna_卧龙先生
·
2020-06-25 10:16
hadoop
大数据运维
0505-使用Apache
Hive3
实现跨数据库的联邦查询
如今的企业内部一般都有多个系统用于数据存储和数据处理。这些不同的系统各自服务于不同的应用场景或案例。除了传统的RDBMS如OracleDB,Teradata或PostgreSQL之外,团队可能还使用了ApacheKafka用作流式处理,使用ApacheDruid来保存时序数据,使用ApachePhoenix进行快速索引查找。此外,他们可能还使用了云存储服务或HDFS来批量存储数据。平台的团队一般会
Hadoop_SC
·
2020-06-21 21:24
Hadoop实操
大数据学习技术指南
Hadoop二、流式计算1、Storm/JStorm2、SparkStreaming3、Flink三、分布式存储1、HDFS四、资源调度1、Yarn2、Mesos五、数据分析/数据仓库(SQL类)1、Pig2、
Hive3
lmem
·
2020-04-02 15:05
大数据系统运维2019
集群硬件监控通过应用案例了解工作方法与流程大数据运维概览大数据的运维案例回顾:运维内容运维工作流程运维支撑平台大数据运维涉及哪些内容大数据运维关注的问题大数据运维平台的典型架构大数据系统核心组件介绍1、集群管理工具—ambari2、数据仓库—
hive3
zhanggliy
·
2020-04-01 20:03
运维
运维;大数据
举一个
hive3
jdbc栗子
以下使用的是kerberos认证模式进行连接使用过程导入jdbc包compilegroup:'org.apache.hive',name:'hive-jdbc',version:'3.0.0'HiveTest.javaimportorg.apache.hadoop.conf.Configuration;importorg.apache.hadoop.security.UserGroupInform
大猪大猪
·
2020-03-16 00:06
大数据学习之SQOOP安装手册
约定:本次安装测内容1,SQOOP从数据库中导入数据到HDFS2,SQOOP从数据库中导入数据到
HIVE3
,SQOOP从HIVE中将数据导出到数据库下载安装文件第一步解压:tar-zxvfsqoop-1.4.6
大数据在说话
·
2020-03-04 11:57
构建高可用Hive HA和整合HBase开发环境(一)
和hive-site.xml2.3配置Hive的运行日志2.4加入mysqlconnector2.5在mysql建表2.6初始化hiveschema2.7在mysql上查看hive创建的元表2.8启动
hive3
yield-bytes
·
2019-11-16 09:21
Hive
Hive Hooks介绍
值得关注的是Hive目前支持MapReduce、Tez和Spark三种执行引擎,同时
Hive3
也会支持联邦数据查询的功能。所以Hive还是有很大进步的空间的。
叁金
·
2019-07-16 20:00
【大数据报错】
hive3
初始化数据库报错
hive3
初始化数据库报错场景:hive版本:3.1.1Hadoop版本:HA3.1.1系统:CentOS7.6hive03.1.1初始化MySQL远程数据库报错:$schematool-dbTypemysql-initSchemaSLF4J
debimeng
·
2019-04-05 18:03
大数据报错
Hive3
P21-P25Hive优化_fetch抓取:fetch抓取是指Hive中某些任务可以不通过mr,比如说select*from一张表,通过sethive.fetch.task.conversion=more可以设置Hive优化_本地模式:很多情况下,Hive可以通过本地模式在单台机器上处理所有任务,对于小数据集,处理时间明显缩短通过sethive.exec.mode.local.auto=true设
李导
·
2019-01-18 21:01
Hive元数据在MySQL的存储逻辑及关系
很多情况下是将hive的元数据存放在mysql数据库中,通过hive配置的连接字符串:javax.jdo.option.ConnectionURLjdbc:mysql://localhost:3306/
hive3
学霸很烦恼
·
2018-12-18 14:33
hive
hive 3.x 功能介绍
在
Hive3
中,Hive可以完全控制托管表。只有通过Hive才能访问和更改托管表中的数据。除临时表外,托管表是具有ACID(原子性,一致性,隔离性和持久性)属性的事务表。
smileyboy2009
·
2018-11-08 17:00
hvie
hadoop
hive3.x
Hive 官方手册翻译 -- Hive Transactions (Hive 事务)
cwiki.apache.org/confluence/display/Hive/Hive+Transactions翻译:GoogleGoogle翻译,金山软件金山词霸校对:南大通用范振勇(如有翻译问题,请多指教)一、
Hive3
范振勇
·
2018-10-11 23:00
hive3
之----优化
1.Map优化---作业会通过Input的目录产生一个或者多个map任务.setdfs.block.szie=128---Map越多越好吗?是不是保证每个Map处理接近文件块大小?---如何合并小文件,减少map数setmapred.max.split.size=100000000;setmapred.min.split.size.per.node=100000000;setmapred.min.
话话121
·
2018-09-03 11:57
hive
mysql
hive
JDBC连接Hive
Hive3
种连接模式:CLI:命令行界面(CommandLineInterfaceforbatchscripting),即在hive的bin目录下通过.
nuobuye19950728
·
2017-11-08 17:38
大数据
hive
jdbc连接hive
大数据学习18:Hive在mysql的元数据表的关系和含义
很多情况下是将hive的元数据存放在mysql数据库中,通过hive配置的连接字符串:javax.jdo.option.ConnectionURLjdbc:mysql://localhost:3306/
hive3
月魂_123123
·
2017-10-05 19:33
大数据
centos7安装Hive2.3.0
bin.tar.gz2、解压到指定安装目录tar-zxvfapache-hive-2.3.0-bin.tar.gzmvapache-hive-2.3.0-bin/usr/local/hivecd/usr/local/
hive3
lym152898
·
2017-08-17 16:46
hadoop
(3)Hive 1.2.1 安装部署
hive的配置文件hivebin文件夹下面5将hive的jline-212jar复制到hadoop的指定文件夹下面6启动hive安装成功配置MySQL管理Hive关系1安装MySQL数据库2拷贝数据库驱动到
Hive3
王培晓GISer
·
2017-05-09 17:08
大数据框架应用学习
大数据工程师技能图谱
Hadoop二、流式计算1、Storm/JStorm2、SparkStreaming3、Flink三、分布式存储1、HDFS四、资源调度1、Yarn2、Mesos五、数据分析/数据仓库(SQL类)1、Pig2、
Hive3
tterminator
·
2016-03-31 13:00
大数据
Hive学习笔记汇总
1Hive官方网站http://hive.apache.org/2淘宝数据团队http://www.tbdata.org/archives/category/cloud-computing/
hive3
chrisjian
·
2012-05-04 16:00
hive
上一页
1
2
下一页
按字母分类:
A
B
C
D
E
F
G
H
I
J
K
L
M
N
O
P
Q
R
S
T
U
V
W
X
Y
Z
其他