Hadoop-Hive

Hadoop入门学习笔记-第五天（hadoop-hive安装部署与配置笔记）

1.准备安装包：MySQL-5.6.26-1.linux_glibc2.5.x86_64.rpm-bundlemysql-connector-java-5.1.39.jar（驱动,需要放入/hive/lib）apache-hive-1.2.1-bin.tar.gz2.安装mysql数据用于储存元数据，hive自带Derby,但该数据库不稳定，使用mysql作为元数据管理1）.只需要安装在集群里面的
渣男程序员007·2023-11-30 05:44

Hive编程指南pdf

作者简介······EdwardCapriolo：Media6degrees公司系统管理员，他是Apache软件基金会成员，还是Hadoop-Hive项目成员。
weixin_30468137·2023-10-20 06:02

Hadoop-Hive

1.hive安装部署2.hive基础3.hive高级查询4.Hive函数及性能优化1.hive安装部署解压tar-xvf./apache-hive-3.1.2-bin.tar.gz-C/opt/soft/改名mvapache-hive-3.1.2-bin/hive312配置环境变量：vim/etc/profile#hiveexportHIVE_HOME=/opt/soft/hive312expor
不吃香菜lw·2023-09-15 07:06

Spark、RDD、Hive 、Hadoop-Hive 和传统关系型数据库区别

HiveHadoopHive和传统关系型数据库区别Spark概念基于内存的分布式计算框架只负责算不负责存spark在离线计算功能上类似于mapreduce的作用MapReduce的缺点运行速度慢（没有充分利用内存）接口比较简单，仅支持MapReduce功能比较单一只能做离线计算Spark优势运行速度快自身生态比较完整sparksqlsparkstreamingsparkmllibSparkMLap
Wzideng·2023-08-05 15:22

SQL ON Hadoop-Hive（二）-DDL数据定义语言

一.创建数据库Hive中的数据库本质上仅仅是个表的目录或命名空间，在生产环境，如果表非常多，一般会用数据库将生产表组织成逻辑组。Hive中默认使用的数据库是default数据库名+数据库所在的目录位置不能修改--创建数据库(包含数据库键值对属性信息)createdatabaseifnotexiststestcomment'thisislaotian'withdbproperties('creato
风风雨雨中寻觅·2022-11-29 16:46

Hadoop-Hive组件部署

一、基础环境Hive组件需要基于之前已部署完毕的Hadoop全分布系统，在master节点上实现Hive组件安装。1、Hadoop-全分布式配置（全部配置）2、Hadoop-集群运行（部分配置）#查看之前部署的环境[root@master~]#su-hadoop[
王智刚·2022-04-09 11:00

【原创】docker配置 hadoop-hive环境

0.前言安装docker安装并运行phpMyAdmin和MySqlDocker创建网桥，并将容器加入该网络从github克隆代码到本地并修改配置文件生成镜像并运行hive配置项目放在github上https://github.com/Foabo/hadoop-hive1.安装docker参考官方文档，有详细说明，mac上下载了dockerdesktop之后就很方便，连docker-compose都
abboo·2021-06-07 23:53

Hadoop-Hive常用基础HQL语句

一.数据库1.查询数据库列表showdatabases;2.使用指定的数据库usedefault;3.查看数据库的描述信息descdatabaseextendeddb_hive_03;二.表1.查询表列表showtables;2.查询表的描述信息:descstudent;descextendedstudent;descformattedstudent;3.创建表createtablestudent
夏光辉·2021-05-01 15:03

大数据-hadoop-Hive 启动报错01（2019-05-30 ）datastore driver ("com.mysql.jdbc.Driver") was not found in the

具体报错的信息是：Causedby:org.datanucleus.exceptions.NucleusException:Attempttoinvokethe"BONECP"plugintocreateaConnectionPoolgaveanerror:Thespecifieddatastoredriver("com.mysql.jdbc.Driver")wasnotfoundintheCLA
Genebrother·2020-07-15 06:48

hadoop-hive本地和伪分布式模式的安装

前言：关于虚拟机安装hive,hadoop的资料林林总总,对于初学者很难甄别;如下是按照官方doc,一步步经过实践的一种方法,思路比我搜到网上的帖子更清晰；初学，难免有错误的地方，敬请指正。一、虚拟机hadoop的安装1.虚拟机安装linux-redhat操作系统，虚拟机网络类型设置为网桥模式，保证虚拟机可以访问Internet外网2.安装jdk：解压jdk文件（我的jdk是jdk1.8.0_05
徐长亮·2020-07-15 00:36

Hadoop-Hive基本使用

Hive基本使用1、创建库：createdatabaseifnotexistsmydb;2、查看库：showdatabases;3、切换数据库：usemydb;4、创建表：createtableifnotexistst_user(idstring,namestring)或createtablet_user(idstring,namestring)rowformatdelimitedfieldste
qichangjian·2020-07-14 16:27

【4.分布式计算】hadoop-hive

hive对hdfs中数据进行抽象成表，可以通过sql组装m_p的过程。（更多大数据处理见：https://segmentfault.com/a/11...）。数据通过mysql和hdfs存储，存储格式用的现有文件格式，mysql存结构/hdfs存表数据（比如insertidname4ss,hdfs存4ss）。只是sql到m_p的映射，这过程又比较复杂。所以这里只介绍下hive的执行过程和框架，存储
梦想家·2019-04-28 00:00

Hadoop-Hive 内部表/外部表 分区表/分桶表区别

1）hive中内部表和外部表的区别内部表：又叫管理表，表的创建，和删除都由hive自己决定。外部表：表结构上同内部表，但是存储的数据时自己定义的，外部表在删除的时候只删除元数据，原始数据时不能删除的。内部表和外部表的区别主要体现在两个方面：删除：删除内部表，删除元数据和数据；删除外部表，删除元数据，保留数据。使用：如果数据的所有处理都在Hive中进行，那么倾向于选择内部表，但是如果Hive和其他工
qichangjian·2019-02-28 19:52

Hadoop-Hive基础整理（架构以及存储）

1.hive的介绍什么是hive：Hive是基于hadoop的一个数据仓库工具，实质就是一款基于hdfs的MapReduce计算框架，对存储在HDFS中的数据进行分析和管理。hive的工作方式：把存放在hive中的数据都抽象成一张二维表格，提供了一个类似于sql语句的操作方式，这些sql语句最终被hive的底层翻译成为MapReduce程序，最终在hadoop集群上运行，结果也会输出在hdfs之中
qichangjian·2019-02-28 19:13

SQL ON Hadoop-Hive（六）-字符串函数+行列转换

一.hive常用字符串函数1.字符串反转函数reverse(stringA)--返回值类型stringselectreverse('gian')fromiteblog;--'naig'2.带分隔符字符串连接函数concat_ws(stringsep,stringa,stringb,...)--返回值类型stringselectconcat_ws('.','www','iteblog','com')
扯20080808·2018-12-01 22:01

SparkSQL：Spark整合Hive

1.安装HiveHive的安装，可以参看Hadoop-Hive快速入门，这里不再重述2.拷贝Hive的配置文件拷贝$HIVE_HOME/conf/hive-site.xml文件到$SPARK_HOME/
PJ-Javis·2016-11-19 18:19

Hadoop-Hive快速入门

Hive是基于Hadoop构建的一套数据仓库分析系统，简单来说它可以把我们所熟悉的Sql语句翻译成MapReduce执行，但是Hive只能对表进行select操作，而不能进行insert、delete、update操作。Hive和Sqoop一样，只要你的Hadoop环境已经搭建好了，安装后就可立即使用。但是它有一个特点：就是你在哪个个目录下执行hive的命令进入到hive模式，它就会在该目录下生成
PJ-Javis·2016-11-06 10:54

hadoop-hive查询ncdc天气数据实例

使用hive查询ncdc天气数据在hive中将ncdc天气数据导入，然后执行查询shell，可以让hive自动生成mapredjob,快速去的想要的数据结果。1.在hive中创建ncdc表，这个表用来存放ncdc的数据createtablencdc(yearstring,monthstring,datastring,timestring,airstring,astring,bstring,cstr
MrCharles·2015-06-16 09:00

hive安装工作记录

hive，在安装的过程中，遇到了一些问题，由于我是yum安装的，网上的网友们一般发的都是手动安装的教程，所以在这里和大家分享一下我安装的经验，通过整理，我的安装步骤如下：    1、YUM安装hadoop-hive
malihappy2009·2011-08-09 10:31

hive安装工作记录

最近安装hive，在安装的过程中，遇到了一些问题，由于我是yum安装的，网上的网友们一般发的都是手动安装的教程，所以在这里和大家分享一下我安装的经验，通过整理，我的安装步骤如下：  1、YUM安装hadoop-hive
malihappy2009·2011-08-09 10:31

Hive资料整理系列 二 Hive安装及mysql做元数据库 --clouder版本

 Debian上安装： Java代码  $ sudo apt-get install hadoop-hive         redhat/centos上安装： Java代码  $ sudo yum install
wf1982·2011-07-28 14:00
上一页 1 下一页
按字母分类： ABCDEFGHIJKLMNOPQRSTUVWXYZ其他