hadoop本地模式部署_阿里云ECS服务器部署HADOOP集群（四）：Hive本地模式的安装...

本地模式需要采用MySQL数据库存储数据。

1 环境介绍

2 安装 Mysql

3 Hive 下载

/usr/local

将解压得到的目录改名为 hive

cd /usr/local

mv apache-hive-2.3.-bin/ hive/

4 添加 Hive 环境变量

在"/etc/profile"中添加内容：

export HIVE_HOME=/usr/local/hive

export PATH=$PATH:$HIVE_HOME/bin

重新加载环境：

source /etc/profile

5 修改 Hive 配置信息

cd $HIVE_HOME/conf

# 新建 hive-site.xml 文件, 或者复制已有的 hive-default.xml.templat 模版

vim hive-site.xml

配置可参考如下代码：

javax.jdo.option.ConnectionURL

jdbc:mysql://master:3306/hive?createDatabaseIfNotExist=true

JDBC connect string for a JDBC metastore

javax.jdo.option.ConnectionDriverName

com.mysql.jdbc.Driver

Driver class name for a JDBC metastore

javax.jdo.option.ConnectionUserName

root

username to use against metastore database

javax.jdo.option.ConnectionPassword

password

password to use against metastore database

6 配置Mysql

6.1 为 Hive 添加 mysql 连接器

tar -zxvf mysql-connector-java-5.1..tar.gz -C $HIVE_HOME/lib

6.2 启动并登陆 mysql shell

service mysql start

mysql -uroot -p

6.3 配置 mysql 允许 hive 接入：

# 将所有数据库的所有表的所有权限赋给 root 用户

grant all on *.* to root@localhost;

# 刷新mysql系统权限关系表

flush privileges;

7 启动 Hive

启动 hive 之前，确保已启动 HDFS 和 YARN。

start-all.sh

hive

在启动Hive时，有可能会出现Hive metastore database is not initialized的错误，这里给出解决方案。

解决Hive启动，Hive metastore database is not initialized的错误。出错原因：以前曾经安装了Hive或MySQL，重新安装Hive和MySQL以后，导致版本、配置不一致。解决方法是，使用schematool工具。Hive现在包含一个用于 Hive Metastore 架构操控的脱机工具，名为 schematool.此工具可用于初始化当前 Hive 版本的 Metastore 架构。此外，其还可处理从较旧版本到新版本的架构升级。所以，解决上述错误，你可以在终端执行如下命令:

schematool -dbType mysql -initSchema

执行后，再启动Hive，应该就正常了。

启动进入Hive的交互式执行环境以后，输入 show databases 会先显示如下

hive> show databases;

OK

default

Time taken: 7.312 seconds, Fetched: row(s)

8 安装完成

阿里云ECS服务器部署HADOOP集群系列：

阿里云ECS服务器部署HADOOP集群(六)：Flume 安装

本篇将在阿里云ECS服务器部署HADOOP集群(一):Hadoop完全分布式集群环境搭建的基础上搭建. 1 环境介绍 一台阿里云ECS服务器:master 操作系统:CentOS 7.3 Hadoop ...

阿里云ECS服务器部署HADOOP集群(七)：Sqoop 安装

本篇将在 阿里云ECS服务器部署HADOOP集群(一):Hadoop完全分布式集群环境搭建 阿里云ECS服务器部署HADOOP集群(二):HBase完全分布式集群搭建(使用外置ZooKeeper) 阿 ...

阿里云ECS服务器部署HADOOP集群(五)：Pig 安装

本篇将在阿里云ECS服务器部署HADOOP集群(一):Hadoop完全分布式集群环境搭建的基础上搭建. 1 环境介绍 一台阿里云ECS服务器:master 操作系统:CentOS 7.3 Hadoop ...

阿里云ECS服务器部署HADOOP集群(一)：Hadoop完全分布式集群环境搭建

准备: 两台配置CentOS 7.3的阿里云ECS服务器: hadoop-2.7.3.tar.gz安装包: jdk-8u77-linux-x64.tar.gz安装包: hostname及IP的配置: ...

阿里云ECS服务器部署HADOOP集群(三)：ZooKeeper 完全分布式集群搭建

本篇将在阿里云ECS服务器部署HADOOP集群(一):Hadoop完全分布式集群环境搭建的基础上搭建,多添加了一个 datanode 节点 . 1 节点环境介绍: 1.1 环境介绍: 服务器:三台阿里 ...

阿里云ECS服务器部署HADOOP集群(二)：HBase完全分布式集群搭建(使用外置ZooKeeper)

本篇将在阿里云ECS服务器部署HADOOP集群(一):Hadoop完全分布式集群环境搭建的基础上搭建,多添加了一个 datanode 节点 . 1 节点环境介绍: 1.1 环境介绍: 服务器:三台阿里 ...

thinkphp项目阿里云ECS服务器部署

[日记]thinkphp项目阿里云ECS服务器部署   项目本地开发告一段落.准备上传到服务器上测试 技术组成 thinkphp+mysql+阿里ECS  代码管理方式git 一.阿里ECS服务器配置 ...

阿里云ECS服务器部署Node.js项目全过程详解

本文详细介绍如何部署NodeJS项目到阿里云ECS上,以及本人在部署过程中所遇到的问题.坑点和解决办法,可以说是全网最全最详细的教程了.同时讲解了如何申请阿里云免费SSL证书,以及一台ECS服务器配置 ...

【日记】thinkphp项目阿里云ECS服务器部署

项目本地开发告一段落.准备上传到服务器上测试 技术组成 thinkphp+mysql+阿里ECS  代码管理方式git 一.阿里ECS服务器配置 1.因为线上已经有几个站点了.所以要配置ngnix多站 ...

随机推荐

tn文本分析语言(二) 基本语法

tn是desert和tan共同开发的一种用于匹配,转写和抽取文本的语言.解释器使用Python实现,代码不超过1000行. 本文主要介绍tn的基本语法.高级内容可以参考其他篇章.使用这样的语法,是为了 ...

常用API——日期型函数Date

上图 ·声明 var myDate = new Date(); //系统当前时间 var myDate = new Date(yyyy, mm, dd, hh, mm, ss); var myDate ...

PHP Web实时消息后台服务器推送技术---GoEasy

越来越多的项目需要用到实时消息的推送与接收,怎样用php实现最方便呢?我这里推荐大家使用GoEasy, 它是一款第三方推送服务平台,使用它的API可以轻松搞定实时推送! 浏览器兼容性:GoEasy推送 ...

C# Xml文件操作，解释见注释

using System; using System.Collections.Generic; using System.Linq; using System.Text; using System.T ...

dorado spring知识补充

一定要加context配置,无法扫描到注入@Componet的类 在app-context.xml添加一句代码

MyBatis+Spring 事务管理

原创作品,允许转载,转载时请务必以超链接形式标明文章 原始出处 .作者信息和本声明.否则将追究法律责任.http://kinglixing.blog.51cto.com/34 ...

POJ 2923 Relocation

题目大意:有n个物品,有两辆车载重分别是c1,c2.问需要多少趟能把物品运完. (1 ≤ Ci ≤ 100,1 ≤ n ≤ 10,1 ≤ wi ≤ 100). 题解:n小思状压.我们先把所有一次可以拉 ...

(转载)图片左右滚动控件(带倒影)——重写Gallery

今天在网上找了些资料,做了一个图片左右滚动的Demo,类似幻灯片播放,同时,图片带倒影效果,运行效果如下图: 实现方式是重写Gallery,使用自定义的Gallery来实现这一效果,工程一共三个文件, ...

【openstack N版】——云主机调整大小\冷迁移

一.先决条件 云主机冷迁移,即:将一台云主机从一个计算节点上,迁移到另外一个计算节点上.因为环境原因,所以我们需要准备两个计算节点. 1.1准备环境 在控制节点上,安装一个计算节点 #在控制节点安装n ...

subprocess实时获取结果和捕获错误

需要调用命令行来执行某些命令,主要是用 subprocess 实时获取结果和捕获错误,发现subprocess的很多坑. subprocess 普通获取结果方式,其需要命令完全执行才能返回结果: im ...