E-COM-NET
首页
在线工具
Layui镜像站
SUI文档
联系我们
推荐频道
Java
PHP
C++
C
C#
Python
Ruby
go语言
Scala
Servlet
Vue
MySQL
NoSQL
Redis
CSS
Oracle
SQL Server
DB2
HBase
Http
HTML5
Spring
Ajax
Jquery
JavaScript
Json
XML
NodeJs
mybatis
Hibernate
算法
设计模式
shell
数据结构
大数据
JS
消息中间件
正则表达式
Tomcat
SQL
Nginx
Shiro
Maven
Linux
字符串处理hive
6.1.CentOS7下安装Sqoop安装与使用
python编程快速上手(持续更新中…)推荐系统基础一、Sqoop介绍二、Sqoop原理三、Sqoop安装事前准备安装包解压安装四、Sqoop使用1、MySQL->HDFS2、创建job3、导入数据到
Hive
IT瘾君
·
2024-01-09 15:29
推荐系统-大数据
sqoop
mysql
hadoop
大数据学习6-Sqoop安装与使用
sqoop搭建还是挺简单的,前提是hadoop与
hive
搭建完成上传解压首先下载sqoop,sqoop的版本是1.4.7,sqoop-1.4.7.bin__hadoop-2.6.0.tar.gz,提取码
asXt
·
2024-01-09 15:57
大数据
笔记
linux
sqoop
基于spark的
Hive
2Pg数据同步组件
一、背景
Hive
中的数据需要同步到pg供在线使用,通常sqoop具有数据同步的功能,但是sqoop具有一定的问题,比如对数据的切分碰到数据字段存在异常的情况下,数据字段的空值率高、数据字段重复太多,影响
zcc_0015
·
2024-01-09 15:53
spark
大数据
分布式
Hive
基础知识(三):Linux系统下的MySQL安装
1)检查当前系统是否安装过MySQL[zzdq@hadoop100
hive
]$rpm-qa|grepmariadbmariadb-libs-5.5.68-1.el7.x86_64#如果存在,就用下面这条命令卸载
依晴无旧
·
2024-01-09 13:26
hive
linux
mysql
Hive
基础知识(二):
Hive
安装部署教程
1.安装
Hive
1)把apache-
hive
-3.1.2-bin.tar.gz上传到linux的/opt/software目录下2)解压apache-
hive
-3.1.2-bin.tar.gz到/opt
依晴无旧
·
2024-01-09 13:25
大数据
hive
hadoop
数据仓库
Hive
基础知识(一):
Hive
入门与
Hive
架构原理
1.什么是
Hive
1)
hive
简介
Hive
:由Facebook开源用于解决海量、结构化日志的数据统计工具。
依晴无旧
·
2024-01-09 13:25
大数据
hive
架构
hadoop
Hive
基础知识(个人总结)
声明:1.本文为我的个人复习总结,并非那种从零基础开始普及知识内容详细全面,言辞官方的文章2.由于是个人总结,所以用最精简的话语来写文章3.若有错误不当之处,请指出一.基础
Hive
的特点:
Hive
的执行延迟比较高
hellosrc | forward
·
2024-01-09 13:54
Hive
大数据
1024程序员节
hive
大数据
hive
基础知识大全
一、
Hive
基本概念1.1
hive
是什么
hive
是基于hadoop的一个数仓分析工具,
hive
可以将hdfs上存储的结构化的数据,映射成一张表,然后让用户写HQL(类SQL)来分析数据telupdown138383843813451567138383843953451567138383844012411657713838384413453157571383838434353551567567
不爱吃鱼的馋猫
·
2024-01-09 13:23
hive
数据仓库
Hive
基础知识笔记(含MySQL metastore伪分布式安装配置流程)
该笔记涉及代码:https://github.com/hackeryang/Hadoop-Exercises/tree/master/src/main/java/
Hive
一、介绍1.
Hive
是一个构建在
书忆江南
·
2024-01-09 13:52
大数据
Hive
Hive
基础知识
1.
Hive
的基本概念1.1
hive
的简介什么是
hive
?1)
Hive
是基于Hadoop的一个数据仓库工具,将结构化的数据文件映射为一张数据库的数据表,并且提供类SQL查询功能。
巷子里的猫X
·
2024-01-09 13:52
数据分析
hive
大数据
hadoop
大数据开发:
Hive
基础知识点介绍
Hadoop生态下的各个组件,
Hive
的出现是为了解决海量日志数据分析而诞生,最初出自Facebook,后来归到了Apache旗下进行开源,本质上来说,
Hive
是一个帮助提升数据处理的工具。
加米谷大数据张老师
·
2024-01-09 13:52
大数据
数据库
hive
数据仓库
Hive
基础知识
1.
Hive
和HBase的区别HBase是一个用来处理HDFS上文件的NoSQL数据库,建立于HDFS之上。
辰阳星宇
·
2024-01-09 13:22
#
Hive
hive
hadoop
big
data
基于hadoop的
hive
数据仓库基础操作知识整理
第1章
Hive
基本概念1.1什么是
Hive
hive
简介
Hive
:由Facebook开源用于解决海量结构化日志的数据统计工具。
大包丫
·
2024-01-09 13:51
hadoop
hive
大数据
hive
在mysql中总是不创建元数据库的解决办法
hive
在mysql中总是不创建元数据库的解决办法这两天打算好好捣鼓捣鼓
hive
sql。遂搞了台centos搭环境,搭环境嘛,当然是怎么简单怎么来,怎么快怎么来。
黄道婆
·
2024-01-09 13:21
bigdata
#
hive
hive
Hadoop的数据仓库
Hive
的基础知识和安装部署
1、数据仓库和
Hive
数据仓库是为了协助分析报告,支持决策,为需要业务智能的企业提供业务流程的改进和指导,从而节省时间和成本,提高质量。
姠惢荇者
·
2024-01-09 13:21
大数据
大数据
数据仓库
Hive
数据导入
Hive
基础知识(四):
Hive
元数据配置到 MySQL
1.拷贝驱动将MySQL的JDBC驱动拷贝到
Hive
的lib目录下[zzdq@hadoop100software]$cp/home/atguigu/mysql-connector-java-5.1.37
依晴无旧
·
2024-01-09 13:50
大数据
hive
mysql
hadoop
在企业网中部署SDN
2、用户名/密码:
hive
/
hive
。进入桌面以后,“Ctrl+Alt+t”打开命令终端后可以根据自己的环境,去更改为环
huangzwei
·
2024-01-09 13:16
网络
深度学习常用的下载链接/下载地址(CUDA/cuDNN)
1.CUDA各个版本的下载链接https://developer.nvidia.com/cuda-toolkit-arc
hive
2.cuDNN各个版本的下载链接https://developer.nvidia.com
Mobius8086
·
2024-01-09 12:56
深度学习
深度学习
人工智能
Spark与
Hive
的集成与互操作
ApacheSpark和Apache
Hive
是大数据领域中两个非常流行的工具,用于数据处理和分析。Spark提供了强大的分布式计算能力,而
Hive
是一个用于查询和管理大规模数据的数据仓库工具。
晓之以理的喵~~
·
2024-01-09 11:30
Spark
spark
hive
大数据
C语言课堂笔记
与字符串常量"a",一个占一字节,一个是2字节初始化用char类型数据初始化字符串数组(1)逐字符初始化不能整体打印输出用字符串常量初始化储存四个最大长度为7的字符串用字符指针处理字符串(2)运行结果
字符串处理
的常用函数
W`hite
·
2024-01-09 10:03
c语言
笔记
hive
sql的常用日期处理函数总结
1)date_format函数(根据格式整理日期)作用:把一个字符串日期格式化为指定的格式。selectdate_format('2017-01-01','yyyy-MM-ddHH:mm:ss'); --日期字符串必须满足yyyy-MM-dd格式 结果:2017-01-0100:00:002)date_add、date_sub函数(加减日期)作用:把一个字符串日期格式加一天、减一天。selec
*Snowgrass*
·
2024-01-09 09:43
HIVE
SQL数据分析常用案例总结
Hive
计算最大连续登陆天数3个常考的SQL数据分析题(干货建议收藏)sql数据分析案例和学习资料https://mp.weixin.qq.com/mp/appmsgalbum?
fragrans
·
2024-01-09 09:41
Hive
sql
数据分析
big
data
mysql存储引擎
主要的存储引擎包括Myisam、InooDB、BDB、MEMMORY、ARC
HIVE
、CSV等,其中InooDB和BDB引擎提供事务安全表,其他是非安全的,一般采用InooDB引擎。
程序媛-jjl
·
2024-01-09 08:56
mysql
Hive
操作命令上手手册
内容来自于《大数据
Hive
离线计算开发实战》
Hive
原理
Hive
是一个基于Hadoop的数据仓库和分析系统,用于管理和查询大型数据集。
枫叶梨花
·
2024-01-09 08:50
Hive知识圈
hive
hadoop
数据仓库
PySpark-Spark SQL基本介绍
目录SparkSQL基本介绍SparkSQL特点SparkSQL与
Hive
的异同SparkSQL的数据结构SparkSQL的入门创建SparkSession对象DataFrame详解DataFrame基本介绍
Sisi525693
·
2024-01-09 07:37
spark
大数据
分布式
Hive
查询之函数(二)
炸裂函数把一个容器的多个数据炸裂出单独展示:explode(容器)炸裂函数配合侧视图使用如下格式:select原表别名.字段名,侧视图名.字段名from原表原表别名lateralviewexplode(要炸开的字段)侧视图名as字段名;--UDTF:一进多出selectexplode(array('binzi','666','888'));selectexplode(map('a',1,'b',2
Sisi525693
·
2024-01-09 07:36
hive
hadoop
数据仓库
Hive
查询之常用语法
目录语法结构基本查询知识点数据准备练习多表查询数据准备练习
hive
排序操作示例抽样查询知识点示例正则模糊查询union联合查询CTE表达式内置虚拟列语法结构select[distinct]字段名from
Sisi525693
·
2024-01-09 07:35
hive
hadoop
数据仓库
Redis的常用命令
:1、基于内存存储,读写性能高redis官网:Redis中文网Redis下载与安装Redis安装包分为Windows版和Linux版windows版下载地址:Releases·microsoftarc
hive
suweijie768
·
2024-01-09 07:27
redis
数据库
缓存
hive
的基本操作
最近新学了
hive
,想通过写文章的方式对所学知识进行巩固,同时希望可以帮助到大家
Hive
是基于Hadoop的一个数据仓库工具1.创建数据库(创建方法是和Mysql一样的)createdatabase数据库名字
暴打小赵
·
2024-01-09 06:49
hive
hive
数据库
mysql
实验6 熟悉
Hive
的基本操作
一、实验目的(1)理解
Hive
作为数据仓库在Hadoop体系结构中的角色。(2)熟练使用常用的
Hive
QL。
Z.Q.Feng
·
2024-01-09 06:47
实验报告
大数据技术与原理
实验报告
hive
大数据
【
Hive
】
Hive
基本操作
Hive
定义了一套自己的SQL,简称HQL,它与关系型数据库的SQL略有不同,但支持了绝大多数的语句如DDL、DML以及常见的聚合函数、连接查询、条件查询。
New soul~
·
2024-01-09 06:47
hive
基本操作与应用
1、通过hadoop上的
hive
完成WordCount启动hadoop2、Hdfs上创建文件夹/3、上传文件至hdfs4、启动
Hive
5、创建原始文档表6、导入文件内容到表docs并查看7、用HQL进行词频统计
weixin_34416649
·
2024-01-09 06:16
大数据
物理机搭建
hive
一、修改Hadoop配置修改core-site.xml配置yarn-site.xml分发文件,然后重启集群二、
Hive
解压安装上传文件添加
hive
环境便量,source生效启动高可用集群,启动
hive
三
DIY……
·
2024-01-09 06:45
hive
hadoop
数据仓库
Hive
基本操作
hive
简单认识
Hive
是建立在HDFS之上的数据仓库,所以
Hive
的数据全部存储在HDFS上。
X晓
·
2024-01-09 06:45
hive
big
data
mysql
Hive
的 安装与部署
目录1安装MySql2安装
Hive
3
Hive
元数据配置到MySql4启动
Hive
Hive
官网1安装MySql为什么需要安装MySql?
夏木夕
·
2024-01-09 06:41
#
大数据
hive
hadoop
Hive
学习(14)json解析get_json_object()函数
一、语法目的:在一个标准JSON字符串中,按照指定方式抽取指定的字符串。stringget_json_object(string,string)参数说明json:必填。STRING类型。标准的JSON格式对象,格式为{Key:Value,Key:Value,…}。如果遇到英文双引号("),需要用两个反斜杠(\)进行转义。如果遇到英文单引号('),需要用一个反斜杠(\)进行转义。path:必填。ST
一个天蝎座 白勺 程序猿
·
2024-01-09 06:40
hive
学习
json
sql
数据仓库
熟悉
Hive
的基本操作
4、实验步骤(一)创建一个内部表stocks,字段分隔符为英文逗号,表结构下所示。col_namedata_typeexchangestringsymbolstringymdstringprice_openfloatprice_highfloatprice_lowfloatprice_closefloatvolumeintprice_adj_closefloat创建内部表stocks:create
cwn_
·
2024-01-09 06:39
大数据
hive
hadoop
数据仓库
大数据
Hive
中的四种排序
1.orderby全局排序,只有一个Reducer(多个reducer无法保证全局有序),会导致当输入规模较大时,消耗较长的计算时间
hive
.mapred.mode=strict模式下必须指定limit
Young_IT
·
2024-01-09 06:38
大数据开发
hive
hadoop
数据仓库
某大厂大数据开发-外包面试
笔试题:
hive
-sql一个表tbl:c_idu_idscore用SQL计算每个班级top5学生的平均分表A(uid,bid),uid代表:用户idbid代表:uid关注的用户id表数据示例:uidbid12
劝学-大数据
·
2024-01-09 06:42
面试
职场和发展
大数据
非小米电脑安装小米电脑管家
博客地址非小米电脑安装小米电脑管家https://xue6ing.cn/arc
hive
s/fei-xiao-mi-dian-nao-an-zhuang-xiao-mi-dian-nao-guan-jia
xB77
·
2024-01-09 03:33
电脑
JAVA的下载安装教程(保姆级)
的下载jdk下载路径https://www.oracle.com/cn/java/technologies/downloads/#jdk19-windows如果想下载以往的历史版本可点击Javaarc
hive
xB77
·
2024-01-09 03:03
java
开发语言
jvm
部署一款开源的交互审计系统—Next Terminal
博客地址部署一款开源的交互审计系统—NextTerminal-雪饼(xue6ing.cn)https://xue6ing.cn/arc
hive
s/bu-shu-yi-kuan-kai-yuan-de-jiao-hu-shen-ji-xi-tong
xB77
·
2024-01-09 03:24
开源
linux
windows
ssh
嵌入式arm linux Java运行环境搭建和注意事项
不知到就只有一个个试试)(下载地址:[link](https://www.oracle.com/java/technologies/java-se-embedded-arc
hive
-d
Amu-Feoss
·
2024-01-09 02:07
嵌入式Linux
E: Could not get lock /var/cache/apt/arc
hive
s/lock - open (11: Resource temporarily unavailable)解决办法
在ubuntu系统中使用apt-get安装软件包时,会出现以下错误:E:Couldnotgetlock/var/cache/apt/arc
hive
s/lock-open(11:Resourcetemporarilyunavailable
小陈同学123
·
2024-01-09 02:06
Seatunnel部署及一些出错
先确保有Java,确保版本大于1.8.01.设置JAVA_HOME2.下载Seatunnel,在指定文件夹路径下输入以下代码exportversion="2.3.0"wget"https://arc
hive
.apache.org
underworld33
·
2024-01-09 01:33
linux部署
服务器
java
linux
Ubuntu 24.04 Preview 版安装 libtinfo5
1.安装libtinfo5wgethttp://arc
hive
.ubuntu.com/ubuntu/pool/universe/n/ncurses/libtinfo5_6.4-2_amd64.deb
engchina
·
2024-01-08 23:56
LINUX
ubuntu
linux
libtinfo5
mysql之四大引擎、账号管理以及建库
文章目录1、数据库存储引擎1.1.四大引擎InnoDBMyISAMArc
hive
2、数据库管理3.数据库表管理1.三大范式2.基本数据类型值类型选择标识符4.账号管理1.相同2.不同5.思维导图1、数据库存储引擎
123456G~
·
2024-01-08 21:51
mysql
数据库
C语言 strcat 函数 - C语言零基础入门教程
>C语言基础入门一.strcat函数简介前面文章中介绍了关于字符串拷贝的相关函数,例如:strcpy函数/strcpy_s函数/memcpy函数/memcpy_s函数等等,今天我们将介绍一个新的C语言
字符串处理
函数
猿说编程
·
2024-01-08 18:06
Hive
计算身份证年龄
year(from_unixtime(unix_timestamp(),"yyyy-MM-dd"))-year(to_date(from_unixtime(unix_timestamp(substr(usr_id_card,7,8),'yyyyMMdd'),'yyyy-MM-dd')))
语兴数据
·
2024-01-08 18:57
大数据
hive
4个聚合增强函数介绍
就是通过指定的多个维度进行查询的.即:你写了哪些维度,它就按照哪些维度进行聚合计算.1.2.细节:维度要用小括号括起来,如果是1个维度,小括号可以省略,但是建议写上.1.3.groupingsets函数在
hive
MSJ3917
·
2024-01-08 16:03
hive
hadoop
数据仓库
上一页
28
29
30
31
32
33
34
35
下一页
按字母分类:
A
B
C
D
E
F
G
H
I
J
K
L
M
N
O
P
Q
R
S
T
U
V
W
X
Y
Z
其他