E-COM-NET
首页
在线工具
Layui镜像站
SUI文档
联系我们
推荐频道
Java
PHP
C++
C
C#
Python
Ruby
go语言
Scala
Servlet
Vue
MySQL
NoSQL
Redis
CSS
Oracle
SQL Server
DB2
HBase
Http
HTML5
Spring
Ajax
Jquery
JavaScript
Json
XML
NodeJs
mybatis
Hibernate
算法
设计模式
shell
数据结构
大数据
JS
消息中间件
正则表达式
Tomcat
SQL
Nginx
Shiro
Maven
Linux
字符串处理hive
经验杂谈——CUDA以及CUDNN安装配置(WIN10为例)
NVIDIA控制面板右键如同所示:2.我们将看见控制面板的主页点击帮助3.显示如下,点击组件我们可以看见该显卡支持CUDA最高版本号二.此时已知该显卡支持的最高版本号,进入官网下载CUDAToolkitArc
hive
小小杨树
·
2023-12-25 02:10
Mac安装配置MySQL
1.MySQL->MySQLCommunityServer然后SelectOperatingSystem:macOS选择macOS11(x86,64-bit),DMGArc
hive
文件下载2.打开刚下载的
涓涓细流汇聚成海
·
2023-12-24 23:00
大数据学习笔记——数据仓库
hive
重要的总结
1、外部表和内部表
Hive
表分为两类,即内部表和外部表。
新宿一次狼
·
2023-12-24 23:27
大数据
大数据
大数据高级开发工程师——
Hive
学习笔记(3)
文章目录
Hive
提高篇
Hive
的使用
Hive
的常用函数1.系统内置函数2.数值计算取整函数:round向下取整函数:floor向上取整函数:ceil向上取整函数:ceiling取随机数函数:rand3.
讲文明的喜羊羊拒绝pua
·
2023-12-24 23:26
大数据
hive
big
data
hadoop
hql
Hive
学习笔记(一)——
Hive
的入门
文章目录
Hive
基本概念1.1什么是
Hive
1.2
Hive
的优缺点1.2.1优点1.2.2缺点1.3
Hive
架构原理1.4
Hive
和数据库比较1.4.1查询语言1.4.2数据存储位置1.4.3数据更新1.4.4
Alienware^
·
2023-12-24 23:56
#
Hive
数据仓库
hive
【Hadoop学习笔记】(二)——
Hive
的原理及使用
一、
Hive
概述
Hive
是一个在Hadoop中用来处理结构化数据的数据仓库基础工具。
wanger61
·
2023-12-24 23:25
大数据开发
hadoop
hive
大数据
四、Hadoop学习笔记————各种工具用法
hive
基本hql语法Sqoop(发音:skup)是一款开源的工具,主要用于在Hadoop(
Hive
)与传统的数据库(mysql、postgresql...)间进行数据的传递,可以将一个关系型数据库(例如
weixin_30528371
·
2023-12-24 23:25
大数据
数据库
Hive
学习笔记(1)——
Hive
原理初探
文章目录前言一、
hive
的特点二、
hive
体系架构及基本原理三、
Hive
的存储四、总结前言相信大家通过学习MapReduce,已经认识到hadoop利用多台廉价机器集群进行并行计算的优势,了解了HDFS
Zhou.Y.M
·
2023-12-24 23:55
Hadoop
hive
hadoop
大数据
mapreduce
Hadoop基础学习十一(
hive
语法)
文章目录1.map阶段2.reduce阶段3.where2.join3.groupby4.orderby5.sortby6.if(判断条件,成立的返回值,否则的返回值)7.casewhenxxthenyyelsezzend8、函数1)split2)concat_ws3)datediff4)concat5)向下取整函数floor6)日期增加函数date_add7)类型转换函数cast8)explod
一只小呆呆
·
2023-12-24 23:55
Hadoop
字符串
hive
大数据
hadoop
学习笔记
Hive
(一)——
Hive
简介
一、
Hive
设计思想(了解)Facebook用户社交数据存储与处理Facebook是美国的一个社交网站,于2004年2月4日上线。主要创始人为美国人马克·扎克伯格。
别呀
·
2023-12-24 23:55
hive
big
data
【
Hive
笔记】1——
Hive
入门
1.什么是
Hive
hive
是由Facebook开源用于解决海量结构化日志的数据统计
Hive
是基于Hadoop的一个数据仓库工具,可以将结构化的数据文件映射为一张表,并提供sql查询功能。
sdut菜鸟
·
2023-12-24 23:55
hive
hive
hadoop
大数据
Hadoop学习笔记(17)
Hive
的数据类型和文件编码
一、
Hive
的常用内部命令1、有好几种方式可以与
Hive
进行交互。此处主要是命令行界面(CLI)。
柏冉看世界
·
2023-12-24 23:24
hadoop
Hive
学习笔记 ——
Hive
的数据类型
Hive
本质上是一个数据库,可以创建表,表有列组成,而列支持的主要类型有:基本数据类型、复杂数据类型、时间数据类型。
慢行慢行
·
2023-12-24 23:24
Hive
大数据
Hadoop
Hive
大数据从入门到精通(超详细版)之
Hive
的分区表,带你理解
Hive
当中的高阶玩法!!!
前言嗨,各位小伙伴,恭喜大家学习到这里,不知道关于大数据前面的知识遗忘程度怎么样了,又或者是对大数据后面的知识是否感兴趣,本文是《大数据从入门到精通(超详细版)》的一部分,小伙伴们如果对此感谢兴趣的话,推荐大家按照大数据学习路径开始学习哦。以下就是完整的学习路径哦。↓↓↓↓↓↓↓↓↓↓↓↓↓↓↓↓↓↓↓↓↓↓↓↓↓↓↓↓↓↓大数据从入门到精通文章体系!!!!!!!!!!!!!!↑↑↑↑↑↑↑↑↑↑
木 木 水.
·
2023-12-24 23:52
大数据从入门到精通(超详细版)
大数据
hive
hadoop
hive
tez出现java堆内存溢出进行调优
运行
hive
任务的时候出现了错误,日志如下:ERROR:FAILED:ExecutionError,returncode2fromorg.apache.hadoop.
hive
.ql.exec.tez.TezTask.Vertexfailed
旺旺_865f
·
2023-12-24 17:36
Start kafka connect
启动kafkabroker先下载从官网下载kafkaconsole包,wget"https://arc
hive
.apache.org/dist/kafka/0.11.0.1/kafka_2.12-0.11.0.1
yehongyu_2018
·
2023-12-24 17:50
【
Hive
_04】分区分桶表以及文件格式
1.1分区表基本语法(1)创建分区表(2)分区表读写数据(3)分区表基本操作1.2二级分区1.3动态分区2、分桶表2.1分桶表的基本语法2.2分桶排序表3、文件格式与压缩3.1Hadoop压缩概述3.2
Hive
温欣2030
·
2023-12-24 16:41
hive
hadoop
数据仓库
十八、本地配置
Hive
1、配置MYSQLmysql>alteruser'root'@'localhost'identifiedby'Yang3135989009';QueryOK,0rowsaffected(0.00sec)mysql>grantallon*.*to'root'@'%';QueryOK,0rowsaffected(0.00sec)mysql>flushprivileges;QueryOK,0rowsaf
弦之森
·
2023-12-24 16:40
Hadoop
hive
hadoop
数据仓库
hdfs
yarn
C语言strcpy函数用法
今天,让我们一起深入了解C语言中的strcpy函数,这是一个在
字符串处理
中非常常用的函数。无论你是初学者还是有一定经验的开发者,正确使用strcpy函数都是掌握C语言字符串操作的基础。
weixin_836869520
·
2023-12-24 15:14
c语言
开发语言
控制map个数与性能调优参数
本文转自:涤生手记本系列几章系统地介绍了开发中
Hive
常见的用户配置属性(有时称为参数,变量或选项),并说明了哪些版本引入了哪些属性,常见有哪些属性的使用,哪些属性可以进行
Hive
调优,以及如何使用的问题
xuanxing123
·
2023-12-24 13:13
Hive
分区表简介
Hive
中的分区表分为两种:静态分区和动态分区。1.静态分区:可以根据PARTITIONEDBY创建分区表,一个表可以拥有一个或者多个分区,每个分区以文件夹的形式单独存在表文件夹的目录下。
K_un
·
2023-12-24 12:39
Hive
优化(十三)-小文件进行合并
小文件进行合并在Map执行前合并小文件,减少Map数:Combine
Hive
InputFormat具有对小文件进行合并的功能(系统默认的格式)。
Hive
InputFormat没有对小文件合并功能。
bigdata张凯翔
·
2023-12-24 12:08
基于Hue,Dolphinscheduler,
HIVE
分析数据仓库层级实现及项目需求案例实践分析
目录一、数仓各个层级及作用1,ODS层(OperationDataStore-源数据层)2,DW层(DataWarehouse-数据仓库层)(1)DWD(DataWarehouseDetail-明细数据层)(2)DWM(DataWarehouseMiddle-明细数据层)(3)DWS(DataWarehouseService服务数据层)3,ADS层(ApplicationDataStore-数据应
Len°
·
2023-12-24 11:32
Hadoop
hadoop
big
data
hive
《PySpark大数据分析实战》-04.了解Spark
对大数据技术栈Hadoop、
Hive
、Spark、Kafka等有深入研究,对Data
wux_labs
·
2023-12-24 10:32
PySpark大数据分析实战
数据分析
数据挖掘
大数据
数据科学
PySpark
《PySpark大数据分析实战》-06.安装环境准备
对大数据技术栈Hadoop、
Hive
、Spark、Kafka等有深入研究,对Data
wux_labs
·
2023-12-24 10:32
PySpark大数据分析实战
数据分析
数据挖掘
大数据
数据科学
PySpark
《PySpark大数据分析实战》-17.云服务模式Databricks介绍运行作业
对大数据技术栈Hadoop、
Hive
、Spark、Kafka等有深入研究,对Data
wux_labs
·
2023-12-24 10:32
PySpark大数据分析实战
数据分析
数据挖掘
大数据
数据科学
PySpark
《PySpark大数据分析实战》-02.了解Hadoop
对大数据技术栈Hadoop、
Hive
、Spark、Kafka等有深入研究,对Data
wux_labs
·
2023-12-24 10:02
PySpark大数据分析实战
数据分析
数据挖掘
大数据
数据科学
《PySpark大数据分析实战》-01.关于数据
对大数据技术栈Hadoop、
Hive
、Spark、Kafka等有深入研究,对Data
wux_labs
·
2023-12-24 10:01
PySpark大数据分析实战
数据分析
数据挖掘
大数据
数据科学
《PySpark大数据分析实战》-18.什么是数据分析
对大数据技术栈Hadoop、
Hive
、Spark、Kafka等有深入研究,对Data
wux_labs
·
2023-12-24 10:01
PySpark大数据分析实战
数据分析
数据挖掘
大数据
数据科学
PySpark
Hive
学习笔记(二)——
Hive
的安装
文章目录
Hive
安装2.1
Hive
安装地址2.2
Hive
安装部署2.3将本地文件导入
Hive
案例2.4MySql安装2.4.1安装包准备2.4.2安装MySql服务器2.4.3安装MySql客户端2.4.4MySql
Alienware^
·
2023-12-24 08:53
#
Hive
hive
在虚拟机中执行
Hive
命令该如何操作呢?
前言前段时间在学习
hive
,之前是通过hue进行编程的,但是由于设备问题,网络连接不顺畅,使用感很不好,又不想再安装客户端了,于是学习了一下怎么在虚拟机中执行
hive
命令并作了简单的记录。
纪筱白
·
2023-12-24 08:53
Hive
Hadoop+
Hive
学习笔记-4
Hadoop集群搭建配置三台虚拟机之间的免密登录1切换到root用户:crontab-e在第一行写入:*/5****/usr/sbin/ntpdatentp1.aliyun.com三台机器都一同操作,这一步让三台机器的时间服务器一致2关闭selinux:vim/etc/selinux/configvim编辑器打开文件,把里面的SELINUX值修改为disabled这一步是关闭selinuxseli
fwings260
·
2023-12-24 08:22
Hadoop
Hive
hadoop学习笔记(五)
Hive
安装部署
Hive
安装部署
Hive
安装及配置配置已经完成,在此处启动hadoop集群
Hive
常用命令将本地文件导入
Hive
案例安装MySql
Hive
元数据配置到MySql
Hive
安装及配置下载地址:https:/
So.j
·
2023-12-24 08:22
hadoop学习笔记
大数据
hive
hadoop
hive
企业级调优策略之CBO,谓词下推等优化
测试所用到的数据参考:原文链接:https://blog.csdn.net/m0_52606060/article/details/135080511本教程的计算环境为
Hive
onMR。
Appreciate(欣赏)
·
2023-12-24 07:26
hive
hive
hadoop
数据仓库
FaceBook Redex使用总结
Redex踩坑全集第一步安装Redex安装以下前置条件sudoapt-getinstall\g++\automake\autoconf\autoconf-arc
hive
\libtool\libboost-all-dev
topone37
·
2023-12-24 07:52
SpringBoot 3 集成
Hive
3
*+
Hive
3.
在奋斗的大道
·
2023-12-24 07:46
springBoot学习笔记
Java架构专栏
hadoop
hive
hadoop
数据仓库
Hadoop入门学习笔记——六、连接到
Hive
pwd=5ay8Hadoop入门学习笔记(汇总)目录六、连接到
Hive
6.1.使用
Hive
的Shell客户端6.2.使用Beeline客户端连接
Hive
Server2操作
Hive
6.3.使用
faith瑞诚
·
2023-12-24 07:10
大数据
学习笔记
hadoop
学习
笔记
hive
大数据
Hadoop入门学习笔记——五、在虚拟机中部署
Hive
pwd=5ay8Hadoop入门学习笔记(汇总)目录五、在虚拟机中部署
Hive
5.1.在node1虚拟机安装MySQL5.2.配置Hadoop5.3.下载并加压
Hive
5.4.下载MySQL
faith瑞诚
·
2023-12-24 07:09
大数据
学习笔记
hadoop
学习
笔记
Hadoop入门学习笔记——七、
Hive
语法
pwd=5ay8Hadoop入门学习笔记(汇总)目录七、
Hive
语法7.1.数据库相关操作7.1.1.创建数据库7.1.2.选择数据库7.1.3.描述数据库详细信息7.1.4.创建数据库并指
faith瑞诚
·
2023-12-24 07:37
大数据
学习笔记
hadoop
学习
笔记
hive
大数据
pygrib
https://www.cnblogs.com/kallan/arc
hive
/2016/01/26/5160017.htmlhttps://www.cnblogs.com/sunshine8/p/7815216
榴莲气象
·
2023-12-24 06:20
数据质量监控框架及解决方案总结
概述随着业务发展和数据量的增加,大数据应用开发已成为部门应用开发常用的开发方式,由于部门业务特点的关系,spark和
hive
应用开发在部门内部较为常见。
坨坨的大数据
·
2023-12-24 05:41
黑苹果 安装教程+工具包(EFI引导文件+dmg镜像+工具)
完整黑苹果安装指南,苹果EFI引导文件等相关资源一应俱全.https://fostmar.online/arc
hive
s/445/EFI引导文
单丽尔
·
2023-12-24 04:09
数码科技
系统架构
技本功|
Hive
优化之监控(三)
Hive
是大数据领域常用的组件之一,主要是大数据离线数仓的运算,关于
Hive
的性能调优在日常工作和面试中是经常涉及的一个点,因此掌握一些
Hive
调优是必不可少的技能。
云掣YUNCHE
·
2023-12-24 03:15
技术文档
数据库
运维
hive
大数据
mysql
技本功|
Hive
优化之Spark执行引擎参数调优(二)
Hive
是大数据领域常用的组件之一,主要是大数据离线数仓的运算,关于
Hive
的性能调优在日常工作和面试中是经常涉及的的一个点,因此掌握一些
Hive
调优是必不可少的一项技能。
云掣YUNCHE
·
2023-12-24 03:44
技术文档
spark
hive
Pytorch的C++端(libtorch)在Windows中的使用
https://oldpan.me/arc
hive
s/pytorch-windows-libtorch
蒋豆芽
·
2023-12-24 02:25
Java-jar包的创建与运行
jar包的概念JAR文件的全称是JavaArc
hive
File,意思是Java档案文件。是一种压缩文件,与常见的ZIP压缩文件兼容。
得过且过的勇者y
·
2023-12-24 01:16
java
java
jar
P1026 [NOIP2001 提高组] 统计单词个数-
字符串处理
与DP
[NOIP2001提高组]统计单词个数-洛谷难点在于一个字母不能再用,this在不划分时,若单词为thisthhisis1-4有this(th),his,is也就是三个,可以倒着推4有0个,34有1个,234有2个,1234有三个,也就是倒着推推到一个新位置时,只要这个位置包含了一个新的字符串,那么数量加一即可,且只能加1,用了一个就不能用,这样我们就处理出来了,i--j字符串的个数,且互不影响,
秦三码
·
2023-12-23 23:02
动态规划
NOIP
Hive
存储与压缩
格式(推荐)Parquet格式对比压缩ORC——ZLIB压缩ORC——SNAPPY压缩Parquet——GZIP压缩Parquet——SNAPPY压缩总结本文中用到的数据源下载:log.data存储格式
Hive
月亮给我抄代码
·
2023-12-23 22:28
Hive
杂谈
hive
hadoop
大数据
Hive
存储格式和压缩算法
Hive
存储格式和压缩算法在实际的项目开发当中,
hive
表的存储格式一般选择:ORC或PARQUET,压缩算法一般选择Zlib和SNAPPY存储格式分类逻辑表中的数据,最终需要落到磁盘上,以文件的形式存储
Kazi_1024
·
2023-12-23 22:58
Hive
hive
Hive
文件压缩说明(转)
为什么要压缩在
Hive
中对中间数据或最终数据做压缩,是提高数据吞吐量和性能的一种手段。对数据做压缩,可以大量减少磁盘的存储空间,比如基于文本的数据文件,可以将文件压缩40%或更多。
大怀特
·
2023-12-23 22:57
bigdata
database
hive
hadoop
big
data
上一页
39
40
41
42
43
44
45
46
下一页
按字母分类:
A
B
C
D
E
F
G
H
I
J
K
L
M
N
O
P
Q
R
S
T
U
V
W
X
Y
Z
其他