E-COM-NET
首页
在线工具
Layui镜像站
SUI文档
联系我们
推荐频道
Java
PHP
C++
C
C#
Python
Ruby
go语言
Scala
Servlet
Vue
MySQL
NoSQL
Redis
CSS
Oracle
SQL Server
DB2
HBase
Http
HTML5
Spring
Ajax
Jquery
JavaScript
Json
XML
NodeJs
mybatis
Hibernate
算法
设计模式
shell
数据结构
大数据
JS
消息中间件
正则表达式
Tomcat
SQL
Nginx
Shiro
Maven
Linux
hive日期函数
运维笔记:Linux(CentOS8)免编译安装mysql5.7.33最新版本
最新版本下载参考官方文档:https://downloads.mysql.com/arc
hive
s/community/所有版本的官方安装文档:https://dev.mysql.com/doc/refman
the丶only
·
2023-12-15 19:17
运维笔记
mysql
数据库
linux
centos
运维
spark链接
hive
时踩的坑
使用spark操作
hive
,使用metastore连接
hive
,获取
hive
的数据库时,当我们在spark中创建数据库的时候,创建成功。
YuPangZa
·
2023-12-15 18:00
大数据中踩过的坑
spark
hive
大数据
三步教你轻松安装配置 Linux Anaconda 环境
一、下载安装脚本1.进入Anaconda官网获取下载链接:2.远程拉取安装脚本wgethttps://repo.anaconda.com/arc
hive
/Anaconda3-2023.07-1-Linux-x86
ReturnTmp
·
2023-12-15 17:55
运维笔记
linux
conda
机器学习
大数据基础知识
为了一场紧急考试,没有正经系统学习过大数据知识的我开始恶补概念涉及Hadoop、Hbase、Spark、Flink、Flume、Kafka、Sqoop、HDFS、
Hive
、Mapreduce、Impala
偶余杭
·
2023-12-15 17:22
生活本来可以很安逸,你为什么还要努力学习?
原创:凯恩说蜂巢
HIVE
5天前你为什么要努力学习,是游戏不好玩?还是电影不好看?你今天吃的苦,都是日后脚下的路。不是大学毕业了就不需要学习了,不是有工作了就不需要学习了。
田_52ab
·
2023-12-15 16:50
《JAVA与模式》之观察者设计模式及自定义监听器
本文参考了网上的另外一篇博客:http://www.cnblogs.com/java-my-life/arc
hive
/2012/05/16/2502279.html,描述的较为详细。
Beauxie
·
2023-12-15 15:25
Java基础
java
观察者设计模式
自定义监听器
如何截取
Hive
数组中的前N个元素?
文章目录1、需求描述2、使用索引3、使用posexplode()4、转换为字符串操作1、需求描述需求:截取任意给定数组中的前N个元素,返回截取后的子数组假设我们有如下三种类型的
Hive
数组:selectarray
对许
·
2023-12-15 15:23
#
Hive
#
Hadoop生态圈
hive
第77讲:二进制方式搭建MySQL数据库5.7版本以及错误日志管理
1.二进制安装MySQL5.7版本1.1.下载MySQL5.7版本的二进制文件[root@mysql~]#wgethttps://downloads.mysql.com/arc
hive
s/get/p/23
Jiangxl~
·
2023-12-15 15:53
《MySQL
DBA封神打怪之路》
数据库
mysql
adb
云计算
运维
数据结构
Hive
自定义函数
,单行输出UDAF:多行进入,单行输出UDTF:单行输入,多行输出(explode有类似效果)自定义UDAF实战假设用户表记录工号(empid)名称(name),自然日(date),如果上班就有数据在
hive
数据与后端架构提升之路
·
2023-12-15 15:05
HIve
hive
hadoop
数据仓库
Hive
SQL间隔连续问题
连续问题问题一算过去30天有哪些用户是连续7天登录我们APP的,如何写SQL思路:用rank算出连续编号,然后用日期减去rank编号差值求解SELECTDISTINCTuser_idFROM(SELECTuser_id,login_date,date_sub(login_date,intervalrank()over(partitionbyuser_idorderbylogin_date)day)
数据与后端架构提升之路
·
2023-12-15 15:35
HIve
hive
sql
以csv为源 flink 创建paimon 临时表相关 join 操作
环境:各组件版本如下kyuubi1.8.0flink1.17.1paimon0.5正式版本
hive
3.1.3阅读此文前,需涉及前置的知识点如下kyuubi整合flinkyarnapplication
流月up
·
2023-12-15 15:00
大数据
flink
大数据
csv
paimon
临时表
join
Linux-文件压缩解压
我们常常使用tar将多个文件归档为一个总的文件,称为arc
hive
。然后用gzip或bzip2命令将arc
hive
压缩为更小的文件。tar创建一个tar归档。
努力的布布
·
2023-12-15 15:24
Linux
Linux系统教程
linux
服务器
运维
Python与MySQL交互:MySQL Connector模块(七)
19案例2MySQLConnector模块MySQLConnector是MySQL官方的驱动模块,兼容性好[下载地址](MySQL::DownloadMySQLConnector/Python(Arc
hive
dVersions
try again.
·
2023-12-15 14:10
MySQL
python
mysql
20.
Hive
中的beeline和jdbc(
hive
学习3)
Beeline
Hive
Server2支持一个新的命令行Shell,称为Beeline,它是基于SQLLineCLI的JDBC客户端。
文茶君
·
2023-12-15 14:54
hive
/spark用法记录
1.cast()更改数据类型cast(column_nameastype)2.get_dt_date()自定义日期操作函数(返回不带横线的日期)selectget_dt_date();–获取当前日期,返回20170209selectget_dt_date(get_date(-2));–获取当前日期偏移,转为不带横杆的格式selectget_dt_date(‘2017-02-02’,-2);–201
eight_Jessen
·
2023-12-15 14:17
sql
编程基础
hive
spark
hadoop
opencv学习笔记六十九:人脸识别综合实践
1、下载人脸数据集,典型的有ORL,yale,我这里下载的是ORL人脸数据集,下载网址https://www.cl.cam.ac.uk/research/dtg/attarc
hive
/facedatabase.html
东城青年
·
2023-12-15 14:39
opencv
实时人脸识别
人脸识别综合实践
基于ELK的亿级实时日志分析平台实践
在计算PV、UV的场景下,根据业务需求我们通常以离线方式(MR/
HIVE
)隔天进行报表相关数据生
Sql强
·
2023-12-15 14:55
计算机毕业设计Python+Spark知识图谱微博舆情预警系统 微博舆情分析 微博推荐系统 微博可视化 微博数据分析 微博大数据 微博爬虫 微博预测系统 大数据毕业设计 大数据毕业设计 机器学习
开发框架前端:vue.jselement-ui后端:springbootmybatis中间件:sparkhadoop
hive
flink数据库:mysql关系型数据库neo4j图数据库算法:协同过滤推荐算法
计算机毕业设计大神
·
2023-12-15 12:19
Qt下载地址
下载地址(1)windoes平台Qt的下载与安装:Qt5.15之前的版本可以离线安装,直接下载离线安装包即可:下载地址:https://download.qt.io/arc
hive
/qt/Qt从5.15
临渊慎行
·
2023-12-15 12:35
QT
qt
【基础知识】大数据概述
发展历程中国开源生态图谱2023参考内容中国开源生态图谱2023.pdf技术组件说明数据集成sqoop、dataX、flume数据存储hdfs、kafka数据处理mapreduce、
hive
、impala
偏振万花筒
·
2023-12-15 12:39
大数据
CentOS 7 安装&卸载 MySQL 8 详细图文教程
root用户密码8.开启远程访问权限二、如何卸载MySQL一、Mysql安装1.下载Linux版MysqL安装包下载官网:MySQL::DownloadMySQLCommunityServer(Arc
hive
d
Stars.Sky
·
2023-12-15 11:58
MySQL
mysql
centos
数据库
iOS Xcode arc
hive
后没有dsym文件
BuildSettings->BuildOptions->DebugInformationFormat中,选择DWARFwithdSYMFile才会生成符号表文件
达若漠沙
·
2023-12-15 11:45
大数据之
hive
:行列转换系列总结
目录1、行转列(一)主要使用:示例2、列转行(一)示例3、行转列(二)示例4、列转行(二)示例1、行转列(一)主要使用:CONCAT(stringA/col,stringB/col…):返回输入字符串连接后的结果,支持任意个输入字符串;CONCAT_WS(separator,str1,str2,…):它是一个特殊形式的CONCAT()。第一个参数是剩余其他参数间的分隔符。COLLECT_SET(c
浊酒南街
·
2023-12-15 09:28
大数据系列三
hive
hadoop
数据仓库
sql
《PySpark大数据分析实战》-07.Spark本地模式安装
对大数据技术栈Hadoop、
Hive
、Spark、Kafka等有深入研究,对Data
wux_labs
·
2023-12-15 07:31
PySpark大数据分析实战
数据分析
数据挖掘
大数据
数据科学
PySpark
【
Hive
】
一、
Hive
是什么
Hive
是一款建立在Hadoop之上的开源数据仓库系统,将Hadoop文件中的结构化、半结构化数据文件映射成一张数据库表,同时提供了一种类SQL语言(HQL),用于访问和分析存在Hadoop
想当运维的程序猿
·
2023-12-15 07:23
hive
hadoop
数据仓库
MySQL下载、安装、配置详细教程
系统环境变量配置3.1配置3.2测试1下载官方网址:https://www.mysql.com/跳转到如下页面:按提示操作跳转到这个界面:这里下载5.7.362安装MYSQL官网提供的下载包是zipArc
hive
~无止境
·
2023-12-15 07:20
MySQL
mysql
数据库
mysql 中OPTIMIZE TABLE语句用法详解
这个命令会对MyISAM、InnoDB和ARC
HIVE
存储引擎的表进行操作。
半桶水专家
·
2023-12-15 07:19
数据库
mysql
【
Hive
_01】
hive
关于数据库和表的语法
1、
Hive
常见使用技巧1.1交互式与非交互式1.2
hive
参数配置方式2、DDL数据定义2.1创建数据库(1)创建数据库(2)查询数据库(3)修改数据库(4)删除数据库(5)切换当前数据库2.2表(1
温欣2030
·
2023-12-15 06:12
【大数据】
hive
数据库
hadoop
《PySpark大数据分析实战》-03.了解
Hive
对大数据技术栈Hadoop、
Hive
、Spark、Kafka等有深入研究,对Data
wux_labs
·
2023-12-15 06:42
PySpark大数据分析实战
数据分析
数据挖掘
大数据
数据科学
hive
客户机执行sql脚本无法显示表头
hive
客户机执行sql脚本无法显示表头临时跑数在sql脚本前加以下语句set
hive
.cli.print.header=true;日常跑数不想每次跑数前都执行以下1、在home路径下创建.
hive
rc
人生苦短,我爱数据分析
·
2023-12-15 06:37
hive
sql
hadoop
hive
聚合函数之JOIN原理及案例
1.数据准备原始数据创建dept.txt文件,并赋值如下内容,上传HDFS。部门编号部门名称部门位置id10行政部170020财务部180030教学部190040销售部1700创建emp.txt文件,并赋值如下内容,上传HDFS。员工编号姓名岗位薪资部门7369张三研发800.00307499李四财务1600.00207521王五行政1250.00107566赵六销售2975.00407654侯七
Appreciate(欣赏)
·
2023-12-15 06:03
hive
hive
数据仓库
hive
聚合函数之排序
1全局排序(OrderBy)OrderBy:全局排序,只有一个Reduce。(1).使用OrderBy子句排序asc(ascend):升序(默认)desc(descend):降序(2).OrderBy子句在select语句的结尾基础案例实操(1)查询员工信息按工资升序排列select*fromemporderbysal;(2)查询员工信息按工资降序排列select*fromemporderbysa
Appreciate(欣赏)
·
2023-12-15 06:03
hive
hive
hadoop
数据仓库
hive
自定义函数及案例
一.自定义函数1.
Hive
自带了一些函数,比如:max/min等,但是数量有限,自己可以通过自定义UDF来方便的扩展。
Appreciate(欣赏)
·
2023-12-15 06:03
hive
hive
数据仓库
【
Hive
_02】查询语法
1、基础语法2、基本查询(Select…From)2.1全表和特定列查询2.2列别名2.3Limit语句2.4Where语句2.5关系运算函数2.6逻辑运算函数2.7聚合函数3、分组3.1GroupBy语句3.2Having语句3.3Join语句(1)等值与不等值Join(2)表的别名(3)内连接(4)左外连接(5)右外连接(6)满外连接(7)多表连接(8)笛卡尔集(9)联合(union&unio
温欣2030
·
2023-12-15 06:53
【大数据】
hive
hadoop
数据仓库
hive
常用SQL函数及案例
1函数简介
Hive
会将常用的逻辑封装成函数给用户进行使用,类似于Java中的函数。好处:避免用户反复写逻辑,可以直接拿来使用。重点:用户需要知道函数叫什么,能做什么。
Appreciate(欣赏)
·
2023-12-15 06:50
hive
hive
sql
hadoop
RMAN执行crosscheck arc
hive
log出现ORA-19633错误
1.错误现象RMAN>crosscheckarc
hive
logall;RMAN-03009:failureofcrosscheckcommandonORADISK1channelat12/13ORA-19633
Floating warm sun
·
2023-12-15 06:20
oracle
RMAN
故障处理
dba
Hive
安装步骤
linux自带的MariaDB数据库(3)卸载linux自带的MariaDB数据库3、安装mysql数据库(1)上传mysql安装包(2)解压安装包(3)安装依赖文件,注意先后顺序,必须按照顺序来安装4、配置
Hive
chde2Wang
·
2023-12-15 06:17
hive
hadoop
数据仓库
05 MySQL 安装
https://downloads.mysql.com/arc
hive
s/community/或者从上传资源下载。
kk_io
·
2023-12-15 06:32
数据仓库
mysql
adb
数据库
07用户行为日志数据采集
用户行为数据由Flume从Kafka直接同步到HDFS,由于离线数仓采用
Hive
的分区表按天统计,所以目标路径要包含一层日期。具体数据流向如下图所示。
kk_io
·
2023-12-15 06:22
数据仓库
flume
数据仓库
ubuntu20.04安装无线网卡驱动
个人博客本文章链接https://www.leaf-machinary.space/index.php/arc
hive
s/135/首先,纯净的ubuntu是没有gcc和make的,所以如果没有有线网,一定要先连上网络
luoye2333
·
2023-12-15 05:11
网络
linux
运维
Centos安装IoTDB(单机版)
文章目录一、下载安装文件二、环境准备三、安装一、下载安装文件本次使用V1.0.0版本https://iotdb.apache.org/Download/wgethttps://arc
hive
.apache.org
GreaterBuilder
·
2023-12-15 05:56
iotdb
centos
iotdb
服务器
win10 + ubuntu20.04 双系统卸载(删除) ubuntu20.04 (图文)
原文地址:https://zhangzhicheng.com/arc
hive
s/81.htmlwin10+ubuntu20.04双系统(UEFI+GPT)卸载(删除)ubuntu20.04看前须知win10
ZChen1996
·
2023-12-15 04:45
系统及软件安装
双系统
【BI】FineBI功能学习路径-20231211
调整数据结构1.2简化数据2.1上下合并2.2其他表添加列2.3左右合并新增分析指标函数参考https://help.fanruan.com/finereport/doc-view-1897.html数值函数
日期函数
文本函数逻辑函数聚合函数分析函数
i see the future
·
2023-12-15 04:38
PowerBI
finebi
学习
Hive
增强的聚合、多维数据集、分组和汇总
Hive
多维分析1、多维分析概述2、GROUPINGSETS多维分组3、GROUPING__ID函数4、ROLLUP与CUBE语法糖5、多维分析常见问题与解决春雨惊春清谷天,夏满芒夏暑相连;秋处露秋寒霜降
对许
·
2023-12-15 04:17
#
数据湖仓
#
Hive
#
Spark
hive
数据仓库
spark
hive
的load报错Error: EXECUTION FAILED: Task MOVE error
Hive
Exception: [Error 20531] Unable to move sour
文章目录一、问题描述二、解决方法一、问题描述
hive
在进行数据load的时候报错。
五月天的尾巴
·
2023-12-15 03:12
大数据
数据库
hive
load报错
task
move
error
perl使用Arc
hive
::Tar模块进行文件打包
使用perl的Arc
hive
::Tar模块打包文件夹中的指定文件,输出格式.tar.gz。下面是perl代码:#!
爱读庄子的码农
·
2023-12-15 03:05
perl
perl
shell
Linux
git
bash
Perl操作excel2007的模块
www.jianshu.com/p/84bda53827c8第一种方法:读写excel2007文档的perl模块:Spreadsheet::XLSX(读)和Spreadsheet::WriteExcel(写)一、首先安装包Arc
hive
aofu8398
·
2023-12-15 03:03
操作系统
【Flink名称解释一】什么是cataLog
元数据也可以是持久化的,例如
Hive
Metastore中的元数据。Catalog提供了一个统一的API,用于管理元数据,并使其可以从TableAPI和SQL查询语句中来访问。
周润发的弟弟
·
2023-12-15 03:18
从零开始搞大数据
flink
大数据
kyuubi整合flink yarn application model
目录概述配置flink配置kyuubi配置kyuubi-defaults.confkyuubi-env.sh
hive
验证启动kyuubibeeline连接使用
hive
catalogsql测试结束概述flink
流月up
·
2023-12-15 03:14
大数据
flink
大数据
kyuubi
yarn
application
1.8.0
kyuubi
1.8.0
Spark读写
Hive
Spark读写
Hive
文章目录Spark读写
Hive
(一)配置本地域名映射(二)创建
Hive
表(三)IDEA中编写Spark代码读取
Hive
数据(四)IDEA中编写Spark代码写入数据到
Hive
(一)
叶子上的考拉
·
2023-12-15 02:25
大数据
spark
hive
大数据
intellij-idea
上一页
47
48
49
50
51
52
53
54
下一页
按字母分类:
A
B
C
D
E
F
G
H
I
J
K
L
M
N
O
P
Q
R
S
T
U
V
W
X
Y
Z
其他