E-COM-NET
首页
在线工具
Layui镜像站
SUI文档
联系我们
推荐频道
Java
PHP
C++
C
C#
Python
Ruby
go语言
Scala
Servlet
Vue
MySQL
NoSQL
Redis
CSS
Oracle
SQL Server
DB2
HBase
Http
HTML5
Spring
Ajax
Jquery
JavaScript
Json
XML
NodeJs
mybatis
Hibernate
算法
设计模式
shell
数据结构
大数据
JS
消息中间件
正则表达式
Tomcat
SQL
Nginx
Shiro
Maven
Linux
hive聚合函数
apk下载变为Zip格式的几种解决方案
1.我使用的是Tomcat服务器,在Tomcat/conf/web.xml文件中添加如下配置apkapplication/vnd.android.package-arc
hive
apkapplication
峪幽兰
·
2023-12-02 12:03
学习
spring
解决方案
apk
框架
语言
oracle 去重
例如:SELECTDISTINCTcolumn_nameFROMtable_name;2.使用GROUPBY子句使用GROUPBY子句将重复的值分组,并使用
聚合函数
如COUNT、SUM等对每个组进行操作
AD_youyu
·
2023-12-02 11:11
oracle
数据库
【Spark数仓项目】需求八:MySQL的DataX全量导入和增量导入
Hive
【Spark数仓项目】需求八:MySQL的DataX全量导入和增量导入
Hive
文章目录一、mysql全量导入
hive
[分区表]需求介绍:二、mysql增量导入
hive
1.增量导入的第一种实现方法2.另一种方法是时间字段
程序终结者
·
2023-12-02 10:22
spark
mysql
hive
【DBeaver】驱动添加-
Hive
和星环
驱动
Hive
驱动
hive
驱动可以直接去官网下载官网地址,填一下个人信息。如果想直接下载可以去我上次的资源下地址,需要用zip解压。
不专业得Cook
·
2023-12-02 10:20
工具
hive
hadoop
数据仓库
Hive
中parquet压缩格式分区表的跨集群迁移记录
文章目录环境与需求集群环境需求描述操作步骤STEP1STEP2STEP3STEP4STEP5STEP6环境与需求集群环境华为FushionInsightA华为FushionInsightB华为集群管理机local
Hive
3.1.0HDFS3.3.1
程序终结者
·
2023-12-02 10:17
hive
hadoop
数据仓库
Spark---DataFrame存储、Spark UDF函数、UDAF函数
、DataFrame存储+SparkUDF函数1、储存DataFrame1)、将DataFrame存储为parquet文件2)、将DataFrame存储到JDBC数据库3)、将DataFrame存储到
Hive
30岁老阿姨
·
2023-12-02 10:46
Spark
spark
大数据
分布式
Hive
jar包冲突问题排查解决
1、报错情况
hive
server2启动失败,查看日志报错:2022-07-04T20:14:53,315WARN[main]:server.
Hive
Server2(
Hive
Server2.java:start
Hive
Server2
Java小田
·
2023-12-02 10:14
hive
jar
SparkSQL-MR、RDD、DataFrame三个编程模型演进
2011的时候,
Hive
可以说是SQLOnHadoop的唯一选择,负责将SQL解析成MR任务运行在大数据上,实现交互
扎克begod
·
2023-12-02 10:12
Spark
spark
SparkSQL
Spark---Spark on
Hive
1、SparkOn
Hive
的配置1)、在Spark客户端配置
Hive
OnSpark在Spark客户端安装包下spark-2.3.1/conf中创建文件
hive
-site.xml:配置
hive
的metastore
30岁老阿姨
·
2023-12-02 10:40
Spark
spark
hive
大数据
2023.11.29 -hmzx电商平台建设项目 -核销主题阶段总结
目录1.准备源数据2.准备数仓工具进行源数据同步到ods层,本项目使用Datax3.使用Datax完成数据同步前建表时的方案选择3.1同步方式区别:3.2存储格式和压缩区别:4.在
hive
中创建表,共31
白白的wj
·
2023-12-02 09:53
数据仓库
大数据
hive
hadoop
数据库开发
etl
etl工程师
2023.11.28-电商平台建设03 - 大数据调优手段
1.优化手段1.1分桶表
HIVE
的分桶本质上就是MR的分区操作建表语句:createtable表名(字段类型,....)clusteredby(分桶字段)[sortedby(字段[asc|desc])]
白白的wj
·
2023-12-02 09:52
数据仓库
大数据
hadoop
sql
database
SQL Server 数据库,使用函数查询统计信息
根据用途,把函数分为五类,分别是系统函数、字符串函数、日期函数、
聚合函数
与数学函数。4.1
陈建华01
·
2023-12-02 09:20
前端
数据库
javascript
java不支持解压rar5的解决办法--引用本地7zip.exe
在运行中报错:javacom.github.junrar.exception.RarException:badRarArc
hive
通过引用本地7zip.exe,命令行执行解决:privatestaticvoidunZipRar5File
山高终有顶,人行无尽头
·
2023-12-02 09:15
java
开发语言
7-zip
winrar
Hive
--时间函数大全
hive
时间函数1.current_date():获取当前格式化日期2.current_timestamp():获取当前格式化时间3.unix_timestamp():获取当前unix时间戳4.from_unixtime
小陈菜奈-
·
2023-12-02 07:37
Hive
hive
hadoop
数据仓库
Hive
-sql切割字符串法(列转行)
selectid,namefrom(select1asid,'1,2,3,4'asname)aLATERALVIEWexplode(split(name,','))tempasname
小陈菜奈-
·
2023-12-02 07:07
Hive
hive
clickhouse查询语法--array join
arrayjoinarrayjoin子句允许在数据表的内部,与数组或嵌套类型的字段进行join操作,从而将一行数组展开为多行,类似于
hive
中的exploded炸裂函数的功能createtabletb_array_join
小陈菜奈-
·
2023-12-02 07:37
Clickhouse
clickhouse
Hdoop学习笔记(HDP)-Part.15 安装
HIVE
十五、安装
HIVE
1.配置MetaStore利用ambari创建的MySQL作为MetaStore,创建用户
hive
及数据库
hive
mysql-uroot-pCREATEDATABASE
hive
;CREATEUSER'
hive
这啥命啊
·
2023-12-02 06:58
hadoop
学习
笔记
hive
hadoop
备份与归档的区别
归档(Arc
hive
),也称数据存档,是将不经常使用但重要的
云祺vinchin
·
2023-12-02 05:30
技术分享
系统安全
其他
Mysql之子查询(知识点+例题)
Mysql之子查询什么是子查询案例分析案例分析子查询的分类单行子查询子查询中的空值问题题目练习题目一题目二题目三题目四题目五补充:
聚合函数
与GROUPBY的使用关系CASE表达式(子查询中的运用)简单CASE
温柔了岁月.c
·
2023-12-02 04:11
MySQL
mysql
数据库
子查询
CASE
相关删除和相关更新
简单查询
简单查询,使用TOP子句查询结果排序orderby带条件的查询where,使用算术表达式,使用逻辑表达式,使用between关键字,使用in关键字,模糊查询like在查询中使用
聚合函数
:sum(x),avg
dab7927433f9
·
2023-12-02 03:44
单目标遗传算法 精英保留策略
该文章引自:https://www.cnblogs.com/devilmaycry812839668/p/6445762.htmlhttp://www.cnhup.com/index.php/arc
hive
s
捌椒
·
2023-12-02 03:42
智能算法
智能算法
SMO优化算法(Sequential minimal optimization)
分类器中SMO算法https://blog.csdn.net/qq_28503457/article/details/96704927https://www.cnblogs.com/liqizhou/arc
hive
正在学习的小天师兄
·
2023-12-02 01:36
Nebula Graph 1.0 Release Note
聚合操作:
聚合函数
GROUPBY、排
NebulaGraph
·
2023-12-02 01:02
PG14归档失败解决办法arc
hive
r failed on wal_lsn
案例1:pg_wal下有wal_lsn文件案例1适用于以下场景:pg_wal下有该wal_lsn文件而归档目录下无该wal_lsn文件pg_wal和归档目录下同时都有该wal_lsn文件问题描述昨晚Repmgr+PG14主备主库因wal日志撑爆磁盘,删除主库过期wal文件重做备库后上午进行主备状态巡查,主库向备库发送wal文件正常,但是查主库状态时发现显示有1条归档失败的记录。postgres:a
福娃筱欢
·
2023-12-02 01:22
Postgres
PG14归档失败解决办法
PG14归档失败解决办法arc
hive
r failed on wal_lsn
案例1:pg_wal下有wal_lsn文件案例1适用于以下场景:pg_wal下有该wal_lsn文件而归档目录下无该wal_lsn文件pg_wal和归档目录下同时都有该wal_lsn文件问题描述昨晚Repmgr+PG14主备主库因wal日志撑爆磁盘,删除主库过期wal文件重做备库后上午进行主备状态巡查,主库向备库发送wal文件正常,但是查主库状态时发现显示有1条归档失败的记录。postgres:a
福娃筱欢
·
2023-12-02 01:22
Postgres
PG14归档失败解决办法
4.hadoop集群扩容与
hive
异常处理
异常处理当我们使用sqoop同步数据时候,出现了异常。Errorwritingfile‘/tmp/MYYEBa32’(Errcode:28-NospaceleftondeviceINFOmapreduce.Job:Theurltotrackthejob:http://node3:8088/proxy/application_1681182527108_0002/INFOmapreduce.Job:
想成为数据分析师的开发工程师
·
2023-12-02 00:10
Hadoop大数据分析项目
hadoop
hive
大数据
数据分析
Linux 安装 git
不能自己指定安装目录、安装版本方式2下载tar.gz包配置查看git版本:Indexof/pub/software/scm/git/下载git:wgethttps://Github.com/Git/Git/arc
hive
路灯下的程序员
·
2023-12-02 00:06
linux
git
ubuntu 更换国内镜像
备份cd/etc/aptcpsources.listsources.list.bakup修改源为清华源sed-i's/arc
hive
.ubuntu.com/mirrors.aliyun.com/g'sources.list
有谁看见我的剑了?
·
2023-12-01 22:44
linux基础
ubuntu
linux
运维
利用python实现文件压缩打包的功能
主要是利用了zipfile实现文件压缩打包,简单实例代码如下:importzipfilewithzipfile.ZipFile("arc
hive
.zip",'w')aszipf:zipf.write("
dataat
·
2023-12-01 22:13
python
python
前端
开发语言
hive
sql练习题
由下面的数据image生成imagecreatetabletmp_access(namestring,monstring,numint);insertintotabletmp_accessselectuname,umonth,sum(ucount)fromt_accesstgroupbyt.uname,t.umonth;createviewtmp_viewasselecta.nameanme,a.
大数据修行
·
2023-12-01 21:44
mysql linux tar rpm 一键安装shell脚本
linux版本centos7mysql版本8.0.22下载地址:https://downloads.mysql.com/arc
hive
s/community/如下图:image.png开始linux当前角色为
名称真多
·
2023-12-01 21:46
zookeeper的安装以及客户端框架的简单使用
Zookeeper安装1,上官网下载(https://arc
hive
.apache.org/dist/zookeeper/)并上传至Linux中。
java村支书
·
2023-12-01 20:09
MySQL-lesson05-存储引擎
只不过比文件系统强大2、功能了解数据读写数据安全和一致性提高性能热备份自动故障恢复高可用方面支持等.3、存储引擎种类(笔试)3.1介绍(OracleMySQL)InnoDBMyISAMMEMORYARC
HIVE
FEDERATEDEXAMPLEBLACKHOLEMERGENDBCLUSTERCSV3.2
学无止境_9b65
·
2023-12-01 20:00
hive
连接MySQL踩坑记录
1.
hive
-site.xml中的配置文件里的用户名,密码,端口要和MySQL中的一样。
iceberg.hbs
·
2023-12-01 19:45
hive
mysql
大数据
ubuntu离线安装包
方便快捷方式查看依赖apt-cachedepends包名(gcc或language-pack-zh-hans)下载deb及其依赖包#下载.deb包到指定目录cd/var/cache/apt/arc
hive
sapt-getdownload
shifting_sand
·
2023-12-01 19:09
ubuntu
linux
gcc
hive
性能优化及参数调优
企业相关服务器资源配置:平均600台active的节点,每个节点可用的内存在200G左右,可用的memorytotal:116T1、**set
hive
.exec.parallel=true;**开启job
严亮_8ded
·
2023-12-01 19:53
debian-依赖管理
echo'debhttp://arc
hive
.debian.org/debian/stretchmaincontribnon-free'>/etc/apt/sources.listecho'debhttp
不正经运维君
·
2023-12-01 18:15
debian
windows
linux
MYSQL的
聚合函数
,存储过程的知识点
聚合函数
MySQL提供了多种
聚合函数
,用于对数据进行汇总计算:-**COUNT():**统计行数或非NULL值的数量。-**SUM():**计算某列值的总和。-**AVG():**计算某列值的平均值。
预众。
·
2023-12-01 17:40
mysql
数据库
ClassNotFoundException: org.apache.
hive
.spark.client.Job
hive
使用的是3.13版本,spark是3.3.3支持hadoop3.x
hive
将engine从mr改成spark,通过beeline执行insert、delete时一直报错,sparkTaskrpc
青春不流名
·
2023-12-01 16:43
hadoop
Oracle(2-8)Configuring the Database Archiving Mode
文章目录一、基础知识1、RedoLogHistory2、NOARC
HIVE
LOGMode非归档模式3、ARC
HIVE
LOGMode归档模式4、ChangingtheArchivingMode更改归档模式
不会编程的猫星人
·
2023-12-01 16:43
Oracle学习系列
oracle
数据库
运维
linux
pycharm生成requirements.txt
本文首发地址:https://www.dawnsite.cn/arc
hive
s/162.html在命令行中输入:pipfreeze>requirements.txt安装requirements.txt
Dawn_SSR
·
2023-12-01 16:31
Python
python
新手村之SQL——分组与子查询
1.GROUPBYGROUPBY函数就是SQL中用来实现分组的函数,其用于结合
聚合函数
,能根据给定数据列的每个成员对查询结果进行分组统计,最终得到一个分组汇总表。
每天都要坚持学习
·
2023-12-01 16:17
SQL
sql
数据库
SpringBoot之使用WebJars
WebJars是被打包成JAR文件(JavaArc
hive
)形式的客户端web资源库(例如:jQuery、Bootstrap等)。即WebJars是库,是各种web资源库,打包成jar文件形式。
我不是归人yzg
·
2023-12-01 16:49
Centos 7 安装java环境JDK8
配置环境4.检查是否生效步骤如下:1.下载jdk下载地址:https://www.oracle.com/cn/java/technologies/javase/javase8u211-later-arc
hive
-downloads.html
小黑侠kary
·
2023-12-01 15:21
java
jar
CentOS7安装JDK8
/etc/profile,使配置生效:5、测试jdk是否安装成功:源码版:1、进入官网下载JDK8的源码压缩包文件,然后上传到Linux上:(JDK8官网下载地址)选择x64CompressedArc
hive
RSJ-root
·
2023-12-01 15:19
linux
centos
java
高效率:使用DBeaver连接spark-sql
提高运行效率一般采取底层使用spark引擎替换成
hive
引擎的方式提高效率,但替换引擎配置较为复杂考虑到兼容版本且容易出错,所以本篇将介绍使用DBeaver直接连接spark-sql快速操作
hive
数据库
open_test01
·
2023-12-01 14:48
SparkSQL-巩固篇
spark
sql
大数据
SVN:冲突解决 合并别人的修改
http://www.letuknowit.com/arc
hive
s/svn-conflict-resolution/在项目中,基本不可避免多个人同时参与一个项目,因此就可能会出现多个人同时修改一个文件的情况
班公湖里洗过脚
·
2023-12-01 12:38
svn
subversion
svn
Hive
参数详解
1.SerDesandI/O
hive
.input.format默认org.apache.hadoop.
hive
.ql.io.Combine
Hive
InputFormat默认的inputformat。
Chin_qf
·
2023-12-01 10:12
Windows系统安装Qt 5.15.2完全版
多种下载通道+所有版本)一、安装Qt5.15.2Qt官方下载(非常慢)Qt官网有一个专门的资源下载网站,所有的开发环境和相关工具都可以从这里下载,具体地址是:Indexof/图1Qt官方下载网站截图arc
hive
xia夏小优
·
2023-12-01 10:16
#QT学习笔记
windows
qt
开发语言
安装qt5.15.2
Qt5.15以下版本可直接在Indexof/arc
hive
/qt中下载离线安装包1.下载在线安装包1、科大镜像在Qt镜像使用帮助—USTCMirrorHelp文档镜像中下载在线程序点击Indexof/qtproject
lsc。
·
2023-12-01 10:41
环境配置
qt
编辑器
上一页
55
56
57
58
59
60
61
62
下一页
按字母分类:
A
B
C
D
E
F
G
H
I
J
K
L
M
N
O
P
Q
R
S
T
U
V
W
X
Y
Z
其他