E-COM-NET
首页
在线工具
Layui镜像站
SUI文档
联系我们
推荐频道
Java
PHP
C++
C
C#
Python
Ruby
go语言
Scala
Servlet
Vue
MySQL
NoSQL
Redis
CSS
Oracle
SQL Server
DB2
HBase
Http
HTML5
Spring
Ajax
Jquery
JavaScript
Json
XML
NodeJs
mybatis
Hibernate
算法
设计模式
shell
数据结构
大数据
JS
消息中间件
正则表达式
Tomcat
SQL
Nginx
Shiro
Maven
Linux
hive性能调优
RMAN执行crosscheck arc
hive
log出现ORA-19633错误
1.错误现象RMAN>crosscheckarc
hive
logall;RMAN-03009:failureofcrosscheckcommandonORADISK1channelat12/13ORA-19633
Floating warm sun
·
2023-12-15 06:20
oracle
RMAN
故障处理
dba
Hive
安装步骤
linux自带的MariaDB数据库(3)卸载linux自带的MariaDB数据库3、安装mysql数据库(1)上传mysql安装包(2)解压安装包(3)安装依赖文件,注意先后顺序,必须按照顺序来安装4、配置
Hive
chde2Wang
·
2023-12-15 06:17
hive
hadoop
数据仓库
分布式解决方案与实战
分布式多线程
性能调优
使用多线程优化接口//下单业务publicObjectorder(longuserId){longstart=System.currentTimeMillis();//方法的开始时间戳
渔阳节度使
·
2023-12-15 06:07
分布式
05 MySQL 安装
https://downloads.mysql.com/arc
hive
s/community/或者从上传资源下载。
kk_io
·
2023-12-15 06:32
数据仓库
mysql
adb
数据库
07用户行为日志数据采集
用户行为数据由Flume从Kafka直接同步到HDFS,由于离线数仓采用
Hive
的分区表按天统计,所以目标路径要包含一层日期。具体数据流向如下图所示。
kk_io
·
2023-12-15 06:22
数据仓库
flume
数据仓库
ubuntu20.04安装无线网卡驱动
个人博客本文章链接https://www.leaf-machinary.space/index.php/arc
hive
s/135/首先,纯净的ubuntu是没有gcc和make的,所以如果没有有线网,一定要先连上网络
luoye2333
·
2023-12-15 05:11
网络
linux
运维
Centos安装IoTDB(单机版)
文章目录一、下载安装文件二、环境准备三、安装一、下载安装文件本次使用V1.0.0版本https://iotdb.apache.org/Download/wgethttps://arc
hive
.apache.org
GreaterBuilder
·
2023-12-15 05:56
iotdb
centos
iotdb
服务器
win10 + ubuntu20.04 双系统卸载(删除) ubuntu20.04 (图文)
原文地址:https://zhangzhicheng.com/arc
hive
s/81.htmlwin10+ubuntu20.04双系统(UEFI+GPT)卸载(删除)ubuntu20.04看前须知win10
ZChen1996
·
2023-12-15 04:45
系统及软件安装
双系统
Hive
增强的聚合、多维数据集、分组和汇总
Hive
多维分析1、多维分析概述2、GROUPINGSETS多维分组3、GROUPING__ID函数4、ROLLUP与CUBE语法糖5、多维分析常见问题与解决春雨惊春清谷天,夏满芒夏暑相连;秋处露秋寒霜降
对许
·
2023-12-15 04:17
#
数据湖仓
#
Hive
#
Spark
hive
数据仓库
spark
hive
的load报错Error: EXECUTION FAILED: Task MOVE error
Hive
Exception: [Error 20531] Unable to move sour
文章目录一、问题描述二、解决方法一、问题描述
hive
在进行数据load的时候报错。
五月天的尾巴
·
2023-12-15 03:12
大数据
数据库
hive
load报错
task
move
error
perl使用Arc
hive
::Tar模块进行文件打包
使用perl的Arc
hive
::Tar模块打包文件夹中的指定文件,输出格式.tar.gz。下面是perl代码:#!
爱读庄子的码农
·
2023-12-15 03:05
perl
perl
shell
Linux
git
bash
Perl操作excel2007的模块
www.jianshu.com/p/84bda53827c8第一种方法:读写excel2007文档的perl模块:Spreadsheet::XLSX(读)和Spreadsheet::WriteExcel(写)一、首先安装包Arc
hive
aofu8398
·
2023-12-15 03:03
操作系统
【Flink名称解释一】什么是cataLog
元数据也可以是持久化的,例如
Hive
Metastore中的元数据。Catalog提供了一个统一的API,用于管理元数据,并使其可以从TableAPI和SQL查询语句中来访问。
周润发的弟弟
·
2023-12-15 03:18
从零开始搞大数据
flink
大数据
kyuubi整合flink yarn application model
目录概述配置flink配置kyuubi配置kyuubi-defaults.confkyuubi-env.sh
hive
验证启动kyuubibeeline连接使用
hive
catalogsql测试结束概述flink
流月up
·
2023-12-15 03:14
大数据
flink
大数据
kyuubi
yarn
application
1.8.0
kyuubi
1.8.0
Spark读写
Hive
Spark读写
Hive
文章目录Spark读写
Hive
(一)配置本地域名映射(二)创建
Hive
表(三)IDEA中编写Spark代码读取
Hive
数据(四)IDEA中编写Spark代码写入数据到
Hive
(一)
叶子上的考拉
·
2023-12-15 02:25
大数据
spark
hive
大数据
intellij-idea
PyTorch 模型训练性能大揭秘:从基础到高级技巧一网打尽!
《PyTorch模型训练
性能调优
宝典》是解决PyTorch训练性能和效率问题的首选宝典。适用对象包括:AI/ML平台工程师、数据平台工程师、后端软件工程师、MLOps工
Python算法实战
·
2023-12-15 02:58
大模型理论与实战
大模型
深度学习
大模型
语言模型
pytorch
LLM
2.CENTOS安装CDH和Kudu-1
企业级数据中心的安装主要分为4个步骤:集群服务器配置,包括安装操作系统、关闭防火墙、同步服务器时钟等;外部数据库安装安装Cloudera管理器;安装CDH集群;集群完整性检查,包括HDFS文件系统、MapReduce、
Hive
大勇任卷舒
·
2023-12-15 01:40
最简单的WebRTC示例
http://www.blogjava.net/linli/arc
hive
/2014/10/21/418910.html在学习WebRTC时,网上的示例大多代码较多,以下是参考那些代码简化的一个WebRTC
mengzhengjie
·
2023-12-15 01:03
webrtc
caution: filename not matched问题解决
caution:filenamenotmatched问题解决操作系统环境:linuxcentos6#unziptest3.ziptest4报错:Arc
hive
:test3.zipcaution:filenamenotmatched
骑马的蜗牛
·
2023-12-15 00:37
linux
linux
Ceph入门到精通-SSL_read() failed SSL: error SSL routines:tls 1_enc:internal error
errorSSLroutines:tls1_enc:internalerrorsubject:"Re\:openssl1.1.1dSSL_read\(\)failedinerrorlog"(mail-arc
hive
.com
瓦哥架构实战
·
2023-12-15 00:55
Ceph入门到精通
ceph
ssl
网络
【
Hive
】——DDL(CREATE TABLE)
1CREATETABLE建表语法2
Hive
数据类型2.1原生数据类型2.2复杂数据类型2.3
Hive
隐式转换2.4
Hive
显式转换2.5注意3SerDe机制3.1读写文件机制3.2SerDe相关语法3.2.1
那时的样子_
·
2023-12-14 23:57
hive
hadoop
数据仓库
【
Hive
】——DDL(DATABASE)
1概述2创建数据库createdatabaseifnotexiststest_databasecomment"thisismyfirstdb"withdbproperties('createdBy'='Allen');3描述数据库信息describe可以简写为descextended可以展示更多信息describedatabasetest_database;describedatabaseexte
那时的样子_
·
2023-12-14 23:57
hive
数据库
hadoop
【
Hive
】——CLI客户端(bin/beeline,bin/
hive
)
1
Hive
Server、
Hive
Server22bin/
hive
、bin/beeline区别3bin/
hive
客户端
hive
-site.xml配置远程MateStore地址XML
hive
.metastore.uristhrift
那时的样子_
·
2023-12-14 23:26
hive
hadoop
数据仓库
【
Hive
】——概述
1什么是
Hive
2
Hive
优点3
Hive
和Hadoop的关系4映射信息记录5SQL语法解析、编译
Hive
能将一个文件映射成为一张表,文件和表之间的关系称为映射
Hive
的功能职责是将SQL语法解析编译成为
那时的样子_
·
2023-12-14 23:15
hive
hive
hadoop
大数据
【
Hive
】——安装部署
内嵌模式3.2本地模式3.3远程模式4安装前准备hadoop.proxyuser.root.hosts*hadoop.proxyuser.root.groups*5远程模式安装5.1下载https://
hive
.apache.org
那时的样子_
·
2023-12-14 23:15
hive
hadoop
数据仓库
Hive
浅析
Hive
是一个简单的LUA沙盒,除了基本的LUA解释器的功能以外,还提供了诸如热加载等功能。了解
HIVE
的工作原理有利于了解Lua虚拟机的底层实现机理。
garagong
·
2023-12-14 23:14
大数据
hive
hadoop
数据仓库
gtest测试
环境安装1、下载gtest1.8版本wgethttps://github.com/google/googletest/arc
hive
/refs/tags/release-1.8.1.zip2、将其解压在
DreamColors
·
2023-12-14 23:43
gtest
单元测试
conda 使用教程(linux)
1.下载安装1.1下载所有版本镜像(清华大学开源镜像网站):https://mirrors.tuna.tsinghua.edu.cn/anaconda/arc
hive
/从中选择合适版本的镜像下载.如Anaconda3
休息一下接着来
·
2023-12-14 22:50
conda
linux
anaconda
hive
-3.1.2环境安装实验
1.修改hadoop相关参数1-修改core-site.xml[bigdata@master
hive
]$vim/opt/module/hadoop/etc/hadoop/core-site.xmlhadoop.proxyuser.bigdata.hosts
芝士小熊饼干
·
2023-12-14 22:09
hive
hadoop
数据仓库
mysql8.0.34的安装配置
下载资源官网下载:MySQL::DownloadMySQLInstaller(Arc
hive
dVersions)https://downloads.mysql.com/arc
hive
s/installer
CDTU iron fan
·
2023-12-14 22:17
安装配置
mysql
hive
数据仓库工具
1、
hive
是一套操作数据仓库的应用工具,通过这个工具可实现mapreduce的功能2、
hive
的语言是hql[
hive
querylanguage]3、官网
hive
.apache.org下载
hive
软件包地址
xinxinyydss
·
2023-12-14 21:38
数据仓库
hive
hadoop
HIVE
SQL 优化
1、reduce的个数:先看一下跑
hive
时出现的参数:inordertochangetheaverageloadforareducer(inbytes):set
hive
.exec.reducers.bytes.per.reducer
本凡_大数据_机器学习
·
2023-12-14 21:32
谷歌推出Gemini语言模型,碾压GPT-4!
详细信息请看:https://fostmar.online/arc
hive
s/317/谷歌推出Gemini语言模型,碾压GPT-4!
单丽尔
·
2023-12-14 21:19
前沿科技
语言模型
chatgpt
人工智能
iPhone 15 Pro Max 与华为 Mate 60 Pro:规格比较
开始之前推荐阅读:澎湃OS与HarmonyOS——主要区别是什么:https://fostmar.online/arc
hive
s/223/GooglePixel与iPhone手机:哪个更好:https:
单丽尔
·
2023-12-14 21:49
数码科技
iphone
华为
ios
Gateway全局异常处理及请求响应监控
前言我们在上一篇文章基于压测进行Feign调优完成的服务间调用的
性能调优
,此时我们也关注到一个问题,如果我们统一从网关调用服务,但是网关因为某些原因报错或者没有找到服务怎么办呢?
shark-chili
·
2023-12-14 21:07
微服务
微服务
gateway
Hive
--对空值和NULL的处理
问题描述
Hive
中默认将NULL存为\N,NULL类型的字符串如何检索?
撸码小丑
·
2023-12-14 20:15
Ceph Cookbook 中文版
1、ceph介绍、ceph块存储、ceph对象存储、ceph文件系统、用Calamari监控Ceph、操作和管理ceph集群、深入ceph、ceph生产计划和
性能调优
、ceph虚拟存储管理器、ceph扩展
SkTj
·
2023-12-14 20:41
Java
性能调优
实战》笔记(二)JVM优化、设计模式优化
文章目录一、JVM优化1.1即时编译器JIT 类编译加载执行过程: 初始化完成后,类在调用执行过程中,执行引擎会把字节码转为机器码,然后在操作系统中才能执行。在字节码转换为机器码的过程中,虚拟机中还存在着一道编译,那就是即时编译。 最初,虚拟机中的字节码是由解释器(Interpreter)完成编译的,当虚拟机发现某个方法或代码块的运行特别频繁的时候,就会把这些代码认定为“热点代码”。 为了
马小瑄
·
2023-12-14 20:52
【
hive
】order by、sort by、distribute by、cluster by的区别
,在
Hive
中执行脚本时,我们可以通过setmapreduce.job.reduces=10来设置reduce的个数为10。
小赵要加油
·
2023-12-14 19:54
数据仓库
hive
hive
大数据
hadoop
外部文件数据写入
hive
hive
数据库是基于HDFS的一个数据库,是对hdfs数据的一个映射关系。注意:
hive
数据库存入数据的时候不建议使用insertinto语句来进行插入,这样的的操作方式在效率上会很低效。
小赵要加油
·
2023-12-14 19:24
数据仓库
hive
Hive
:从HDFS回收站恢复被删的表
查看回收站中的数据被删除的数据会放在删除数据时使用的用户目录下,如:使用pgxl删除的,那么删除的数据会放在如下目录:/user/pgxl/.Trash该目录下会有多个文件夹,每小时删除的数据放在不同文件夹下,目录如下:3.将回收站的数据移动回表目录下
hive
有语忆语
·
2023-12-14 19:49
大数据之Hive
hive
hdfs
hadoop
hive
映射es表任务失败,无错误日志一直报Task Transitioned from NEW to SCHEDULED
一、背景要利用gpt产生的存放在es种的日志表做统计分析,通过
hive
建es的映射表,将es的数据拉到
hive
里面。
有语忆语
·
2023-12-14 19:49
大数据之Hive
hive
elasticsearch
hadoop
查看
Hive
表信息及占用空间的方法
一、
Hive
下查看数据表信息的方法方法1:查看表的字段信息desctable_name;方法2:查看表的字段信息及元数据存储路径descextendedtable_name;方法3:查看表的字段信息及元数据存储路径
有语忆语
·
2023-12-14 19:19
大数据之Hive
hive
hadoop
数据仓库
hive
-窗口函数
1窗口函数语法分析函数/专用窗口函数over(partitionby列名orderby列名rowsbetween开始位置and结束位置)常用的分析函数常用的分析函数:sum()、max()、min()、avg()、count()常用的专用窗口函数专用窗口函数:row_number()、rank()、dense_rank()窗口函数窗口函数的3个组成部分可以单独使用,也可以混合使用,也可以全部不用o
Logan_addoil
·
2023-12-14 19:07
大数据学习之旅
hive
hadoop
数据仓库
Scala-初学
前提,已经安装好Scala在Linux终端准备资料:a.txt内容
HIVE
底层是hdfs和mapreduce实现存储和计算的。
Logan_addoil
·
2023-12-14 19:07
大数据学习之旅
scala
开发语言
后端
【python】多任务编程
多任务编程有哪些编程提速的方法单线程串行:不加改造的程序多线程并发:利用CPU和IO可以同时执行的原理,让CPU不会干巴巴等待IO完成多CPU并行/多进程:利用多核CPU的能力,真正的并行执行任务多机器并行:hadoop/
hive
小赵要加油
·
2023-12-14 19:33
python
python
开发语言
hive
插入数据失败解决方法
记录一次
hive
错误描述错误:进入
hive
客户端插入数据报错#报错:
hive
(default)>insertintojavaAndBigdata.student(id,name)values(3,"java
Java页大数据
·
2023-12-14 16:57
hive
hive
Linux dpkg:处理 xxx (--configure)时出错 记录
主要用于修复安装被中断或依赖环境被破坏的情况强制解锁sudorm/var/cache/apt/arc
hive
s/locksudorm/var/lib/dpkg/lock环境修复现将info文件夹更名sudomv
团不慌
·
2023-12-14 16:14
Hive
的几种排序方式、区别,使用场景
一、几种排序和区别
Hive
支持两种主要的排序方式:ORDERBY和SORTBY。除此之外,还有DISTRIBUTEBY和CLUSTERBY语句,它们也在排序和数据分布方面发挥作用。
三水青一人尤
·
2023-12-14 12:17
hive
hive
hadoop
数据仓库
大数据
sql
二百一十七、Flume——Flume拓扑结构之聚合的开发案例(亲测,附截图)
(二)结构特征用flume的这种组合方式能很好的解决这一问题,每台服务器部署一个flume采集日志,传送到一个集中收集日志的flume,再由此flume上传到hdfs、
hive
、hbase等
天地风雷水火山泽
·
2023-12-14 12:31
Flume
flume
大数据
上一页
49
50
51
52
53
54
55
56
下一页
按字母分类:
A
B
C
D
E
F
G
H
I
J
K
L
M
N
O
P
Q
R
S
T
U
V
W
X
Y
Z
其他