E-COM-NET
首页
在线工具
Layui镜像站
SUI文档
联系我们
推荐频道
Java
PHP
C++
C
C#
Python
Ruby
go语言
Scala
Servlet
Vue
MySQL
NoSQL
Redis
CSS
Oracle
SQL Server
DB2
HBase
Http
HTML5
Spring
Ajax
Jquery
JavaScript
Json
XML
NodeJs
mybatis
Hibernate
算法
设计模式
shell
数据结构
大数据
JS
消息中间件
正则表达式
Tomcat
SQL
Nginx
Shiro
Maven
Linux
Hive:ORC
05 MySQL 安装
https://downloads.mysql.com/arc
hive
s/community/或者从上传资源下载。
kk_io
·
2023-12-15 06:32
数据仓库
mysql
adb
数据库
07用户行为日志数据采集
用户行为数据由Flume从Kafka直接同步到HDFS,由于离线数仓采用
Hive
的分区表按天统计,所以目标路径要包含一层日期。具体数据流向如下图所示。
kk_io
·
2023-12-15 06:22
数据仓库
flume
数据仓库
ubuntu20.04安装无线网卡驱动
个人博客本文章链接https://www.leaf-machinary.space/index.php/arc
hive
s/135/首先,纯净的ubuntu是没有gcc和make的,所以如果没有有线网,一定要先连上网络
luoye2333
·
2023-12-15 05:11
网络
linux
运维
Centos安装IoTDB(单机版)
文章目录一、下载安装文件二、环境准备三、安装一、下载安装文件本次使用V1.0.0版本https://iotdb.apache.org/Download/wgethttps://arc
hive
.apache.org
GreaterBuilder
·
2023-12-15 05:56
iotdb
centos
iotdb
服务器
win10 + ubuntu20.04 双系统卸载(删除) ubuntu20.04 (图文)
原文地址:https://zhangzhicheng.com/arc
hive
s/81.htmlwin10+ubuntu20.04双系统(UEFI+GPT)卸载(删除)ubuntu20.04看前须知win10
ZChen1996
·
2023-12-15 04:45
系统及软件安装
双系统
Hive
增强的聚合、多维数据集、分组和汇总
Hive
多维分析1、多维分析概述2、GROUPINGSETS多维分组3、GROUPING__ID函数4、ROLLUP与CUBE语法糖5、多维分析常见问题与解决春雨惊春清谷天,夏满芒夏暑相连;秋处露秋寒霜降
对许
·
2023-12-15 04:17
#
数据湖仓
#
Hive
#
Spark
hive
数据仓库
spark
hive
的load报错Error: EXECUTION FAILED: Task MOVE error
Hive
Exception: [Error 20531] Unable to move sour
文章目录一、问题描述二、解决方法一、问题描述
hive
在进行数据load的时候报错。
五月天的尾巴
·
2023-12-15 03:12
大数据
数据库
hive
load报错
task
move
error
perl使用Arc
hive
::Tar模块进行文件打包
使用perl的Arc
hive
::Tar模块打包文件夹中的指定文件,输出格式.tar.gz。下面是perl代码:#!
爱读庄子的码农
·
2023-12-15 03:05
perl
perl
shell
Linux
git
bash
Perl操作excel2007的模块
www.jianshu.com/p/84bda53827c8第一种方法:读写excel2007文档的perl模块:Spreadsheet::XLSX(读)和Spreadsheet::WriteExcel(写)一、首先安装包Arc
hive
aofu8398
·
2023-12-15 03:03
操作系统
【Flink名称解释一】什么是cataLog
元数据也可以是持久化的,例如
Hive
Metastore中的元数据。Catalog提供了一个统一的API,用于管理元数据,并使其可以从TableAPI和SQL查询语句中来访问。
周润发的弟弟
·
2023-12-15 03:18
从零开始搞大数据
flink
大数据
kyuubi整合flink yarn application model
目录概述配置flink配置kyuubi配置kyuubi-defaults.confkyuubi-env.sh
hive
验证启动kyuubibeeline连接使用
hive
catalogsql测试结束概述flink
流月up
·
2023-12-15 03:14
大数据
flink
大数据
kyuubi
yarn
application
1.8.0
kyuubi
1.8.0
Spark读写
Hive
Spark读写
Hive
文章目录Spark读写
Hive
(一)配置本地域名映射(二)创建
Hive
表(三)IDEA中编写Spark代码读取
Hive
数据(四)IDEA中编写Spark代码写入数据到
Hive
(一)
叶子上的考拉
·
2023-12-15 02:25
大数据
spark
hive
大数据
intellij-idea
2.CENTOS安装CDH和Kudu-1
企业级数据中心的安装主要分为4个步骤:集群服务器配置,包括安装操作系统、关闭防火墙、同步服务器时钟等;外部数据库安装安装Cloudera管理器;安装CDH集群;集群完整性检查,包括HDFS文件系统、MapReduce、
Hive
大勇任卷舒
·
2023-12-15 01:40
最简单的WebRTC示例
http://www.blogjava.net/linli/arc
hive
/2014/10/21/418910.html在学习WebRTC时,网上的示例大多代码较多,以下是参考那些代码简化的一个WebRTC
mengzhengjie
·
2023-12-15 01:03
webrtc
caution: filename not matched问题解决
caution:filenamenotmatched问题解决操作系统环境:linuxcentos6#unziptest3.ziptest4报错:Arc
hive
:test3.zipcaution:filenamenotmatched
骑马的蜗牛
·
2023-12-15 00:37
linux
linux
Ceph入门到精通-SSL_read() failed SSL: error SSL routines:tls 1_enc:internal error
errorSSLroutines:tls1_enc:internalerrorsubject:"Re\:openssl1.1.1dSSL_read\(\)failedinerrorlog"(mail-arc
hive
.com
瓦哥架构实战
·
2023-12-15 00:55
Ceph入门到精通
ceph
ssl
网络
【
Hive
】——DDL(CREATE TABLE)
1CREATETABLE建表语法2
Hive
数据类型2.1原生数据类型2.2复杂数据类型2.3
Hive
隐式转换2.4
Hive
显式转换2.5注意3SerDe机制3.1读写文件机制3.2SerDe相关语法3.2.1
那时的样子_
·
2023-12-14 23:57
hive
hadoop
数据仓库
【
Hive
】——DDL(DATABASE)
1概述2创建数据库createdatabaseifnotexiststest_databasecomment"thisismyfirstdb"withdbproperties('createdBy'='Allen');3描述数据库信息describe可以简写为descextended可以展示更多信息describedatabasetest_database;describedatabaseexte
那时的样子_
·
2023-12-14 23:57
hive
数据库
hadoop
【
Hive
】——CLI客户端(bin/beeline,bin/
hive
)
1
Hive
Server、
Hive
Server22bin/
hive
、bin/beeline区别3bin/
hive
客户端
hive
-site.xml配置远程MateStore地址XML
hive
.metastore.uristhrift
那时的样子_
·
2023-12-14 23:26
hive
hadoop
数据仓库
【
Hive
】——概述
1什么是
Hive
2
Hive
优点3
Hive
和Hadoop的关系4映射信息记录5SQL语法解析、编译
Hive
能将一个文件映射成为一张表,文件和表之间的关系称为映射
Hive
的功能职责是将SQL语法解析编译成为
那时的样子_
·
2023-12-14 23:15
hive
hive
hadoop
大数据
【
Hive
】——安装部署
内嵌模式3.2本地模式3.3远程模式4安装前准备hadoop.proxyuser.root.hosts*hadoop.proxyuser.root.groups*5远程模式安装5.1下载https://
hive
.apache.org
那时的样子_
·
2023-12-14 23:15
hive
hadoop
数据仓库
Hive
浅析
Hive
是一个简单的LUA沙盒,除了基本的LUA解释器的功能以外,还提供了诸如热加载等功能。了解
HIVE
的工作原理有利于了解Lua虚拟机的底层实现机理。
garagong
·
2023-12-14 23:14
大数据
hive
hadoop
数据仓库
gtest测试
环境安装1、下载gtest1.8版本wgethttps://github.com/google/googletest/arc
hive
/refs/tags/release-1.8.1.zip2、将其解压在
DreamColors
·
2023-12-14 23:43
gtest
单元测试
conda 使用教程(linux)
1.下载安装1.1下载所有版本镜像(清华大学开源镜像网站):https://mirrors.tuna.tsinghua.edu.cn/anaconda/arc
hive
/从中选择合适版本的镜像下载.如Anaconda3
休息一下接着来
·
2023-12-14 22:50
conda
linux
anaconda
hive
-3.1.2环境安装实验
1.修改hadoop相关参数1-修改core-site.xml[bigdata@master
hive
]$vim/opt/module/hadoop/etc/hadoop/core-site.xmlhadoop.proxyuser.bigdata.hosts
芝士小熊饼干
·
2023-12-14 22:09
hive
hadoop
数据仓库
mysql8.0.34的安装配置
下载资源官网下载:MySQL::DownloadMySQLInstaller(Arc
hive
dVersions)https://downloads.mysql.com/arc
hive
s/installer
CDTU iron fan
·
2023-12-14 22:17
安装配置
mysql
hive
数据仓库工具
1、
hive
是一套操作数据仓库的应用工具,通过这个工具可实现mapreduce的功能2、
hive
的语言是hql[
hive
querylanguage]3、官网
hive
.apache.org下载
hive
软件包地址
xinxinyydss
·
2023-12-14 21:38
数据仓库
hive
hadoop
HIVE
SQL 优化
1、reduce的个数:先看一下跑
hive
时出现的参数:inordertochangetheaverageloadforareducer(inbytes):set
hive
.exec.reducers.bytes.per.reducer
本凡_大数据_机器学习
·
2023-12-14 21:32
谷歌推出Gemini语言模型,碾压GPT-4!
详细信息请看:https://fostmar.online/arc
hive
s/317/谷歌推出Gemini语言模型,碾压GPT-4!
单丽尔
·
2023-12-14 21:19
前沿科技
语言模型
chatgpt
人工智能
iPhone 15 Pro Max 与华为 Mate 60 Pro:规格比较
开始之前推荐阅读:澎湃OS与HarmonyOS——主要区别是什么:https://fostmar.online/arc
hive
s/223/GooglePixel与iPhone手机:哪个更好:https:
单丽尔
·
2023-12-14 21:49
数码科技
iphone
华为
ios
Hive
--对空值和NULL的处理
问题描述
Hive
中默认将NULL存为\N,NULL类型的字符串如何检索?
撸码小丑
·
2023-12-14 20:15
【
hive
】order by、sort by、distribute by、cluster by的区别
,在
Hive
中执行脚本时,我们可以通过setmapreduce.job.reduces=10来设置reduce的个数为10。
小赵要加油
·
2023-12-14 19:54
数据仓库
hive
hive
大数据
hadoop
外部文件数据写入
hive
hive
数据库是基于HDFS的一个数据库,是对hdfs数据的一个映射关系。注意:
hive
数据库存入数据的时候不建议使用insertinto语句来进行插入,这样的的操作方式在效率上会很低效。
小赵要加油
·
2023-12-14 19:24
数据仓库
hive
Hive
:从HDFS回收站恢复被删的表
查看回收站中的数据被删除的数据会放在删除数据时使用的用户目录下,如:使用pgxl删除的,那么删除的数据会放在如下目录:/user/pgxl/.Trash该目录下会有多个文件夹,每小时删除的数据放在不同文件夹下,目录如下:3.将回收站的数据移动回表目录下
hive
有语忆语
·
2023-12-14 19:49
大数据之Hive
hive
hdfs
hadoop
hive
映射es表任务失败,无错误日志一直报Task Transitioned from NEW to SCHEDULED
一、背景要利用gpt产生的存放在es种的日志表做统计分析,通过
hive
建es的映射表,将es的数据拉到
hive
里面。
有语忆语
·
2023-12-14 19:49
大数据之Hive
hive
elasticsearch
hadoop
查看
Hive
表信息及占用空间的方法
一、
Hive
下查看数据表信息的方法方法1:查看表的字段信息desctable_name;方法2:查看表的字段信息及元数据存储路径descextendedtable_name;方法3:查看表的字段信息及元数据存储路径
有语忆语
·
2023-12-14 19:19
大数据之Hive
hive
hadoop
数据仓库
hive
-窗口函数
1窗口函数语法分析函数/专用窗口函数over(partitionby列名orderby列名rowsbetween开始位置and结束位置)常用的分析函数常用的分析函数:sum()、max()、min()、avg()、count()常用的专用窗口函数专用窗口函数:row_number()、rank()、dense_rank()窗口函数窗口函数的3个组成部分可以单独使用,也可以混合使用,也可以全部不用o
Logan_addoil
·
2023-12-14 19:07
大数据学习之旅
hive
hadoop
数据仓库
Scala-初学
前提,已经安装好Scala在Linux终端准备资料:a.txt内容
HIVE
底层是hdfs和mapreduce实现存储和计算的。
Logan_addoil
·
2023-12-14 19:07
大数据学习之旅
scala
开发语言
后端
【python】多任务编程
多任务编程有哪些编程提速的方法单线程串行:不加改造的程序多线程并发:利用CPU和IO可以同时执行的原理,让CPU不会干巴巴等待IO完成多CPU并行/多进程:利用多核CPU的能力,真正的并行执行任务多机器并行:hadoop/
hive
小赵要加油
·
2023-12-14 19:33
python
python
开发语言
hive
插入数据失败解决方法
记录一次
hive
错误描述错误:进入
hive
客户端插入数据报错#报错:
hive
(default)>insertintojavaAndBigdata.student(id,name)values(3,"java
Java页大数据
·
2023-12-14 16:57
hive
hive
Linux dpkg:处理 xxx (--configure)时出错 记录
主要用于修复安装被中断或依赖环境被破坏的情况强制解锁sudorm/var/cache/apt/arc
hive
s/locksudorm/var/lib/dpkg/lock环境修复现将info文件夹更名sudomv
团不慌
·
2023-12-14 16:14
Hive
的几种排序方式、区别,使用场景
一、几种排序和区别
Hive
支持两种主要的排序方式:ORDERBY和SORTBY。除此之外,还有DISTRIBUTEBY和CLUSTERBY语句,它们也在排序和数据分布方面发挥作用。
三水青一人尤
·
2023-12-14 12:17
hive
hive
hadoop
数据仓库
大数据
sql
二百一十七、Flume——Flume拓扑结构之聚合的开发案例(亲测,附截图)
(二)结构特征用flume的这种组合方式能很好的解决这一问题,每台服务器部署一个flume采集日志,传送到一个集中收集日志的flume,再由此flume上传到hdfs、
hive
、hbase等
天地风雷水火山泽
·
2023-12-14 12:31
Flume
flume
大数据
代写INF 552作业、代写MFCCs留学生作业、代做Python实验作业、代做Java/c++语言作业代做留学生Processing|代做数据库SQL
Multi-classandMulti-LabelClassificationUsingSupportVectorMachines(a)DownloadtheAnuranCalls(MFCCs)DataSetfrom:https://arc
hive
.ics.uci.edu
kpcjbf8
·
2023-12-06 23:37
R语言中的Rtools安装与环境变量配置
下载Rtools首先,我们需要从CRAN(ComprehensiveRArc
hive
Network)官网下载适用于您的操作系统的Rtools安装程序。请注意选择与
风中旅行
·
2023-12-06 23:29
r语言
开发语言
R语言
快手数仓面试题附答案
常用算子列几个,6到8个吧5transformation跟action算子的区别6map和flatmap算子的区别7自定义udf,udtf,udaf讲一下这几个函数的区别,编写的时候要继承什么类,实现什么方法8
hive
话数Science
·
2023-12-06 21:59
大数据
面试
Spark
spark
大数据
将jdk从1.8升级到17后,maven也要做修改(jdk17爆了,1.8将成为过去式)
从官网下载jdk,直接下载压缩包即可连接https://download.oracle.com/java/17/arc
hive
/jdk-17.0.9_windows-x64_bin.zip(sha256
bug去哪了
·
2023-12-06 19:38
java
maven
开发语言
Anolis 安装 Conda 和 YoloV8
Conda和YoloV8安装##1.anolis安装cv2依赖库yuminstall-ymesa-libGL.x86_64##Anacondahttps://repo.anaconda.com/arc
hive
猪悟道
·
2023-12-06 18:02
机器学习与图像识别
conda
YOLO
python
anolis
ultralytics
解决安装pyspark所遇到的所有问题
一开始安装Hadoop,
hive
,hbase,spark很顺利。但是到了pyspark时候已
天亮说晚安ii
·
2023-12-06 17:33
大数据
spark
ambari 安装及使用ambari安装hadoop记录
Ambari已支持大多数Hadoop组件,包括HDFS、MapReduce、
Hive
、Pig、Hbase、Zookeeper、Sqoop和Hcatalog等。ApacheAmbari支持HDFS
yujianbujianqwe
·
2023-12-06 17:24
ambari
hadoop
大数据
上一页
44
45
46
47
48
49
50
51
下一页
按字母分类:
A
B
C
D
E
F
G
H
I
J
K
L
M
N
O
P
Q
R
S
T
U
V
W
X
Y
Z
其他