E-COM-NET
首页
在线工具
Layui镜像站
SUI文档
联系我们
推荐频道
Java
PHP
C++
C
C#
Python
Ruby
go语言
Scala
Servlet
Vue
MySQL
NoSQL
Redis
CSS
Oracle
SQL Server
DB2
HBase
Http
HTML5
Spring
Ajax
Jquery
JavaScript
Json
XML
NodeJs
mybatis
Hibernate
算法
设计模式
shell
数据结构
大数据
JS
消息中间件
正则表达式
Tomcat
SQL
Nginx
Shiro
Maven
Linux
数据仓库hive
Jmeter 基于Docker 实现分布式测试
制作Jmeter基础镜像下载jmeter安装包https://arc
hive
.apache.org/dist/jmeter/binaries/apache-jmete
Chengdu.S
·
2024-02-04 06:28
#
jmeter
jmeter
docker
分布式
大数据本地环境搭建03-Spark搭建
需要提前部署好Zookeeper/Hadoop/
Hive
环境1Local模式1.1上传压缩包下载链接链接:https://pan.baidu.com/s/1rLq39ddxh7np7JKiuRAhDA?
OnePandas
·
2024-02-04 06:31
Spark
大数据集群环境搭建
大数据
spark
分布式
Hadoop大数据实战系列文章之
Hive
hive
是基于Hadoop的一个
数据仓库
工具,可以将结构化的数据文件映射为一张数据库表,并提供完整的sql查询功能,
Hive
定义了简单的类SQL查询语言,称为HQL,它允许熟悉SQL的用户查询数据可以将
测试帮日记
·
2024-02-04 05:45
spark运维问题记录
环境:spark-2.1.0-bin-hadoop2.71.Spark启动警告:neitherspark.yarn.jarsnotspark.yarn.arc
hive
isset,fallingbacktouploadinglibrariesunderSPARK_HOME
lishengping_max
·
2024-02-04 05:11
Spark
spark
当电脑gpu太强,安装最新对应的pytorch版本和对应版本的cuda
pytorch最新的cuda对应的版本为12.1,所以先要装上12.1的cuda我们去cuda官网找到12.1版本的驱动:https://developer.nvidia.com/cuda-toolkit-arc
hive
Ling_Ze
·
2024-02-04 05:05
python相关系列软件安装
pytorch
人工智能
python
大数据组件部署下载链接
Hadoop2.7下载连接:https://arc
hive
.apache.org/dist/hadoop/core/hadoop-2.7.6/
Hive
2.3.2下载连接:http://arc
hive
.apache.org
运维道上奔跑者
·
2024-02-04 05:13
大数据
zookeeper
hbase
kafka
hadoop
hive
【大数据开发运维解决方案】Hadoop+
Hive
+HBase+Kylin 伪分布式安装指南
Hadoop2.7.6+Mysql5.7+
Hive
2.3.2+Hbase1.4.9+Kylin2.4单机伪分布式安装文档注意:######################################
运维道上奔跑者
·
2024-02-04 05:43
大数据
hadoop
分布式
Hadoop2.7.6+Mysql5.7+
Hive
2.3.2+zookeeper3.4.6+kafka2.11+Hbase1.4.9+Sqoop1.4.7+Kylin2.4单机伪分布式安装及官方案例测
spark和Hudi的安装部署文档,本人已经写完,连接:Hadoop2.7.6+Spark2.4.4+Scala2.11.12+Hudi0.5.1单机伪分布式安装注意:本篇文章是在本人写的Hadoop+
Hive
运维道上奔跑者
·
2024-02-04 05:43
分布式
hbase
zookeeper
hadoop
Java JDK下载+安装+配置环境【图文教程】
JDK下载:方式一:Oracle官网下载链接:https://www.oracle.com/java/technologies/downloads/arc
hive
/步骤:1.选择要下载的版本2.选择自己电
Ts_White
·
2024-02-04 04:00
开发环境搭建
java
开发语言
后端
第七章 主管信息系统和
数据仓库
[TOC]第七章主管信息系统和
数据仓库
7.0前言EIS是数仓之前的概念EIS没有注重基础结构(数据源、数据质量、数据流通等)DSS是现代的EIS,与数仓紧密相连7.1EIS概述EIS典型用途趋势分析关键指标度量和跟踪向下钻取问题监控竞争分析关键性能指标监控
晨磊的微博
·
2024-02-04 04:53
【git】命令一览表
命令命令简要说明gitadd添加至暂存区gitadd–interactive交互式添加gitapply应用补丁gitam应用邮件格式补丁gitannotate同义词,等同于gitblamegitarc
hive
AG_
·
2024-02-04 02:57
版本控制系统
git
命令
windows安装配置anaconda & 创建并激活自己的虚拟环境(亲测可行,装不好你打我)
一.下载选择一:进入清华镜像选择过去的版本https://mirrors.tuna.tsinghua.edu.cn/anaconda/arc
hive
/本人电脑配置不高,并且一般过去的版本比较稳定,因此保守起见选择
computer_vision_chen
·
2024-02-03 22:24
python笔记
windows
anaconda
人工智能
EasyExcel多线程导出并实现Zip压缩
然后创建线程池,调用zipArc
hive
OutputStream来写入图片和excel@PostMapping("/export3")publicvoidexportZip(HttpServletResponseresponse
顾十方
·
2024-02-03 22:35
java
开发语言
2019-10-08 大数据开发进阶之路
市场需要的水平熟练掌握Linux、SQL与
Hive
SQL掌握Hadoop生态主流技术,如HDFS/MapRedunce/Yarn/HBase/Flume等掌握Spark生态核心技术,如Spark架构/RDD
红瓦李
·
2024-02-03 20:39
CentOS7安装MySQL5.7
镜像下载地址:链接:http://isoredirect.centos.org/centos/7/isos/x86_64/MySQL5.7下载地址:https://downloads.mysql.com/arc
hive
s
IT-xiaobai
·
2024-02-03 20:13
linux
数据库
centos
mysql
大数据环境搭建(一)-
Hive
1
hive
介绍由Facebook开源的,用于解决海量结构化日志的数据统计的项目本质上是将HQL转化为MapReduce、Tez、Spark等程序
Hive
表的数据是HDFS上的目录和文件
Hive
元数据metastore
xfchn多多学习学习
·
2024-02-03 20:42
大数据
大数据
hive
hadoop
【读书笔记】
数据仓库
- Apache Kylin权威指南
ApacheKylin权威指南(第2版)◆1.2.1为什么要使用ApacheKylin它们的主要技术是“大规模并行处理”(MassivelyParallelProcessing,MPP)和“列式存储”(ColumnarStorage)◆1.2.2ApacheKylin怎样解决关键问题基于以上两点,我们得到一个新的思路——“预计算”。应尽量多地预先计算聚合结果,在查询时刻也尽量使用预计算的结果得出查
KevinBrain
·
2024-02-03 19:16
大数据
数据仓库
apache
kylin
大数据
分布式
[Python] 如何使用scikit-learn的preprocessing和impute模块进行数据预处理(数据无量纲化,缺失值填充,对分类型特征编码与哑变量,对连续型特征进行二值化与分段)
数据挖掘的五大流程获取数据从各种来源收集数据,包括但不限于数据库、
数据仓库
、互联网、传感器、社交媒体等。获取数据的方式可以通过数据抓取、数据爬取、数据采集工具等方法进行。
老狼IT工作室
·
2024-02-03 18:16
机器学习
python
机器学习
scikit-learn
python
PHP 配置Redis拓展及应用
/local目录下cd/usr/local下载源码包,如果下载速度过慢,建议从github镜像下载再上传到服务器wgethttps://github.com/phpredis/phpredis/arc
hive
华章酱
·
2024-02-03 17:59
Linux
开发环境
php
开发语言
数仓建模&维度建模理论知识
0.思维导图第1章
数据仓库
概述1.1
数据仓库
概述
数据仓库
是一个为数据分析而设计的企业级数据管理系统。
韩顺平的小迷弟
·
2024-02-03 16:02
#
大数据开发
spark
大数据
数据仓库
hadoop
hive
离线数仓-数据治理
目录一、前言1.1数据治理概念1.2数据治理目标1.3数据治理要解决的问题1.3.1合规性元数据合规性数据质量合规性数据安全合规性1.3.2成本存储资源成本计算资源成本二、
数据仓库
发展阶段2.1初始期2.2
爱吃辣条byte
·
2024-02-03 13:51
数据治理
大数据
数据仓库
hive
sql的基础知识点
字符串类型charvarchar/varchar2blob/texttinyblob/tinytextmediumblob/mediumtextlongblob/longtextstring(常用)二、
Hive
爱吃辣条byte
·
2024-02-03 13:18
Hive
大数据
数据仓库
hive
安卓SurfaceTexture中updateTexImage使用及源码分析
初始化相关源码分析Surface绘制流程源码分析createBufferQueue源码分析SurfaceTexture之updateTexImage源码分析结尾本文首发地址https://h89.cn/arc
hive
s
清霜辰
·
2024-02-03 11:30
Android开发
android
SurfaceTexture
updateTexImage
nodejs认证模块passport.js passport-local用法
2019独角兽企业重金招聘Python工程师标准>>>基本用法可参考以下文章:passport.js学习笔记http://idlelife.org/arc
hive
s/808Express结合Passport
weixin_34302561
·
2024-02-03 11:41
javascript
python
php
ViewUI
深入数仓离线数据同步:问题分析与优化措施
一、前言在
数据仓库
领域,离线数仓和实时数仓是常见的两种架构类型。离线数仓一般通过定时任务在特定时间点(通常是凌晨)将业务数据同步到
数据仓库
中。
Light Gao
·
2024-02-03 10:14
数据仓库
实时数仓
数据库
数据仓库
大数据
数据分析
数仓日常维护:剖析每日增量同步的内部机制
而数据的实时性和准确性对于确保
数据仓库
的有效性至关重要。而离线数仓中常见的数据同步方式是T+1,其中同步方式主要分为两种:全量同步和增量同步。本文聚焦于探讨增量同步的原理,解析其工作机制和实
Light Gao
·
2024-02-03 10:14
数据仓库
大数据
数据库
大数据
数据仓库
数据同步
sql
centos7 linux /usr/bin/ld: cannot find -ljemalloc
1.官网下载4.5.0.tar.gz;地址:https://github.com/jemalloc/jemalloc/arc
hive
/4.5.0.tar.gz2.解压到指定目录;tar-zxvf4.5.0
Nankys
·
2024-02-03 10:41
工具
工具
centos
Hive
中sql的使用
1、创建表建表语法CREATE[EXTERNAL]TABLE[IFNOTEXISTS]table_name[(col_namedata_type[COMMENTcol_comment],...)][COMMENTtable_comment][PARTITIONEDBY(col_namedata_type[COMMENTcol_comment],...)][CLUSTEREDBY(col_name,
piziyang12138
·
2024-02-03 10:30
Hive
学习-高级版一(其他客户端使用介绍)
操作
hive
的方法前面只介绍了
hive
客户端方式,但是被官方定义为过时(虽然还是最常用的),其他操作
hive
的方式有beeline、webUI、JavaAPI(官方最推荐的方式是beeline)。
刘子栋
·
2024-02-03 09:25
RT-Thread 28. Nano实现MSH及CPU利用率显示
Nano版源码官网下载https://github.com/RT-Thread/rtthread-nano/arc
hive
/refs/heads/master.zip1.代码结构2.代码//main.c
lljss2020
·
2024-02-03 09:04
#
RT-Thread
单片机
驱动开发
嵌入式硬件
2024-02-01(
Hive
)
1.我们通过忘
Hive
中执行SQL语句,
Hive
会帮我们将SQL语句翻译成MapReduce在底层去做分布式的计算。2.
Hive
看似处理的是mysql的表,但实际上处理的是HDFS中的文本文件。
陈xr
·
2024-02-03 08:53
随记日志
hadoop
ajax返回的是空白,jQuery ajax - 返回空白响应
这是我正在使用的javascript代码:$.ajax({url:'/BlogArc
hive
.asmx/ChangePost',type:'POST',contentType:'application/
暴躁老哥锅得钢
·
2024-02-03 08:21
ajax返回的是空白
(四)
hive
的搭建2
在(三)
hive
的搭建1中我们搭建好了
hive
环境,但是只能本地访问,在本节中配置
Hive
的访问方式。
调试大师
·
2024-02-03 08:18
大数据
Hadoop
hive
hadoop
数据仓库
(三)hadoop之
hive
的搭建1
下载访问官方网站https://
hive
.apache.org/点击downloads点击Downloadareleasenow!
调试大师
·
2024-02-03 08:48
Hadoop
大数据
hadoop
hive
大数据
Hive
collect_set()、collect_list()列转行,并对转换后的行值排序
Hive
collect_set()、collect_list()列转行,和concat_ws()使用,并对转换后的行值排序1、需求描述对列值分组,并按一定顺序排序,最后多行合并一行,合并值左到右逆序排列
Data_IT_Farmer
·
2024-02-03 08:17
hive
数据仓库
行转列
行转列的值排序
sort_array
Datax3.0+DataX-Web部署分布式可视化ETL系统
DataX致力于实现包括关系型数据库(MySQL、Oracle等)、HDFS、
Hive
、ODPS、HBase、FTP等各种异构数据源(即不同的数据库)间稳定高效的数据同步功能。
無法複制
·
2024-02-03 08:06
分布式
etl
数据仓库
Jmeter直连mysql数据库教程
mysql数据库能够通过Navicat等远程连接工具连接下载驱动并加入jmeter1.mysql驱动下载地址:MySQL::DownloadMySQLConnector/J(Arc
hive
dVersions
爱吃java的羊儿
·
2024-02-03 08:56
软件测试
数据库
jmeter
mysql
2023还有所谓的“金三银四”,行业梦魇35岁是否提前了呢
技能多元化从原来的单一技能到其他技术:后端java、go、python、
hive
、算法。
南宫文凯
·
2024-02-03 07:45
朝闻道夕可死
职场和发展
Flink SQL Client 安装各类 Connector、组件的方法汇总(持续更新中....)
但是对于某些特定的平台,如果AWSEMR、ClouderaCDP等产品会有所不同,主要是它们中的某些Jar包可能被改写过,例如和
Hive
Metastore的交互,AWSEMR就有另外一套Metatstore
Laurence
·
2024-02-03 06:53
大数据专题
flink
sql
client
安装
部署
connector
插件
OpenHarmony—开发及引用静态共享包(API 9)
HAR(HarmonyArc
hive
)是静态共享包,可以包含代码、C++库、资源和配置文件。通过HAR可以实现多个模块或多个工程共享ArkUI组件、资源等相关代码。
不入流HarmonyOS开发
·
2024-02-03 06:11
鸿蒙
HarmonyOS
OpenHarmony
harmonyos
运维
职场和发展
鸿蒙系统
开发语言
鸿蒙
OpenHarmony
C/C++回调函数--C作者
原文地址:http://www.cnblogs.com/chenyuming507950417/arc
hive
/2012/01/02/2310114.html今天讨论下C/C++中的回调函数。
Caiaolun
·
2024-02-03 04:39
EVM 对预测结果进行整合
同源注释和转录组整合都会得到一个预测结果,EVidenceModeler(EVM)可以对上述结果进整合软件安装wget-4https://github.com/EVidenceModeler/EVidenceModeler/arc
hive
斩毛毛
·
2024-02-03 03:52
2019-03-16 Spark基本架构及运行原理
SparkSQL:Spark处理结构化数据的库,就像
Hive
SQL,Mysql一样,企业中用来做报表统计。SparkStreaming:实时数据流处理组件,类似Storm。
做一只乐观的小猴子
·
2024-02-03 02:04
测试环境搭建整套大数据系统(二:安装jdk,mysql)
2.步骤wgethttps://downloads.mysql.com/arc
hive
s/get/p/23/file/mysql-server_5.7.36-
宇智波云
·
2024-02-02 23:44
大数据项目
java
mysql
adb
什么是war包?war包该怎么运行?
什么是jar包jar包全称JavaArc
hive
,中文名叫java归档文件,这是一种
爱编程的鱼
·
2024-02-02 23:09
python入门教程
算法结构
开发语言
数据库
算法
python
HADOOP_MAPRED_HOME=${full path of your hadoop distribution directory}
场景在Hadoop3.13的YARN上运行MapReduce报错信息终端界面提示FAILED:ExecutionError,returncode2fromorg.apache.hadoop.
hive
.ql.exec.mr.MapRedTask
小基基o_O
·
2024-02-02 23:10
Hadoop
单机搭建hadoop环境(包括hdfs、yarn、
hive
)
单机可以搭建伪分布式hadoop环境,用来测试和开发使用,hadoop包括:hdfs服务器yarn服务器,yarn的前提是hdfs服务器,在前面两个的基础上,课可以搭建
hive
服务器,不过
hive
不属于
howard_shooter
·
2024-02-02 23:39
大数据
hadoop
大数据
分布式
mysql历史版本下载资源
MySQL::DownloadMySQLCommunityServer(Arc
hive
dVersions)
喜羊羊love红太狼
·
2024-02-02 23:37
数据库
eureka
spring
cloud
云原生
数据湖系列之一 | 你一定爱读的极简数据平台史,从
数据仓库
、数据湖到湖仓一体
从
数据仓库
、数据湖,到现在的湖仓一体,业界建设数据平台的新方法和新技术层出不穷。理解这些方法和技术背后隐藏的演进脉路、关键问题、核心技术原理,可以帮助企业更好地建设数据平台。
百度智能云技术站
·
2024-02-02 23:04
百度沧海·存储
数据湖
百度
对象存储
【cmake】cmake常用内置变量总结
变量名含义CMAKE_ARC
HIVE
_OUTPUT_DIRECTORY静态库输出目录CMAKE_LIBRARY_OUTPUT_DIRECTORY动态库输出目录CMAKE_RUNTIME_OUTPUT_DIRECTORY
beidou111
·
2024-02-02 19:47
#
CMake
c++
开发语言
上一页
12
13
14
15
16
17
18
19
下一页
按字母分类:
A
B
C
D
E
F
G
H
I
J
K
L
M
N
O
P
Q
R
S
T
U
V
W
X
Y
Z
其他