数据仓库（hive）

sql 通过lead lag获取数据连续最大条数-获取用户连续登录最长天数

目录一、业务需求二、初始化测试数据三、实现（一）最终语句（hive）（二）思路一、业务需求获取每个用户连续登录的最长天数二、初始化测试数据droptableifEXISTSlogin_log;createtablelogin_log
抓住小白白·2024-01-05 17:05

基于SSM的招聘信息管理系统的设计与实现-计算机毕业设计源码78049

摘要由于数据库和数据仓库技术的快速发展，招聘客户管理系统建设越来越向模块化、智能化、自我服务和管理科学化的方向发展。
vx_bysj1330·2024-01-05 17:15

互联网系统发布方案

书目录链接：https://www.shumulu.com/archives/130755蓝绿部署A/B测试灰度发布
我可梦·2024-01-05 16:10

linux命令大全

目录浅蓝色：链接文件灰色：其他的一些文件命令介绍部分参考来自:http://man.linuxde.net/grep分类参考：http://www.cnblogs.com/xlmeng1988/archive
helen_elva·2024-01-05 16:29

在centos7部署redis7

上部署安装redis-7.2.3二、步骤官网https://redis.io/download/1、下载合适版本的rediswgethttps://github.com/redis/redis/archive
潇洒哥Kahn·2024-01-05 15:02

打包与解包：Go 中 archive 库的实战应用

打包与解包：Go中archive库的实战应用引言archive库概览支持的文件格式archive库与其他Go标准库的协同使用archive/tar打包与解包打包文件到Tar归档从Tar归档解包文件使用archive
walkskyer·2024-01-05 14:35

基于51单片机电子秒表倒计时器proteus仿真 汇编程序 数码管显示LCD1602显示

硬件设计附：http://www.jh-tec.cn/archives/7292电路图1：数码管显示；时间清零；启动计时；暂定计时；继续计时；电路图2程序设计TLOWEQU78HTHIGHEQU0ECHLED_WEI_ProEQU0f0H
Question-7·2024-01-05 13:09

《PySpark大数据分析实战》-24.数据可视化图表介绍

对大数据技术栈Hadoop、Hive、Spark、Kafka等有深入研究，对Data
wux_labs·2024-01-05 13:02

大数据开发个人简历范本（2024最新版-附模板）

大数据运维工程师背景，熟悉相关技术和工具具备良好的团队合作能力，善于沟通和协作具有快速学习新知识和解决问题的能力对于数据科学和分析充满热情，喜欢研究和探索新技术专业技能大数据熟悉Hadoop、Spark、Hive
itLeeyw·2024-01-05 13:53

oracle增量恢复解决备库GAP问题

RollingforwardastandbydatabaseusingRMANIncrementalBackup.模拟归档丢失的情况一主库操作：查看当前归档停用归档传输altersystemsetlog_archive_dest_state
ZzzkiYoumi·2024-01-05 12:28

weblogic中间件安装

1.下载jdkJavaArchiveDownloads-JavaSE6下载jdk-6u45-linux-x64.bin2.配置防火墙和SELINUXRedhat7操作系统配置防火墙，开放应用端口，例如7001
ZzzkiYoumi·2024-01-05 12:24

ubuntu安装xinetd服务报错 invoke-rc.d: policy-rc.d denied execution of restart解决

1、下载xinetd安装包wgethttp://archive.ubuntu.com/ubuntu/pool/universe/x/xinetd/xinetd_2.3.15.3-1_amd64.debwgethttp
cjz0422·2024-01-05 12:19

hive之Map Join使用方法

目录介绍mapjoin的使用方法结语介绍MAPJION会把小表全部加载到内存中，在map阶段直接拿另外一个表的数据和内存中表数据做匹配，由于在map端是进行了join操作，省去了reduce运行的时间，算是hive
IMezZ·2024-01-05 10:42

【Spark精讲】Spark on Hive性能优化

目录第一章1.1集群配置概述1.2集群规划概述第二章Yarn配置2.1Yarn配置说明yarn.nodemanager.resource.memory-mbyarn.nodemanager.resource.cpu-vcoresyarn.scheduler.maximum-allocation-mbyarn.scheduler.minimum-allocation-mb第三章Spark的配置说明3
话数Science·2024-01-05 10:10

数据分析系统有哪些

一、数据仓库系统数据仓库系统作为数据分析的基石，扮演着收集、存储、整合和管理数据的重要角色。它能够集中存储来自多个数据源的原始数据，并进行数据清洗和转换，便于后续的分析工作。常见的数据仓
qingyunliushuiyu·2024-01-05 10:52

数据挖掘总结(考试版）

数据变换（数据变换或统一成适合挖掘的形式)数据挖掘（核心步骤，使用智能方法提取数据模式）模式评估（根据某种兴趣度量识别提供知识的真正有趣的模式）知识表示（使用可视化和知识表示技术，向用户提供挖掘的知识）数据仓库
acmakb·2024-01-05 09:45

启动hive报错org.datanucleus.exceptions.NucleusException:Error creating transactional connecCtion factory

一、问题描述安装完hive后，在启动时报错：org.datanucleus.exceptions.NucleusException:ErrorcreatingtransactionalconnecCtionfactory
哇咔咔哇咔·2024-01-05 09:54

如何下载R语言的最新版本和旧版本

R语言官网地址：R:TheRProjectforStatisticalComputing(r-project.org)国内清华镜像：TheComprehensiveRArchiveNetwork(tsinghua.edu.cn
哇咔咔哇咔·2024-01-05 09:23

No suitable application records were found. Verify your bundle identifier 'XXXXXXXXXX' is correct.

问题描述今天在向AppStoreConnect提交新构建的app时，Archive-DistributeApp后，显示“Nosuitableapplicationrecordswerefound.Verifyyourbundleidentifier'XXXXX'iscorrect
NapoleonY·2024-01-05 08:56

Hive11_Rank函数

Rank1）函数说明RANK()排序相同时会重复，总数不会变DENSE_RANK()排序相同时会重复，总数会减少ROW_NUMBER()会根据顺序计算2）数据准备3）需求计算每门学科成绩排名。4）创建本地score.txt，导入数据[root@localhostdatas]$viscore.txt孙悟空语文87孙悟空数学95孙悟空英语68大海语文94大海数学56大海英语84宋宋语文64宋宋数学86
程序喵猴·2024-01-05 08:44

Hive10_窗口函数

窗口函数（开窗函数）1相关函数说明普通的聚合函数聚合的行集是组,开窗函数聚合的行集是窗口。因此,普通的聚合函数每组(Groupby)只返回一个值，而开窗函数则可为窗口中的每行都返回一个值。简单理解，就是对查询的结果多出一列，这一列可以是聚合值，也可以是排序值。开窗函数一般分为两类,聚合开窗函数和排序开窗函数。OVER()：指定分析函数工作的数据窗口大小，这个数据窗口大小可能会随着行的变而变CURR
程序喵猴·2024-01-05 08:13

Hive实战处理（二十三）hive整合phoenix

背景：业务表使用hbase存储,使用hive整合phoenix，使用sql语句进行数据查询（如果可以的话使用网关API对外提供服务）统一接口调用，查询上线比较高效。
sheep8521·2024-01-05 08:13

datax不支持对hive hdfs(ha)高可用 的hdfsreader（即无法读取到HDFS多节点高可用）.

处理方案：采用引入CDH的hive、hdfs等配置文件到hdfsreader,jar替换原的jar文件解决。
whbi·2024-01-05 08:06

hive问题记录

expected.at[row,col,system-id]:[48,15,"file:/opt/cloudera/parcels/CDH-6.3.2-1.cdh6.3.2.p0.1605554/etc/hive
李小晨同学·2024-01-05 08:02

数据仓库理论进阶 - 01 《阿里大数据之路》第二篇数据模型篇

第8章大数据领域建模综述此文章为学习笔记，有兴趣的小伙伴可以根据以下指引获取更多，学习内容链接如下：视频：【一起啃书】阿里大数据之路数据仓库建模基础理论研读(已完结)_哔哩哔哩_bilibili书籍：《
:Concerto·2024-01-05 08:43

为什么自然语言转SQL(text to sql)在企业中较难落地

业务用户仍在寻找BI仪表板中的见解，数据分析师仍在打开连接到数据仓库的SQL引擎并手写SQL查询来回答临时业务问题。为什么对话式BI还没有出现？虽然结构化数据仅占全球数据的20%左右，但大
数大招疯·2024-01-05 08:36

【Spark精讲】性能优化：并行度

端并行度RDD：参数：spark.default.parallelism手动：groupByKey(10)，10即为并行度SparkSQL：参数：spark.sql.shuffle.partitionsHiveonSpark
话数Science·2024-01-05 07:58

Mac上安装MySQL

MySQL官网上http://dev.mysql.com/downloads/mysql/，下载mysql可安装dmg版本以5.7.14为例：MacOSX10.11(x86,64-bit),DMGArchive
喜叔z·2024-01-05 05:24

HBase 和 Hive 的差别是什么，各自适用在什么场景中？

转载自（爱我的程序人生）Hbase和Hive在大数据架构中处在不同位置，Hbase主要解决实时数据查询问题，Hive主要解决数据处理和计算问题，一般是配合使用。
杰在天涯·2024-01-05 05:23

ekho环境Linux通过Docker安装

第一步下载ekho-master源码https://github.com/hgneng/ekho/archive/master.zip第二步创建DockerFile#使用Ubuntu作为基础镜像FROMubuntu
月慕向阳·2024-01-05 02:52

黑猴子的家：Hive查询之排序

全局排序（OrderBy）1）使用ORDERBY子句排序ASC（ascend）:升序（默认）DESC（descend）:降序2）ORDERBY子句在SELECT语句的结尾案例查询员工信息按工资升序排列hive
黑猴子的家·2024-01-05 02:23

访问 JetPack 存档

存档：https://developer.nvidia.cn/zh-cn/embedded/jetpackhttps://developer.nvidia.cn/embedded/jetpack-archiveSDKManager
南沙的星星·2024-01-05 02:33

impala + kudu | 大数据实时计算踩坑优化指南

一开始需要全量导入kudu，这时候我们先用sqoop把关系数据库数据导入临时表，再用impala从临时表导入kudu目标表由于sqoop从关系型数据直接以parquet格式导入hive会有问题，这里默认
王知无(import_bigdata)·2024-01-04 23:41

拒绝纸张浪费，Paperless-ngx开源文档管理系统将纸质版转换成可搜索的电子版档案

GitHub-paperless-ngx/paperless-ngx:Acommunity-supportedsuperchargedversionofpaperless:scan,indexandarchiveallyourphysicaldocuments
喜好儿aigc·2024-01-04 22:59

Hive基本使用（2）

hiveDML数据操作一、数据导入1.向表中装载数据（Load）语法：hive>loaddata[local]inpath‘数据的path’[overwrite]intotablestudent[partition
DIY……·2024-01-04 22:42

hive常用的函数

一、概述1.查看系统自带的函数showfunctions;hive(dyhtest)>showfunctions;OKtab_name!!
DIY……·2024-01-04 22:42

hive优化

一、执行计划（Explain）基本语法EXPLAIN[EXTENDED|DEPENDENCY|AUTHORIZATION]querydemo:hive(dyhtest)>explainselect*fromemp
DIY……·2024-01-04 22:42

Hive基本使用（1）

这里写目录标题#HiveDDL数据定义1.显示数据库2.创建数据库3.查看数据库详情4.修改数据库5.删除数据库6.建表#HiveDDL数据定义1.显示数据库hive(dyhtest)>showdatabases
DIY……·2024-01-04 22:12

数据湖和传统数仓区别及湖仓一体

1.数据仓库早期系统采用关系型数据库来存放管理数据，但是随着大数据技术的兴起，人们对于多方面数据进行分析的需求愈加强烈，这就要求建立一个能够面向分析、集成保存大量历史数据的新型管理机制，这一机制就是数据仓库
土豆马铃薯·2024-01-04 20:04

mysql之四大引擎、账号管理以及建库

目录一、数据库存储引擎1.1存储引擎查看1.2四大引擎1.2.1InnoDB1.2.2MyISAM1.2.3MEMORY1.2.4Aichive二、数据库管理2.1元数据库简介2.2元数据库分类2.2.1information_schema2.2.2mysql2.2.3performance_schema2.3
小黎同学.·2024-01-04 20:17

Redis在Window服务下的安装

Redis安装1.首先在Windows下下载安装Redis下载地址：https://github.com/MicrosoftArchive/redis/releases图片.png根据你电脑系统的实际情况选择
KavinDotG·2024-01-04 18:43

《数据仓库与数据挖掘》期末复习总结

《数据仓库与数据挖掘》期末复习总结适用教材：《数据挖掘概念与技术（第3版）》，JiaweiHan，MiehelineKamber，JianPei著，机械工业出版社提示：与教材内容不完全匹配，有所取舍写在前面
炼魂·2024-01-04 18:43

MySQL之四大引擎、账号管理以及建库

目录数据库存储引擎简介存储引擎得查看support字段说明InnoDBMyISAMMEMORYArchive数据库管理元数据库简介元数据库分类相关操作MySQL库数据表管理三大范式基本数据类型优化原则整形实数字符串
懒大王o·2024-01-04 17:16

Linux第3步_安装Ubuntu操作系统

等几秒钟，得到下面的界面：4、点击“CD/DVD”，得到下图：5、选择“使用ISO映像文件(M)”，见下图：6、点击“浏览”，选择“ubuntu-18.04.5-desktop-amd64.isoArchive
LaoZhangGong123·2024-01-04 16:49

漏洞环境搭建（利用ubuntu）

dockercurl-shttps://get.docker.com/|sh运行docker服务systemctlstartdocker3.下载项目​wgethttps://github.com/vulhub/vulhub/archive
金灰·2024-01-04 16:16

数仓工作中的常见问题及解决方案

数据仓库系列文章数仓架构发展史数仓建模方法论数仓建模分层理论数仓建模—宽表的设计数仓建模—指标体系数据仓库之拉链表数仓—数据集成数仓—数据集市数仓—商业智能系统数仓—埋点设计与管理数仓—IDMapping
大数据技术派·2024-01-04 16:34

（十一）数据分片(Sharding)和数据分区(PARTITIONing)简述

虽然可能跟其它的例如HBase、Hive之类的比有些差异和不足，但并不影响壮志。
紫狐挽诗·2024-01-04 14:36

Hudi介绍

记录每一次操作类型、状态及详细的元数据，这些Instant最终都会存到.hoodie元数据目录下，为了避免元数据文件数量过多，ActiveTimeline越来越长，需要对比较久远的操作进行归档（archive
实时即未来·2024-01-04 11:38

Lua中使用List

Postedon2008-10-2611:06剑孤寒http://groups.google.com/group/jianguhanhttp://www.cppblog.com/jianguhan/archive
cwq水域·2024-01-04 11:01

Flume基础知识（四）：Flume实战之实时监控单个追加文件

1）案例需求：实时监控Hive日志，并上传到HDFS中2）需求分析：3）实现步骤：（1）Flume要想将数据输出到HDFS，依赖Hadoop相关jar包检查/etc/profile.d/my_env.sh
依晴无旧·2024-01-04 10:08
上一页 36 37 38 39 40 41 42 43 下一页
按字母分类： ABCDEFGHIJKLMNOPQRSTUVWXYZ其他