数据仓库（hive）

第524封信｜致柏舒柏弘

本周主题：Unit23Lesson1HereistheBeehive童言童语：柏舒：最近变得有点黏人了，考虑周边课程给他安排一下。有时候我要上课根本顾不上他，他一个人自言自语可以说半天话。
端老师·2023-12-26 23:14

DM、HIVE和Kingbase8(人大金仓数据库)给列增加备注

DM数据库给列增加备注1、创建表CREATETABLEtest222(idintNOTNULLPRIMARYKEY,namevarchar(1000)DEFAULTNULL,emailvarchar(1000)DEFAULTNULL,phonevarchar(1000)DEFAULTNULL)2、给列添加注释commentoncolumnTEST222.NAMEis'这是一个列注释';例如：com
宁儿测开进阶·2023-12-26 23:36

ZooKeeper Client API 安装及使用指北

下载wgethttps://archive.apache.org/dist/zookeeper/zookeeper-3.5.4-beta/zookeeper-3.5.4-beta.tar.gz解压tar-zxfzookeeper
gongyuandaye·2023-12-26 22:27

hive下库里有表数据，删不了库的解决办法

hive下库里有表数据，删不了库的解决办法报错：FAILED:ExecutionError,returncode1fromorg.apache.hadoop.hive.ql.exec.DDLTask.InvalidOperationException
北凉-徐凤年·2023-12-26 20:07

【Spark-HDFS小文件合并】使用 Spark 实现 HDFS 小文件合并

3、core-site.xml、hdfs-site.xml、hive-site.xml、yarn-site.xmlx等文件
bmyyyyyy·2023-12-26 17:15

datasophon组件安装时踩坑记录

identifiedby'xxxx';1.安装hdfs后有一个namenode进程未启动解决：在那个未启动的节点上执行hdfsnamenode-bootstrapStandby之后在web页面重启hdfs2.hiveonspark
州周·2023-12-26 17:56

电商数仓笔记7_数据仓库系统（数仓搭建-DWD层，数仓搭建-DWS层，数仓搭建-DWT层，数仓搭建-ADS层）

电商数仓一、数仓搭建-DWD层1、DWD层（用户行为日志）（1）日志解析思路（2）get_json_object函数使用（3）启动日志表（4）页面日志表（5）动作日志表（6）曝光日志表（7）错误日志表（8）DWD层用户行为数据加载脚本2、DWD层（业务数据）（1）DWD层业务数据首日装载脚本（2）DWD层业务数据每日装载脚本二、数仓搭建-DWS层1、系统函数（1）nvl函数（2）日期处理函数（3）
明灭18·2023-12-26 17:47

电商数仓笔记6_数据仓库系统（数仓搭建-ODS层，数仓搭建-DIM层）

电商数仓一、数仓搭建-ODS层1、ODS层（用户行为数据）（1）创建日志表ods_log（2）Shell中单引号和双引号区别（3）ODS层日志表加载数据脚本2、ODS层（业务数据）（1）ODS层业务表首日数据装载脚本（2）ODS层业务表每日数据装载脚本二、数仓搭建-DIM层1、商品维度表（全量）2、优惠券维度表（全量）3、活动维度表（全量）4、地区维度表（特殊）5、时间维度表（特殊）6、用户维度表
明灭18·2023-12-26 17:17

四、电商数据仓库系统——第5章 数据仓库设计

5.1数据仓库分层规划优秀可靠的数仓体系，需要良好的数据分层结构。合理的分层，能够使数据体系更加清晰，使复杂问题得以简化。以下是该项目的分层规划。5.2数据仓库构建流程以下是构建数据仓库的完整流程。
怕被各位卷死·2023-12-26 17:47

window系统maven官方下载安装包maven安装配置

Maven–DownloadApacheMaven##历史版本下载位置##maven历史版本下载Indexof/dist/maven/maven-3##下载二进制包不建议升到太高版本与idea有不兼容，会报错3.9.0版本https://archive.apache.org
蚰蜒螟·2023-12-26 16:11

ETL 数据抽取有哪些常见的应用场景？

1、数据仓库建设，从基础差到数据集市到主题库2、数据迁移，信息系统切换新机器是需要3、数据整合，将多个数据来源整合到一个数据库中4、数据同步，为了保证信息系统的高可用或基于安全考虑，进行数据同步
王永翔·2023-12-26 15:21

【Hive】——函数案例

1Hive多字节分隔符处理1.1默认规则Hive默认序列化类是LazySimpleSerDe，其只支持使用单字节分隔符（char）来加载文本数据，例如逗号、制表符、空格等等，默认的分隔符为”\001”。
那时的样子_·2023-12-26 15:40

数据中台与数据仓库有什么区别？

数字化转型浪潮卷起各种新老概念满天飞，数据中台、数据仓库轮番在朋友圈刷屏，企业还没推开数字化大门，先被各种概念绊了一脚。今天咱们就来看下这两者究竟有啥区别。
WakeData惟客数据·2023-12-26 14:38

V、 Hive-DML

1、load数据LOADDATA[LOCAL]INPATH'filepath'[OVERWRITE]INTOTABLEtablename[PARTITION(partcol1=val1,partcol2=val2...)]加载emp数据LOADDATALOCALINPATH'/opt/module/input/emp.txt'INTOTABLEemp;加载dept数据LOADDATALOCALIN
一种依耐丶从未离开·2023-12-26 13:57

[hive] sql中distinct的用法和注意事项

在HiveSQL中，DISTINCT用于去重查询结果中的行。它返回唯一的行，消除结果集中的重复项。
言之。·2023-12-26 13:09

Hive01_安装部署

Hive的安装上传安装包解压tarzxvfapache-hive-3.1.2-bin.tar.gzmvapache-hive-3.1.2-binhive解决Hive与Hadoop之间guava版本差异cd
程序喵猴·2023-12-26 12:47

C# 通过SharpCompress.Archives.Rar解压RaR文件

//////解压一个Rar文件//////需要解压的Rar文件（绝对路径）///解压到的目录///是否覆盖已存在的文件publicstaticvoidUnRar(stringRarFile,stringTargetDirectory,boolOverWrite=true){//如果解压到的目录不存在，则报错if(!System.IO.Directory.Exists(TargetDirectory
l&WK·2023-12-26 10:07

Iceberg1.4.2 java 表管理（DDL和DML）操作

既然是一种开放的表管理格式，那就不应该依赖hadoop，hive，spark，flink
smileyboy2009·2023-12-26 10:26

生物信息神奇网站系列（十二）：机器学习数据集

十二：加州大学欧文分校机器学习数据集http://archive.ics.uci.edu/ml/index.php1、登录网站，可以看到“Welcom
基因学苑·2023-12-26 09:34

【华为数据之道学习笔记】6-6从“保姆”模式到“服务+自助”模式

这也是传统意义上的数据仓库的标准报告生成方式，强依赖于IT人员，贯穿整个数据分析过程，从获取数据、建模到设计报告
码农丁丁·2023-12-26 08:22

Hive02_基本使用，常用命令

一、Hive基本概念1什么是Hive1）hive简介Hive：由Facebook开源用于解决海量结构化日志的数据统计工具。
程序喵猴·2023-12-26 08:39

Hive03_数据类型

在Hive下访问的格式为{"name":"wukong","friends":["bajie","lili"],//列表Array,"children":{//键值Map,"xiaosun":18,"xiaoxiaosun
程序喵猴·2023-12-26 08:39

Hive04_DDL操作

HiveDDL操作1DDL数据定义1.1创建数据库CREATEDATABASE[IFNOTEXISTS]database_name[COMMENTdatabase_comment][LOCATIONhdfs_path
程序喵猴·2023-12-26 08:39

Hive05_DML 操作

1DML数据操作1.1数据导入1.1.1向表中装载数据（Load）1）语法hive>loaddata[local]inpath'数据的path'[overwrite]intotablestudent[partition
程序喵猴·2023-12-26 08:02

MQTT之客户端工具

HiveMQHiveMQ是一个实时的MQTT服务的一个网站，他们既提供MQTT信息中转服务也提供一个客户端工具，http://www.mqtt-dashboard.co
梁睿坤·2023-12-26 08:32

hive高级查询（2）

--分组查询SELECTsex,SUM(mark)sum_markFROMscoreGROUPBYsexHAVINGsum_mark>555;SELECTsex,sum_markFROM(SELECTsex,SUM(mark)sum_markFROMscoreGROUPBYsex)tWHEREsum_mark>555;SELECTAVG(gid),SUM(gid)/COUNT(gid)FROMst
xinxinyydss·2023-12-26 07:51

iceberg1.4.2 +minio通过spark创建表，插入数据

下层支持hadoop，s3,对象存储，上层支持hive，spark，flink等应用。实现在中间把两部分隔离开来，实现一种对接和数据管理的标准。有这个标准，不管是谁建的表，都可以操作和访问。
smileyboy2009·2023-12-26 06:39

linux命令后台运行

linux命令后台运行-北国的雨-博客园https://www.cnblogs.com/lwm-1988/archive/2011/08/20/2147299.html
一剑仙人跪_·2023-12-26 06:14

数据仓库【2】：架构

数据仓库【2】：架构1、架构图2、ETL流程2.1、ETL--Extract-Transform-Load2.1.1、数据抽取（Extraction）2.1.2、数据转换（Transformation）
QQ719872578·2023-12-26 06:57

大数据从业者必知必会的Hive SQL调优技巧 | 京东云技术团队

摘要：在大数据领域中，HiveSQL被广泛应用于数据仓库的数据查询和分析。然而，由于数据量庞大和复杂的查询需求，HiveSQL查询的性能往往不尽人意。
京东云技术团队·2023-12-26 06:33

软件体系结构

Hive：hive是
城堡修炼者·2023-12-26 04:42

Elsevier 期刊模板

www.elsevier.com/authors/author-schemas/latex-instructionsorElsevier期刊模板直接下载地址https://ctan.org/tex-archive
日拱一卒_·2023-12-26 03:41

Linux安装MySQL5.7

MySQL下载地址：https://downloads.mysql.com/archives/community/图片.png修改密码步骤需要谨慎1，解压tar-xvfmysql-5.7.26-linux-glibc2.12
CoderZS·2023-12-26 02:43

数据仓库【4】：最佳实践

数据仓库【4】：最佳实践1、表的分类1.1、事实表1.2、维度表1.3、事务事实表1.4、周期快照事实表1.5、累积快照事实表1.6、拉链表2、ETL策略2.1、全量同步2.2、增量同步3、任务调度3.1
QQ719872578·2023-12-26 01:59

数据仓库【5】：项目实战

数据仓库【5】：项目实战1、项目概述1.1、项目背景1.2、复购率计算2、数据描述3、架构设计3.1、数据仓库架构图4、环境搭建4.1、环境说明4.2、集群规划4.3、搭建流程5、项目开发5.1、业务数据生成
QQ719872578·2023-12-26 01:59

数据仓库【3】：建模方法

数据仓库【3】：建模方法1、基本概念1.1、OLTP系统建模方法1.2、OLAP（在线联机分析）2、ROLAP2.1、ROLAP系统建模方法2.2、维度模型2.2.1、星型模型2.2.2、雪花模型2.2.3
QQ719872578·2023-12-26 01:29

数据仓库【1】：简介

数据仓库【1】：简介1、诞生背景1.1、数据仓库诞生原因1.2、历史数据积存1.3、企业数据分析需要2、基本概述2.1、数据仓库（DataWarehouse，DW）2.2、数据仓库特点2.3、数据仓库VS
QQ719872578·2023-12-26 01:27

大数据——技术生态体系

ApacheHive是一个用于数据查询和分析的数据仓库工具。
Imrea·2023-12-26 01:56

喜报！酷克数据携手中移在线入选2023大数据“星河”数据库优秀案例

中移在线服务有限公司（中移在线）与酷克数据联合申报的《基于云原生化的数据仓库平台，实现数据算力交付效率全面提升》项目，凭借全栈自主可控、敏捷高效、安全稳定的先进特性，成为业内首个容器化部署
HashData酷克数据·2023-12-26 00:23

Hortonworks中修改Hive使用postgresql数据库

首先停止Hive服务从Ambari管理界面上停止Hive服务修改Hive配置在Hive->Configs->Advanced中，将数据库改为使用已存在的postgresql数据库，然后修改数据库用户，密码和数据库名称
kongxx·2023-12-26 00:05

spark启动程序命令

/spark-submit--masterspark://hive01:7077--deploy-modeclient--classorg.apache.spark.examples.SparkPi..
安安DE爸爸·2023-12-25 23:00

git 命令的使用

TableofContentsgitTableofContentsaddarchiveblamebranchcheckoutcherry-pickclonecommitconfigdifffetchfor-each-refgithubinitlog
xiannvlei·2023-12-25 23:56

全网最全ChatGPT指令大全prompt

AIGCChatGPT职场案例AI绘画与短视频制作PowerBI商业智能68集数据库Mysql8.054集数据库Oracle21C142集Office2021实战应用Python数据分析实战，ETLInformatica数据仓库案例实战
阿里数据专家·2023-12-25 21:17

C#读取Excel的三种方式以及比较

本文转载自：http://www.cnblogs.com/jingkunliu/archive/2015/01/19/4234099.html作者：Jingkunliu转载请注明该声明。
zhengxiuchen86·2023-12-25 19:21

hive中struct相关函数总结

目录hive官方函数解释示例实战hive官方函数解释hive官网函数大全地址：添加链接描述ReturnTypeNameDescriptionstructstruct(val1,val2,val3,…)Createsastructwiththegivenfieldvalues.Structfieldnameswillbecol1
浊酒南街·2023-12-25 17:01

Hive-数据模型详解（超详细）

文章目录一、Hive数据模型1.概述2.数据库和表(1)创建数据库(2)使用数据库(3)创建表格(4)查看表结构3.分区与桶(1)分区(2)桶4.数据加载与查询(1)数据导入(2)查询语句5.总结一、Hive
大数据魔法师·2023-12-25 16:17

隐含规则搜索算法

如果目标是"archive(member)"的函数库文件模式，那么这个算法会被运行两次，第一次是找目标T，如果没有找到的话，那么进入第二次，第二次会把"member"当作T来搜索。
Caiaolun·2023-12-25 15:24

云计算与大数据之间的羁绊（期末不挂科版）：云计算 | 大数据 | Hadoop | HDFS | MapReduce | Hive | Spark

文章目录前言：一、云计算1.1云计算的基本思想1.2云计算概述——什么是云计算？1.3云计算的基本特征1.4云计算的部署模式1.5云服务1.6云计算的关键技术——虚拟化技术1.6.1虚拟化的好处1.6.2虚拟化技术的应用——12306使用阿里云避免了高峰期的崩溃1.6.3虚拟化的关键特征1.6.4虚拟化的HA指的是什么？1.6.5服务器虚拟化1.6.6虚拟机迁移1.6.6.1虚拟机实时迁移对云计算
春人.·2023-12-25 14:59

【大数据学习笔记】新手学习路线图

第1阶段-数据仓库基1.MysQL关系型数据库（MySQL介绍、MySQL安装、MySQL基础语法、MySQL高级语法、MySQL系统架构、MySQL存储引擎、MySQL索引、MySQL备份恢复、MySQL
伊达·2023-12-25 14:54

MySQL-lesson05-存储引擎

只不过比文件系统强大2、功能了解数据读写数据安全和一致性提高性能热备份自动故障恢复高可用方面支持等.3、存储引擎种类（笔试）3.1介绍(OracleMySQL)InnoDBMyISAMMEMORYARCHIVEFEDERATEDEXAMPLEBLACKHOLEMERGENDBCLUSTERCSV3.2
丶Daniel·2023-12-25 14:52
上一页 43 44 45 46 47 48 49 50 下一页
按字母分类： ABCDEFGHIJKLMNOPQRSTUVWXYZ其他