数据仓库（hive）

Windows 下 PyTorch 入门深度学习环境安装与配置 GPU 版

2.下载安装Anaconda（建议安装迅雷下载，同时浏览器添加扩展“迅雷Chrome支持”）https://www.anaconda.com/https://repo.anaconda.com/archive
HLJ洛神千羽·2023-12-27 14:39

Y9000P + ubuntu22.04深度学习环境的搭建：英伟达驱动+CUDA11.8+cuDNN8.60+ TensorRT8.5.3.1的配置过程

当然也可以采用命令安装或者到NVIDIA官网下载手动安装驱动装好后在终端执行：nvidia-smi如果出现如下图则安装成功二.CUDA的安装CUDAToolkitArchive|NVIDIADeveloper
LSG_Dawn·2023-12-27 14:57

浅谈数据仓库运营

好的数据仓库需要提前规划和好的运营，才能支持企业的发展，为企业提供数据分析基础。
qq_36120059·2023-12-27 12:53

hive复合数据类型array

createtabletemp.array_test(namestring,active_datestring,active_numarray)partitionedby(dtstring)storedasorc;createtabletemp.actvice_array_test(namestring,active_datestring,active_numarray)partitionedby
解脱了·2023-12-27 12:00

电商数据分析-03-电商数据采集

参考最最最全数据仓库建设指南，速速收藏！！第1章数据仓库概念数据仓库规划1.1数仓搭建我们这里所说的数据仓库，是基于大数据体系的，里面包含标签类目，区别于传统的数据仓库。
IT从业者张某某·2023-12-27 11:14

Spark生产集群各种使用

1.环境配置1.1版本说明要求版本是否必须其他事项Hadoop3.3.4是hadoop3.3.0之后原生支持国内主要对象存储Hive3.1.3否实测没有Hive也可以使用sparksql，使用hive更好的管理
tuoluzhe8521·2023-12-27 10:15

datax 同步mongodb数据库到hive(hdfs)和elasticserch（es)

（有点老了，后来发现flinkcdc都只能监控一张表，多张表无法监控）2.datax版本：自己编译的DataX-datax_v2022103.hdfs版本：3.1.34.hive版本：3.1.2二、同步思路
tuoluzhe8521·2023-12-27 10:14

《系统架构设计师教程（第2版）》第3章-信息系统基础知识-04-决策支持系统 (DSS)

系统的发展1.2决策支持系统的定义1.2.1定义一1.2.2定义二1.2.3教材归纳1.3DSS的基本模式1.4DSS的结构2.DSS的功能3.DSS的特点4.DSS的组成4.1数据的重组和确认4.2数据仓库的建立
玄德公笔记·2023-12-27 10:56

黑猴子的家：Hive 运行日志信息配置

Hive的log默认存放在/tmp/victor/hive.log目录下（当前用户名下）1、创建hive-log4j.properties修改hive-log4j.properties.template
黑猴子的家·2023-12-27 09:00

[转载] Oracle:start with...connect by子句的用法

转自：http://www.blogjava.net/xzclog/archive/2010/03/05/314642.htmlconnectby是结构化查询中用到的，其基本语法是：select…fromtablenamestartwith
重庆八怪·2023-12-27 08:44

R语言和Rstudio下载 以及 R 包安装

R语言和Rstudio下载TheComprehensiveRArchiveNetwork(r-project.org)进入官网下载与电脑相符的R语言比如我的电脑是Windowsx64，下载的是：DownloadR
伏尔加河的卷毛·2023-12-27 08:58

删除azkaban的执行历史

azkaban通常用在大数据任务调度场景，把任务提交之后，如果任务是spark，hive，hadoop，flink等任务的话，
飞有飞言·2023-12-27 07:09

Hadoop-Hbase集群搭建

1.下载http://archive.cloudera.com/cdh5/cdh/5/hbase-1.2.0-cdh5.7.0.tar.gz2.解压#解压到指定的文件夹tarxzvfhbase-1.2.0
GuangHui·2023-12-27 07:17

[spark] 存储到hdfs时指定分区

在SparkSQL中指定多个分区字段进行数据存储：类似hive分区存储文章目录代码示例代码importorg.apache.spark.sql.SparkSessionvalspark=SparkSession.builder
言之。·2023-12-27 06:33

hive中如何判断字符串是否是数字

1.通过nvl函数实现判断字符串是否是数字SELECTnvl('1.x'+0,null)isnotnull;falseSELECTnvl('1'+0,null)isnotnull;true2.通过正则匹配判断select'123456'rlike'^\d+$';true;select'123456a'rlike'^\d+$';false;
不爱吃鱼的馋猫·2023-12-27 06:05

hive posexplode炸裂函数

withtmpas(select'A/B'asa,'1/3'asbunionallselect'B/C/D'asa,'4/5/2'asb)selecta,b,cc,cc2from(selecta,b,pos,cc,pos2,cc2fromtmplateralviewposexplode(split(a,'/'))t2aspos,cclateralviewposexplode(split(b,'/'
不爱吃鱼的馋猫·2023-12-27 06:05

hive学习笔记

一、Hive基本概念1.1hive是什么hive是基于hadoop的一个数仓分析工具，hive可以将hdfs上存储的结构化的数据，映射成一张表，然后让用户写HQL(类SQL)来分析数据telupdown138383843813451567138383843953451567138383844012411657713838384413453157571383838434353551567567
不爱吃鱼的馋猫·2023-12-27 06:05

hive中metastore服务、hiveserver2服务、hive客户端、beeline客户端连接元数据的方式

1.前言hive是Hadoop的客户端，启动hive前必须启动hadoop，同时hive的元数据存储在mysql中，是由于hive自带的derby数据库不支持多客户端访问。
不爱吃鱼的馋猫·2023-12-27 06:35

一文秒懂Hive的两个组件Hiveserver2和Metastore server访问元数据的关系？及Cli命令行和beeline的关系

Hive不是数据库，不是数据库，不是数据库！
不爱吃鱼的馋猫·2023-12-27 06:34

KMeans算法实现《逍遥游》的聚类分词，python

KMeans算法介绍：https://www.cnblogs.com/zhahuhu/archive/2019/10/26/11745484.htmlConditions：1、熟悉python基础语法和数据结构
吾系司机·2023-12-27 06:16

【大数据HA】HAProxy实现thrift协议HMS服务的高可用-附Chatgpt协助截图

背景之前安装了HMS(Hivemetastoreservice)，独立于hive运行，安装部署过程见我下面列出的另一篇文章，需要为它建立HA高可用功能。防止在访问时出现单点故障问题。
秦拿希·2023-12-27 05:08

android transformDexArchiveWithExternalLibsDexMergerForDebug 问题的解决

transformDexArchiveWithExternalLibsDexMergerForDebug问题的解决方法，很好用（感谢作者提供）
泡泡之意境·2023-12-27 03:14

Hexo博客如何添加404公益页面

_config.ymlvimBlog/themes/maupassant_config.yml编辑效果如下menu:-page:homedirectory:.icon:fa-home-page:archivedirectory
种地的pele·2023-12-27 03:36

内网离线搭建之----kafka集群

zookeeper：http://archive.apache.org/dist/zookeeper/zookeeper-3.4.13/zookeeper-3.4.13.tar.gzkafka
落世繁华·2023-12-27 01:02

基于python对葡萄酒质量的预测（浅学）

首先，通过网址https://archive.ics.uci.edu/ml/datasets/Wine+Quality下载数据集winequality-red.csv，winequality-white.csv
自柰·2023-12-27 00:26

python红酒数据提取与分析

importpandasaspdimportmatplotlib.pyplotasplt#读取红酒数据集url="https://archive.ics.uci.edu/ml/machine-learning-databases
li0210·2023-12-27 00:25

第524封信｜致柏舒柏弘

本周主题：Unit23Lesson1HereistheBeehive童言童语：柏舒：最近变得有点黏人了，考虑周边课程给他安排一下。有时候我要上课根本顾不上他，他一个人自言自语可以说半天话。
端老师·2023-12-26 23:14

DM、HIVE和Kingbase8(人大金仓数据库)给列增加备注

DM数据库给列增加备注1、创建表CREATETABLEtest222(idintNOTNULLPRIMARYKEY,namevarchar(1000)DEFAULTNULL,emailvarchar(1000)DEFAULTNULL,phonevarchar(1000)DEFAULTNULL)2、给列添加注释commentoncolumnTEST222.NAMEis'这是一个列注释';例如：com
宁儿测开进阶·2023-12-26 23:36

ZooKeeper Client API 安装及使用指北

下载wgethttps://archive.apache.org/dist/zookeeper/zookeeper-3.5.4-beta/zookeeper-3.5.4-beta.tar.gz解压tar-zxfzookeeper
gongyuandaye·2023-12-26 22:27

hive下库里有表数据，删不了库的解决办法

hive下库里有表数据，删不了库的解决办法报错：FAILED:ExecutionError,returncode1fromorg.apache.hadoop.hive.ql.exec.DDLTask.InvalidOperationException
北凉-徐凤年·2023-12-26 20:07

【Spark-HDFS小文件合并】使用 Spark 实现 HDFS 小文件合并

3、core-site.xml、hdfs-site.xml、hive-site.xml、yarn-site.xmlx等文件
bmyyyyyy·2023-12-26 17:15

datasophon组件安装时踩坑记录

identifiedby'xxxx';1.安装hdfs后有一个namenode进程未启动解决：在那个未启动的节点上执行hdfsnamenode-bootstrapStandby之后在web页面重启hdfs2.hiveonspark
州周·2023-12-26 17:56

电商数仓笔记7_数据仓库系统（数仓搭建-DWD层，数仓搭建-DWS层，数仓搭建-DWT层，数仓搭建-ADS层）

电商数仓一、数仓搭建-DWD层1、DWD层（用户行为日志）（1）日志解析思路（2）get_json_object函数使用（3）启动日志表（4）页面日志表（5）动作日志表（6）曝光日志表（7）错误日志表（8）DWD层用户行为数据加载脚本2、DWD层（业务数据）（1）DWD层业务数据首日装载脚本（2）DWD层业务数据每日装载脚本二、数仓搭建-DWS层1、系统函数（1）nvl函数（2）日期处理函数（3）
明灭18·2023-12-26 17:47

电商数仓笔记6_数据仓库系统（数仓搭建-ODS层，数仓搭建-DIM层）

电商数仓一、数仓搭建-ODS层1、ODS层（用户行为数据）（1）创建日志表ods_log（2）Shell中单引号和双引号区别（3）ODS层日志表加载数据脚本2、ODS层（业务数据）（1）ODS层业务表首日数据装载脚本（2）ODS层业务表每日数据装载脚本二、数仓搭建-DIM层1、商品维度表（全量）2、优惠券维度表（全量）3、活动维度表（全量）4、地区维度表（特殊）5、时间维度表（特殊）6、用户维度表
明灭18·2023-12-26 17:17

四、电商数据仓库系统——第5章 数据仓库设计

5.1数据仓库分层规划优秀可靠的数仓体系，需要良好的数据分层结构。合理的分层，能够使数据体系更加清晰，使复杂问题得以简化。以下是该项目的分层规划。5.2数据仓库构建流程以下是构建数据仓库的完整流程。
怕被各位卷死·2023-12-26 17:47

window系统maven官方下载安装包maven安装配置

Maven–DownloadApacheMaven##历史版本下载位置##maven历史版本下载Indexof/dist/maven/maven-3##下载二进制包不建议升到太高版本与idea有不兼容，会报错3.9.0版本https://archive.apache.org
蚰蜒螟·2023-12-26 16:11

ETL 数据抽取有哪些常见的应用场景？

1、数据仓库建设，从基础差到数据集市到主题库2、数据迁移，信息系统切换新机器是需要3、数据整合，将多个数据来源整合到一个数据库中4、数据同步，为了保证信息系统的高可用或基于安全考虑，进行数据同步
王永翔·2023-12-26 15:21

【Hive】——函数案例

1Hive多字节分隔符处理1.1默认规则Hive默认序列化类是LazySimpleSerDe，其只支持使用单字节分隔符（char）来加载文本数据，例如逗号、制表符、空格等等，默认的分隔符为”\001”。
那时的样子_·2023-12-26 15:40

数据中台与数据仓库有什么区别？

数字化转型浪潮卷起各种新老概念满天飞，数据中台、数据仓库轮番在朋友圈刷屏，企业还没推开数字化大门，先被各种概念绊了一脚。今天咱们就来看下这两者究竟有啥区别。
WakeData惟客数据·2023-12-26 14:38

V、 Hive-DML

1、load数据LOADDATA[LOCAL]INPATH'filepath'[OVERWRITE]INTOTABLEtablename[PARTITION(partcol1=val1,partcol2=val2...)]加载emp数据LOADDATALOCALINPATH'/opt/module/input/emp.txt'INTOTABLEemp;加载dept数据LOADDATALOCALIN
一种依耐丶从未离开·2023-12-26 13:57

[hive] sql中distinct的用法和注意事项

在HiveSQL中，DISTINCT用于去重查询结果中的行。它返回唯一的行，消除结果集中的重复项。
言之。·2023-12-26 13:09

Hive01_安装部署

Hive的安装上传安装包解压tarzxvfapache-hive-3.1.2-bin.tar.gzmvapache-hive-3.1.2-binhive解决Hive与Hadoop之间guava版本差异cd
程序喵猴·2023-12-26 12:47

C# 通过SharpCompress.Archives.Rar解压RaR文件

//////解压一个Rar文件//////需要解压的Rar文件（绝对路径）///解压到的目录///是否覆盖已存在的文件publicstaticvoidUnRar(stringRarFile,stringTargetDirectory,boolOverWrite=true){//如果解压到的目录不存在，则报错if(!System.IO.Directory.Exists(TargetDirectory
l&WK·2023-12-26 10:07

Iceberg1.4.2 java 表管理（DDL和DML）操作

既然是一种开放的表管理格式，那就不应该依赖hadoop，hive，spark，flink
smileyboy2009·2023-12-26 10:26

生物信息神奇网站系列（十二）：机器学习数据集

十二：加州大学欧文分校机器学习数据集http://archive.ics.uci.edu/ml/index.php1、登录网站，可以看到“Welcom
基因学苑·2023-12-26 09:34

【华为数据之道学习笔记】6-6从“保姆”模式到“服务+自助”模式

这也是传统意义上的数据仓库的标准报告生成方式，强依赖于IT人员，贯穿整个数据分析过程，从获取数据、建模到设计报告
码农丁丁·2023-12-26 08:22

Hive02_基本使用，常用命令

一、Hive基本概念1什么是Hive1）hive简介Hive：由Facebook开源用于解决海量结构化日志的数据统计工具。
程序喵猴·2023-12-26 08:39

Hive03_数据类型

在Hive下访问的格式为{"name":"wukong","friends":["bajie","lili"],//列表Array,"children":{//键值Map,"xiaosun":18,"xiaoxiaosun
程序喵猴·2023-12-26 08:39

Hive04_DDL操作

HiveDDL操作1DDL数据定义1.1创建数据库CREATEDATABASE[IFNOTEXISTS]database_name[COMMENTdatabase_comment][LOCATIONhdfs_path
程序喵猴·2023-12-26 08:39

Hive05_DML 操作

1DML数据操作1.1数据导入1.1.1向表中装载数据（Load）1）语法hive>loaddata[local]inpath'数据的path'[overwrite]intotablestudent[partition
程序喵猴·2023-12-26 08:02
上一页 40 41 42 43 44 45 46 47 下一页
按字母分类： ABCDEFGHIJKLMNOPQRSTUVWXYZ其他