数据仓库&Hive

Hive数据定义（2）

hive数据定义是hive的基础知识，所包含的知识点有：数据仓库的创建、数据仓库的查询、数据仓库的修改、数据仓库的删除、表的创建、表的删除、内部表、外部表、分区表、桶表、表的修改、视图。
冬瓜的编程笔记·2024-01-14 06:25

数仓搭建——DWD层

1.2get_json_object函数使用数据[{"name":"大郎","sex":"男","age":"25"},{"name":"西门庆","sex":"男","age":"47"}]取出第一个json对象hive
丝丝呀·2024-01-14 06:10

数据仓库-离线数仓（基于物流数仓）

1、数据仓库概述1.1、数据仓库概念数据仓库是一个为数据分析而设计的企业级数据管理系统。数据仓库可集中、整合多个信息源的大量数据，借助数据仓库的分析能力，企业可从数据中获得宝贵的信息进而改进决策。
小鱼干换酒钱·2024-01-14 06:39

如何给Ubuntu系统清理垃圾

在终端输入：du-h/var/cache/apt/archives回车之后我们就可以看到安装包所占用的空间了。若只是想删除已经卸载过的安装包，命令为：sudoapt-getaut
星辰引路-Lefan·2024-01-14 06:35

Hive命令行运行SQL将数据保存到本地如何去除日志信息

1.场景分析先有需求需要查询hive数仓数据并将结果保存到本地，但是在操作过程中总会有日志信息和表头信息一起保存到本地，不符合业务需要，那如何才能解决该问题呢？
tuoluzhe8521·2024-01-14 05:01

【问题记录】【Unity打包iOS】bitcode bundle could not be generated because xxx was built without full bitcode

报错：打包Archive的时候报错：ld:warning:arm64functionnot4-bytealigned:_unwind_testerfrom/Users/xxx/xxx/xxx/Libraries
hiasyou·2024-01-14 04:42

http://www.cnblogs.com/procoder/archive/2012/03/27/Windows-8-First-Try.html

原文：http://www.cnblogs.com/procoder/archive/2012/03/27/Windows-8-First-Try.htmlWindows8Metroapp开发初体验前言随着
macrohasdefined·2024-01-14 04:58

SpringBoot项目创建错误集锦

1.1.29]oftheApacheTomcatNativelibraryisinstalled,whileTomcatrequiresversion[1.2.34]解决方案去官网http://archive.apache.org
lcx_defender·2024-01-14 03:27

美团点评实时数仓平台演进与实践

1.摘要数据仓库的建设是“数据智能”必不可少的一环，也是大规模数据应用中必然面临的挑战，而Flink实时数仓在数据链路中扮演着极为重要的角色。
笔名辉哥·2024-01-14 02:50

数仓建模—埋点设计与管理

数据仓库系列文章(部分已出，持续更新)数仓架构发展史数仓建模方法论数仓建模分层理论数仓建模—宽表的设计数仓建模—指标体系数据仓库之拉链表数仓—数据集成数仓—数据集市数仓—商业智能系统数仓—埋点设计与管理数仓
大数据技术派·2024-01-14 01:22

mycat中间件+mysql集群

可以替代MySQL的加强版数据库一个可以视为MySQL集群的企业级数据库，用来替代昂贵的Oracle集群一个融合内存缓存技术、NoSQL技术、HDFS大数据的新型SQLServer结合传统数据库和新型分布式数据仓库的新一代企业级数据库产品一个新颖的数据库中间件产品
小样想当当·2024-01-14 01:19

Shell ETL 操作

删除文件第一行记录，即字段名称处理的文件第一行都是字段名称，我们在文件中的数据导入到数据仓库Hive中时，不需要第一行字段名称，因此，这里在做数据预处理时，删除第一行。
数据小白鼠·2024-01-13 23:54

hiveSQL任务执行时间过长

在周例会上，发现自己经手过的任务运行时间在忙时长达两个多小时（公开处刑），这里总结下工作中遇到的一些造成任务执行效率低的原因：1、数据量过大比如有分区表，但是多表关联查询的时候没有指定分区，导致全表扫描。（注意on跟where的条）2、产生笛卡尔积优化3、访问API过多有些任务可能涉及到访问外部接口，过多的请求影响到任务执行效率。从业务或者其他方面优化4、从接口层取数前期的数仓设计不合理或者临时性
amberwest·2024-01-13 22:16

黑猴子的家：Hive 分区表注意事项

1、创建二级分区表hive(default)>createtabledept_partition2(deptnoint,dnamestring,locstring)partitionedby(monthstring
黑猴子的家·2024-01-13 21:13

iOS 【Firebase】崩溃日志搜集

摘了：https://blog.mzying.com/index.php/archives/225/Firebase的崩溃日志收集功能，根据pod集成：pod'Firebase/Crashlytics'
NJ_墨·2024-01-13 21:57

linux 打印中文宽字府,C++输出中文字符 C/C++多字节字符与宽字符的输出

原文：http://www.cnblogs.com/lixiaohui-ambition/archive/2012/07/17/2596490.htmlC++输出中文字符1.cout场景1:在源文件中定义
有孚君·2024-01-13 21:53

大数据

广义来说，hadoop通常指一个更广泛的概念，hadoop生态圈：image.pngHive是基于Hadoop的一个数据仓库工具，可以将结构化的数据文件映射为一张数据库表，并提供简单的SQL查询功能，可以将
哈斯勒·2024-01-13 19:30

机器学习---kMeans算法

1.Loaddatasetfromnumpyimport*importmatplotlib.pyplotaspltimportpandasaspdurl="https://archive.ics.uci.edu
三月七꧁ ꧂·2024-01-13 18:47

Windows Python 3.8.8版本安装

Anacondapython3.8.8版本https://repo.anaconda.com/archive/Anaconda3-2021.05-Windows-x86_64.exehttps://repo.anaconda.com
小白华·2024-01-13 17:33

JDBC

MySQL::DownloadMySQLConnector/J(ArchivedVersions)（版本自己选，操作系统选independent）下载下来之后是应该压缩包打开压缩文件，以下面这个目录为例
qq_52315213·2024-01-13 16:20

window-redis安装(注册服务)

window-redis安装(注册服务)1、下载windows版本的redis(非redis官方发布)https://github.com/microsoftarchive/redis/releaseshttps
慕容雪_·2024-01-13 16:10

R语言【paleobioDB】——pbdb_intervals()：通过参数选择，返回多个地层年代段的基本信息

可以选择在Indexof/src/contrib/Archive/paleobioDB(r-project.org)下载安装包后，执行本地安装。
ALittleHigh·2024-01-13 15:15

R语言【paleobioDB】——pbdb_occurrences()：从PBDB获取多个化石记录号的基本信息

可以选择在Indexof/src/contrib/Archive/paleobioDB(r-project.org)下载安装包后，执行本地安装。
ALittleHigh·2024-01-13 15:15

R语言【paleobioDB】——pbdb_interval()：通过ID选择，返回一个地层年代段的基本信息

可以选择在Indexof/src/contrib/Archive/paleobioDB(r-project.org)下载安装包后，执行本地安装。
ALittleHigh·2024-01-13 15:15

R语言【paleobioDB】——pbdb_collection()：从PBDB获取单个采集号的基本信息

可以选择在Indexof/src/contrib/Archive/paleobioDB(r-project.org)下载安装包后，执行本地安装。
ALittleHigh·2024-01-13 15:12

R语言【paleobioDB】——pbdb_map()：根据化石记录绘制地图

可以选择在Indexof/src/contrib/Archive/paleobioDB(r-project.org)下载安装包后，执行本地安装。
ALittleHigh·2024-01-13 15:12

ubuntu22.04 安装微信

sudoapt-getinstallcom.qq.weixin.deepin3.找不到微信图标sudogedit/opt/apps/com.qq.weixin.deepin/files/run.sh注释该行exportWINEPREDLL="$ARCHIVE_FILE_DIR
AI_Rancho·2024-01-13 15:04

ubuntu22.04 安装gazebo遇到的坑（无法打开显示界面）

1.终端输入gazebo，无报错，也无显示界面解决方法：应用中找到systemmonitor,找到gzserver，右键kill2.安装软件包遇到的错误：dpkg:errorprocessingarchive
AI_Rancho·2024-01-13 15:03

Hive安装部署

安装好对应版本的hadoop集群，并启动hadoop的HDFS以及YARN服务安装了MySQL服务，并启动MySQL的服务Hive的安装部署注意hive就是==一个构建数据仓库的工具==，只需要在==一台服务器上
我还不够强·2024-01-13 13:35

HIVE中map类型操作

HIVE中map类型操作前言今天写了一下hive中map类型字段，如何在原有基础上在增加新的值。
YUE_SUNSHINE·2024-01-13 13:34

Hive及各组件功能介绍

Hive是一个开源的数据仓库基础设施，是构建在Hadoop之上的。它提供了一种类似于SQL的查询语言，称为HiveQL，用于查询和分析存储在Hadoop中的大规模数据集。
思旭�·2024-01-13 12:32

平均预期寿命可视化

spm_id_from=333.999.list.card_archive.click&vd_source=e9167c654bb4523338a765358a8ac2afEChartsbody{display
cmdch2017·2024-01-13 12:25

简单小巧的文件加密工具

BCArchive是一款功能强大的文件加密工具，软件提供了多种方式创建这样的归档文件，并把敏感数据进去，包括Windows外壳扩展命令和支持拖动和拖放操作，从另一方面，软件利用强大和成熟的加密算法和标准提供了高安全级别保存压缩文件内的数据
skycht·2024-01-13 11:55

jdk各种版本下载地址，直接下载，无需登录

jdk各种版本下载地址，直接下载，无需登录http://jdk.java.net/archive/
这都不是事er·2024-01-13 10:37

Java的Jar包和War包

在Java中，JAR（JavaArchive）和WAR（WebArchive）都是用于打包和分发Java应用程序的压缩文件格式。
自己的九又四分之三站台·2024-01-13 10:54

opencv在linux上的编译

首先我们需要下载源码，我这里直接使用的是最新的4.x的版本，获取源码wget-Oopencv.ziphttps://github.com/opencv/opencv/archive/4.x.zip官方做法
我在看你呵呵笑·2024-01-13 10:49

如何在VS 2019里安装SQL Server数据仓库开发工具

SQLServer的AnalyticService提供了强大的数据仓库功能，开发者可以使用VS2019来开发这些功能，但是VS2019即使安装了SQLServerDataTools开发者也找不到创建MultidimensionalProject
surfirst·2024-01-13 10:39

大数据系列 | CDH6.3.2（Cloudera Distribution Hadoop）部署、原理和使用介绍

大数据系列|CDH6.3.2（ClouderaDistributionHadoop）部署、原理和使用介绍1.大数据技术生态中Hadoop、Hive、Spark的关系介绍2.CDN（ClouderaDistributionHadoop
降世神童·2024-01-13 10:50

解决Win10 PowerShell无法激活Anaconda环境的问题

https://www.cnblogs.com/dereen/p/ps_conda_env.htmlhttps://www.cnblogs.com/zhaozhan/archive/2012/06/01
Williamongh·2024-01-13 09:51

数据仓库Apache Hive

数据仓库ApacheHive内容大纲#数据仓库基础核心知识1、数据仓库是什么为何而来？
江枫渔火R·2024-01-13 09:29

2022-02-01大数据学习日志——Hadoop离线阶段——数据仓库、Apache Hive

学习目标理解数仓概念、起源由来理解数仓(OLAP)与数据库(OLTP)区别掌握数仓分层架构思想掌握ApacheHive功能与架构组件理解ApacheHive远程模式部署安装内容大纲#数据仓库基础核心知识
王络不稳定·2024-01-13 09:28

数据仓库 & Apache Hive

一、数据分析1、数据仓库数据仓库（英语：DataWarehouse，简称数仓、DW），是一个用于存储、分析、报告的数据系统。
杀神lwz·2024-01-13 09:52

Hive基础知识（十）：Hive导入数据的五种方式

1.向表中装载数据（Load）1）语法hive>loaddata[local]inpath'数据的path'[overwrite]intotablestudent[partition(partcol1=
依晴无旧·2024-01-13 09:20

Hive基础知识（十二）：Hive的基本查询

1.全表和特定列查询0）数据准备原始数据dept:10ACCOUNTING170020RESEARCH180030SALES190040OPERATIONS1700emp：7369SMITHCLERK79021980-12-17800.00207499ALLENSALESMAN76981981-2-201600.00300.00307521WARDSALESMAN76981981-2-221250
依晴无旧·2024-01-13 09:20

Hive基础知识（九）：Hive对数据库表的增删改查操作

1.创建表1）建表语法CREATE[EXTERNAL]TABLE[IFNOTEXISTS]table_name#EXTERNAL：外部的[(col_namedata_type[COMMENTcol_comment],...)][COMMENTtable_comment][PARTITIONEDBY(col_namedata_type[COMMENTcol_comment],...)]#PARTIT
依晴无旧·2024-01-13 09:50

R语言【paleobioDB】——pbdb_occurrence()：从PBDB获取单个化石记录号的基本信息

可以选择在Indexof/src/contrib/Archive/paleobioDB(r-project.org)下载安装包后，执行本地安装。
ALittleHigh·2024-01-13 09:49

R语言【paleobioDB】——pbdb_collections()：通过参数选择，返回多个采集号的基本信息

可以选择在Indexof/src/contrib/Archive/paleobioDB(r-project.org)下载安装包后，执行本地安装。
ALittleHigh·2024-01-13 09:19

R语言【paleobioDB】——pbdb_collections_geo()：从PBDB获取根据地理位置信息筛选的采集号的基本信息

可以选择在Indexof/src/contrib/Archive/paleobioDB(r-project.org)下载安装包后，执行本地安装。
ALittleHigh·2024-01-13 09:19

R语言【paleobioDB】——pbdb_map_occur()：通过化石分布记录，创建一个RasterLayer对象，和一个显示取样力度的图

可以选择在Indexof/src/contrib/Archive/paleobioDB(r-project.org)下载安装包后，执行本地安装。
ALittleHigh·2024-01-13 09:19

R语言【paleobioDB】——pbdb_map_richness()：通过化石分布记录，创建一个RasterLayer对象，和一个显示科、属、种等分类阶元丰富度的图

可以选择在Indexof/src/contrib/Archive/paleobioDB(r-project.org)下载安装包后，执行本地安装。
ALittleHigh·2024-01-13 09:19
上一页 26 27 28 29 30 31 32 33 下一页
按字母分类： ABCDEFGHIJKLMNOPQRSTUVWXYZ其他