Hive:ORC

大数据项目

然后再上传到hive中处理数据，再将处理好的数据保存到mysql，最后将保存的数据进行数据可视化。
for_syq·2024-01-03 16:05

Linux文件和目录管理命令---- cp 命令

基本语法cp[选项]...源文件或目录目标文件或目录常用参数-a,--archive：归档复制，保留原文件的属性，同时递归复制目录。-i,--interactive：交互模式，在覆盖文件之前提示用户。
redrose2100·2024-01-03 16:22

E: The repository ‘http://security.ubuntu.com/ubuntu hirsute-security Release‘ no longer has a Relea

archive.ubuntu.com|security.ub
whatzhang007·2024-01-03 14:38

HIVE常用正则表达式

一、校验数字的表达式数字：^[0-9]*$n位的数字：^\d{n}$至少n位的数字：^\d{n,}$m-n位的数字：^\d{m,n}$零和非零开头的数字：^(0|[1-9][0-9]*)$非零开头的最多带两位小数的数字：^([1-9][0-9]*)+(\.[0-9]{1,2})?$带1-2位小数的正数或负数：^(\-)?\d+(\.\d{1,2})$正数、负数、和小数：^(\-|\+)?\d+(\
Yang_6234·2024-01-03 13:28

如何用.NET创建Windows服务

http://www.cnblogs.com/greatandforever/archive/2008/07/08/1238270.html我们将研究如何创建一个作为Windows服务的应用程序。
plean·2024-01-03 13:05

Ubuntu使用教程

http://www.cnblogs.com/dutlei/archive/2012/11/20/2778327.html基本操作进入系统在登录界面中输入您的用户名，然后系统将提问您的密码输入您的密码后
申请不容1·2024-01-03 13:32

PyH-0.1.1安装及简单使用

安装：由于使用PyCharm和pip都无法安装成功，最终使用手动下载方式安装PyH-0.1.1，下载地址：GoogleCodeArchive-Long-termstorageforGoogleCodeProjectHosting.https
布伦鸽·2024-01-03 12:46

Trino兼容Hive SQL方案探索

应用场景公司的经营分析使用的数据仓库是基于开源CDH5.12.6自带的Hive（1.1.6版本）实现的。数据仓库的开发平台使用的是数澜科技的数栖平台（4.8.4版本）。
DawsonSally·2024-01-03 11:15

HiveQL或trino(presto)：查询

工作中在用大数据，hive、impala、trino都有使用，使用hive和trino最多，整里了以下内容，有点长，看完，绝对有收获。
三生暮雨渡瀟瀟·2024-01-03 11:14

trino常用语法和官方sql手册

trino常用语法trino数据库造简单表的语法模板=没有分区的sql简单创建、查询、插入===========createtablehive.youyou030310.even(idint,event_typevarchar
鹿鸣悠悠·2024-01-03 11:43

rk3588安装qt虚拟键盘

qt是默认安装的,版本号为5.12.8，但是没有虚拟键盘模块，项目中需要，就采用源码编译的方法执行下载源码源码地址为Indexof/archive/qt/5.12/5.12.1/submodules，下载后放到
perceptive558·2024-01-03 10:41

【hive报错】SemanticException Failed to breakup Windowing invocations into Groups

背景：在hive取数中，偶然报了这个神奇的错误信息，且系统不能定位到具体地方报错如下：SemanticExceptionFailedtobreakupWindowinginvocationsintoGroups.Atleast1groupmustonlydependoninputcolumns.AlsocheckforcirculardependenciesSemanticExceptionFai
零壹贰伍·2024-01-03 09:29

hive sql里常见的日期转换形式

sql时间日期转换方法timestamp格式转日期yyyyMMdd转yyyy-MM-ddtimestamp格式转日期selectto_date('2021-08-1511:12:00')结果：2021-08-15同时，等价于selectfrom_unixtime(unix_timestamp(comment_timestamp),'yyyy-MM-dd')asp_date上面的方法是将timest
零壹贰伍·2024-01-03 09:59

【HarmonyOS开发】共享包HAR和HSP的创建和使用以及三方库的发布

OpenHarmony提供了两种共享包，HAR（HarmonyArchive）静态共享包，和HSP（HarmonySharedPackage）动态共享包。
兵腾傲宇·2024-01-03 08:16

Hive/SparkSQL中UDF/UDTF/UDAF的含义、区别、有哪些函数

Hive官网：https://cwiki.apache.org/confluence/display/Hive/LanguageManual+UDF#LanguageManualUDF-Built-inTable-GeneratingFunctions
TRX1024·2024-01-03 08:39

Hive/SparkSQL中Map、Array的基本使用和转换

一、Map1.构建语法:map(key1,value1,key2,value2,…)说明：根据输入的key和value对构建map类型-->1.一般创建方法selectmap('key1_name','张三','key2_age',20)asmap_col--结果：{"key1_name":"张三","key2_age":"20"}-->2.根据SQL查询结果构建mapselectmap('k_n
TRX1024·2024-01-03 08:09

【kettle】pdi/data-integration 集成kerberos认证连接hive或spark thriftserver

kettle当前任务的jvm任务完成kerberos认证后会存储认证信息，之后直接连接hive就可以了无需提供额外的用户信息。
lisacumt·2024-01-03 08:37

Hive学习（13）lag和lead函数取偏移量

hive里面lag函数在数据处理和分析中，窗口函数是一种重要的技术，用于在数据集中执行聚合和分析操作。Hive作为一种大数据处理框架，也提供了窗口函数的支持。
一个天蝎座 白勺 程序猿·2024-01-03 08:34

Hive自定义函数支持国密SM4解密

当前项目背景需要使用到国密SM4对加密后的数据进行解密，Hive是不支持的，尝试了华为DWS数仓，华为只支持在DWS中的SM4加密解密，不支持外部加密数据DWS解密新建Maven工程只需要将引用的第三方依赖打到
4935同学·2024-01-03 08:03

iOS逆向实战--019：符号的剥离与恢复

在Xcode中默认strip是在Archive的时候才会生效，移除对应符号strip命令的使用：strip-x：除了全局符号都可以移除（动态库使用）strip-S：移除调试符号（静态库使用）strip：
帅驼驼·2024-01-03 08:06

QT系统移植教程

mod=view&aid=5下载源码：http://download.qt.io/archive/qt/5.4/5.4.2/single/解压源码：tar-xvfqt-everywhere-opensource-src
曼城英泽·2024-01-03 08:46

Maven测试，运行JUnit测试之mvn test的默认行为

参照http://www.blogjava.net/sitinspring/archive/2007/06/20/125224.html，用Maven跑JUnit类。
loserStar·2024-01-03 08:58

计算机毕业设计吊打导师hadoop+spark+hive知识图谱医生推荐系统 医生数据分析可视化大屏 医生爬虫 医疗可视化 医生大数据 机器学习 大数据毕业设计

mysql数据库；2.使用pandas+numpy/hadoop+mapreduce对mysql中的医生数据进行数据分析，使用高德地图解析地理位置，并将结果转入.csv文件同时上传到hdfs文件系统；3.使用hive
计算机毕业设计大神·2024-01-03 07:53

Hive视图View应用

Hive0.6版本及以上支持视图View的创建#HiveView具有以下特点：1.View是逻辑存在，Hive暂不支持物化视图(1.0.3)。
liuzx32·2024-01-03 06:16

分区表创建及插入数据的操作

1、分区参数介绍hive.exec.dynamic.partition:是否启动动态分区。默认false。
孤城暮雨@·2024-01-03 04:18

使用Datax将Hive中的表迁移到MySQL

1.安装datax（1）下载datax安装包可在Datax官网下载，或者私信我，文件太大，无法上传（2）解压datax压缩包sudotar-zxvfdatax.tar.gz-C/usr/local（解压到的目录，可自己设置）（3）修改文件夹名称 mvdatax.tar  datax（4）给hadoop用户datax权限sudochown-Rhadoop:hadoop/usr/local/datax
孤城暮雨@·2024-01-03 04:17

Azkaban+Spark资源调度

前提条件：各节点之间的免密、登录启动Hadoop集群、Spark、Azkaban、Hive免密登录操作ssh-keygen-trsaslave01执行：scp~/.ssh/id_rsa.pubhadoop
孤城暮雨@·2024-01-03 04:46

Linux高级管理——yum仓库服务

YellowdogUpdater,YellowdogLinux的软件更新器),最初由TSS公司（TerraSoftSolutions，INC.）使用Python语言开发而成．后来由杜克大学(DuckUhiversity
IT_小薇子·2024-01-03 04:35

数据库存储引擎

存储引擎主要有：1.MyIsam,2.InnoDB,3.Memory,4.Archive,5.Federated。InnoDB
武昌库里写JAVA·2024-01-03 03:59

hive 与mapreduce

hive不触发mapreduce的操作：hive.fetch.task.conversion这个参数与sql触发mr操作有关：取值一共有三个noneminimalmore默认的设置的值是more配置参数为
流砂月歌·2024-01-03 02:08

Jetson_Xavier_NX开发板重编译RT内核

一、准备源码和交叉编译工具官方网址：JetsonLinuxArchive|NVIDIADeveloper我的板子的jtop显示内核为35.4.1，因此以35.4.1为例：点击进入：新版本和老版本不一样，
爱吃糖葫芦的大熊·2024-01-03 00:03

使用冷门装机助手/流氓软件导致被捆绑安装各种奇奇怪怪软件的问题

本文首发于lzcBlog，作者lzc256，原文地址：https://www.lzcapp.cn/archives/600/。推荐转移到原文阅读，体验更佳。
lzc256·2024-01-02 19:32

hive多分隔符外表支持

在hive外表关联文本的时候有时会遇到不是一个长度的分割符比如"~@"这种。这个时候使用shell命令多处理一步处理成单分隔符也可以，但是会有出错的风险。
甲乙寄几·2024-01-02 19:31

PDBx/mmCIF 文件格式(一)

PDBx/mmCIFSyntax原文链接：PDBx/mmCIFSyntax(wwpdb.org)mmCIF数据文件和字典中使用的语法来自STAR（Self-definingTextArchiveandRetrieval
WuYankang·2024-01-02 16:36

armbian

armbian什么是armbian官方镜像[下载](https://www.armbian.com/orange-pi-one-plus/#kernels-archive-all)SD烧录，SSH登录及初始密码
weixin_40227845·2024-01-02 16:51

sqoop（DataX）-MySQL导入HIVE时间格问题

这里写自定义目录标题问题1：测试MySQL数据信息HIVE数据信息hive中用parquet（orc）列式文件格式存储解决方法问题2：解决方法问题1：用公司的大数据平台（DataX）导数，已经开发上线一个多月的一批报表
浊酒南街·2024-01-02 15:02

Hbase介绍以及Hive优势

一，Hbase介绍HBase是典型的NoSQL数据库，通常被描述成稀疏的、分布式的、持久化的，由行键、列键和时间戳进行索引的多维有序映射数据库，主要用来存储非结构化和半结构化的数据。因为HBase基于Hadoop的HDFS完成分布式存储，以及MapReduce完成分布式并行计算，所以它的一些特点与Hadoop相同，依靠横向扩展，通过不断增加性价比高的商业服务器来增加计算和存储能力。优点：容量巨大列
毛毛虫同学·2024-01-02 14:38

MFC - CArchive/内存之间的序列化应用细节

文章目录MFC-CArchive/内存之间的序列化应用细节概述笔记ENDMFC-CArchive/内存之间的序列化应用细节概述有个参数文件,开始直接序列化到文件.现在优化程序,不想这个参数文件被用户看到
LostSpeed·2024-01-02 13:23

从零开始配置kali2023环境：jupyter notebook下python2和python3内核切换，环境可方便运行两个版本的程序

安装anaconda2可以去清华源下载最新版的anaconda包，这比在官方网站下载快得多，地址如下：https://mirrors.tuna.tsinghua.edu.cn/anaconda/archive
weixin_44626085·2024-01-02 12:05

R语言手动安装包-以ggplot2为例

呈现这样的页面TheComprehensiveRArchiveNetwork(r-project.org)https://cran.r-project.org/原网址改为（因为这里是ggplot2，所以网址末尾这样结尾
晨打水水水·2024-01-02 12:59

MySQL基础学习: 第一章 数据库概述

二、数据库的分类1、关系型数据库Oracle：收费MySQL：免费SQLSERVER：收费hiveTIDB人大金仓（KINGBASE）达梦（dm）dorisoceanbase2、非关系型数据库RedisHbaseElasticsearchInfluxdbks3
玉成226·2024-01-02 12:43

Hive表的基本操作

1.创建表createtable语句遵从sql语法习惯，只不过Hive的语法更灵活。例如，可以定义表的数据文件存储位置，使用的存储格式等。
大数据技术派·2024-01-02 09:46

HIVE优化场景九--减少IO次数

FROMAINSERTBSELECTA,....INSERTCSELECTA...2）一次输入，多次使用WITHTABLEAS(....)1）通过多表插入FROMAINSERTBSELECTA,....INSERTCSELECTA...Hive
xuanxing123·2024-01-02 09:02

记录Hive union查询遇到的问题

1.问题描述：在使用hive客户端，进行分区联合查询时，发现union查询一直不成功union查询：select*fromtest_partitionswhereday='0722'unionselect
Movle·2024-01-02 09:37

Hive07_多表查询

HIVE多表查询1Join语句1)等值JoinHive支持通常的SQLJOIN语句。
程序喵猴·2024-01-02 08:49

Hive06_基础查询

HIVE查询语句1查询语句语法：SELECT[ALL|DISTINCT]select_expr,select_expr,...FROMtable_reference[WHEREwhere_condition
程序喵猴·2024-01-02 08:48

JAR文件如何在没有安装JDK的电脑上运行（指定运行环境）

首先，我们来了解一下JAR（JavaArchive）包。JAR包是一种文件格式，用于将Java类、资源和元数据打包到一个文件中。
西晋的no1·2024-01-02 07:05

Apache Hive详解

目录一、引入Hive简介为什么要使用HiveHive的特点Hive的发展历程二、Hive架构体系三、MySQL安装安装准备安装卸载（了解）四、Hive集群搭建准备工作安装过程五、Hive的MySQL元数据库与表六
毫无感情的dj·2024-01-02 07:06

hive中的逻辑运算符 案列_Hive 运算符 & 内置函数详解 -- 适合关键词查找（转载，非原创）...

1.内置运算符1.1关系运算符运算符类型说明A=B所有原始类型如果A与B相等,返回TRUE,否则返回FALSEA==B无失败，因为无效的语法。SQL使用”=”，不使用”==”。AB所有原始类型如果A大于B返回TRUE,否则返回FALSE。如果A或B值为”NULL”，结果返回”NULL”。A>=B所有原始类型如果A大于等于B返回TRUE,否则返回FALSE。如果A或B值为”NULL”，结果返回”NU
猪了个去·2024-01-02 07:33

hive知识简单全面详解

hive学习整理1、认识Hive1.1hive认识1.1.1优点1.1.1缺点1.2hive架构1.3为什么用Hive而不用关系型数据库？
AnAn-66.·2024-01-02 07:32
上一页 30 31 32 33 34 35 36 37 下一页
按字母分类： ABCDEFGHIJKLMNOPQRSTUVWXYZ其他