hive入门篇

关于hive在运行insert时失败原因刨析

insertintotestvalues('1001');原因虚拟机内存不足。我的虚拟机配置如下解决方案设置yarn容器最大内存、容器最小内存等Theclasstouseastheresourcescheduler.yarn.resourcemanager.scheduler.classorg.apache.hadoop.yarn.server.resourcemanager.scheduler.
Alonzo de blog·2024-01-12 08:57

Hive分区表实战 - 多分区字段

文章目录一、实战概述二、实战步骤（一）创建学校数据库（二）创建省市分区的大学表（三）在本地创建数据文件1、创建四川成都学校数据文件2、创建四川泸州学校数据文件3、创建江苏南京学校数据文件4、创建江苏苏州学校数据文件（四）按省市分区加载学校数据1、加载四川成都学校数据文件到四川成都分区2、加载四川泸州学校数据文件到四川泸州分区3、加载江苏南京学校数据文件到江苏南京分区4、加载江苏苏州学校数据文件到江
howard2005·2024-01-12 08:29

Hive命令调优大全

–explain语法查询**–explain解析执行计划–以下优化为hive层面优化,常开****–读取零拷贝sethive.exec.orc.zerocopy=true;–默认false–关联优化器sethive.optimize.correlation
祈愿lucky·2024-01-12 08:28

【数据库学习】hive

1，HIVEHadoop的数据仓库处理工具，数据存储在Hadoop兼容的文件系统（例如，AmazonS3、HDFS）中。
兔兔西·2024-01-12 08:50

【DolphinScheduler】datax读取hive分区表时，空分区、分区无数据任务报错问题解决

DolphinScheduler的Datax组件时，遇到这么一个问题：之前给客户使用海豚做的离线数仓的分层搭建，一直都运行好好的，过了个元旦，这几天突然在数仓做任务时报错，具体报错信息如下：问题一：datax读取hive
Alex_81D·2024-01-12 08:49

Hive基础

hive的基础部分大致有四部分：Hive数据类型、Hive运算符、Hive数据存储、Hive表存储格式。这四部分是学习hive必须掌握的知识。
冬瓜的编程笔记·2024-01-12 08:16

基于JavaWeb+BS架构+SpringBoot+Vue基于hive旅游数据的分析与应用系统的设计和实现

基于JavaWeb+BS架构+SpringBoot+Vue基于hive旅游数据的分析与应用系统的设计和实现文末获取源码Lun文目录前言主要技术系统设计功能截图订阅经典源码专栏Java项目精品实战案例《500
FREE技术·2024-01-12 07:01

大数据 Hive - 实现SQL执行

文章目录MapReduce实现SQL的原理Hive的架构Hive如何实现join操作小结MapReduce的出现大大简化了大数据编程的难度，使得大数据计算不再是高不可攀的技术圣殿，普通工程师也能使用MapReduce
善守的大龙猫·2024-01-12 07:37

Spark on Hive及 Spark SQL的运行机制

SparkonHive集成原理HiveServer2的主要作用:接收SQL语句，进行语法检查；解析SQL语句；优化；将SQL转变成MapReduce程序，提交到Yarn集群上运行SparkSQL与Hive
小希 fighting·2024-01-12 07:56

mysql8 linux安装过程（通用版）

下载：通用版，建议用tar.gz包下载地址：https://downloads.mysql.com/archives/community/注意选项：选linux-Generic以及架构和位数OperatingSystem
Davide~苏·2024-01-12 06:00

Zookeeper+Hadoop+Spark+Flink+Kafka+Hbase+Hive

说明Zookeeper+Hadoop+Spark+Flink+Kafka+Hbase+Hive完全分布式高可用集群搭建下载https://archive.apache.org/dist/我最终选择Zookeeper3.7.1
nsa65223·2024-01-12 06:08

如何快速了解一个新的领域？

（原文链接请见：http://www.zreading.cn/archives/4604.html）作者介绍要快速进入一个全新的知识领域需要4个步骤：1、大量泛读，以让大脑爆掉为目标，找到所有能找到的关于这个新领域的文章
杜松树·2024-01-12 06:19

apk编译时固定R.id

场景热修复生成补丁时，基线apk和修复后apk中资源id固定，可以有效减少补丁大小创建ids_keep.gradle文件android.aaptOptions{//归档目录:rootProject/archivedStringdirName
yin_xin·2024-01-12 04:40

PandoraNext—一个让你呼吸顺畅的ChatGPT

博客地址PandoraNext—一个让你呼吸顺畅的ChatGPT-雪饼(xue6ing.cn)https://xue6ing.cn/archives/pandora--yi-ge-rang-ni-hu-xi-shun-chang-de-chatgpt
xB77·2024-01-12 04:30

Hive解析json数组

在使用Hive搭建数据仓库，处理数据时，同传统数仓的结构化数据不同，我们经常会遇到一些非结构化的数据，json格式的字符串就是常见的一种类型。
风筝flying·2024-01-12 03:47

MySql海量数据存储与优化

具有支持回滚，提交，崩溃恢复等功能，事务安全myisam:不支持事务和外键，查询速度高Memory：利用内存创建表，访问速度非常快，因为数据在内存，而且默认使用Hash索引，但是一旦关闭，数据就会丢失Archive
softshow1026·2024-01-12 02:44

服务器中Linux（CentOS7.6）安装并启动mysql-8.0.18-el7-x86_64.tar.gz + 问题错误集

https://cdn.mysql.com/archives/mysql-8.0/mysql-8.0.18-el7-x86_64.tar.gzhtt
时光茶馆·2024-01-12 02:41

Linux操作系统下，彻底删除MySQL

背景：部署Hive时，遇到了无法访问数据库的问题；此时Linux中的环境是，已安装MySQL-8.0.35的版本，JDK8和Hadoop-3.3.4版本；然后开始上传Hive-3.1.3版本的的安装包和
zhiweizhang_zzw·2024-01-12 02:59

Java笔记（入门篇）

一、Java简述1、Java的历史Java是美国Sun公司在1995年推出的一门计算机高级编程语言。它初期叫做Oak(橡树)，但是注册商标的时候发现已经有人注册了，后来就改成Java(印度尼西亚爪哇岛)；Java之父：詹姆斯·高斯林(JamesGosling)。在2009年，Sun公司被Oracle甲骨文以74亿美元收购，这就意味着Java属于Oracle了。2、为什么要使用Java？世界上最流行
白豆五·2024-01-12 00:56

Error: Package: 1:openssl-devel-1.0.2k-19.el7.x86_64 (base) Requires: openssl-libs(x86-64

centos7上由于openssl的版本低导致的错在centos7执行这个命令报的错：yum-yinstallbisonbison-develzlib-devellibcurl-devel\libarchive-develboost-develncurses-develgnutls-devel
哪有天生的学霸，一切都是厚积薄发·2024-01-12 00:43

hive sql 优化-转载csdn

HiveSQL执行流程：InputFormat、OutputFormat、SerDe理清这三者之间的关系：SerDeisashortnamefor"SerializerandDeserializer."
仲間_9ee4·2024-01-11 23:36

第四课 Hive中sql的使用

1、创建表建表语法CREATE[EXTERNAL]TABLE[IFNOTEXISTS]table_name[(col_namedata_type[COMMENTcol_comment],...)][COMMENTtable_comment][PARTITIONEDBY(col_namedata_type[COMMENTcol_comment],...)][CLUSTEREDBY(col_name,
Arroganter·2024-01-11 22:40

Hive数据库：嵌入、本地、远程全攻略（下）

先介绍一下本地模式和远程模式：当使用本地模式时，Hive将其元数据存储在本地数据库（例如MySQL）中，使其成为一个独立的数据处理系统。
小伍_Five·2024-01-11 22:33

Hive数据库：嵌入、本地、远程全攻略（上）

Hive分布式数据仓库工具关系型数据库建立在关系模型之上的数据库称为关系型数据库(关系模型是由埃德加·科德于1970年提出的)，关系型数据库借助集合代数等数学概念处理数据库中的数据。
小伍_Five·2024-01-11 22:03

分布式数据库原理及技术题目汇总（上）

A.HIVE中createtable命令使用时，表类型可以存储为ORC。B.HIVE中createtable命令使用时，必须包含rowformatdelimited。
小伍_Five·2024-01-11 22:03

RabbitMQ——入门篇

这里写目录标题其他文章地址1、AMQP(AdvancedMessageQueuingProtocol)1.1、定义1.2、工作原理2、RabbitMQ2.1、定义2.2、优点2.3、缺点2.4、适用场景2.5、原理图2.6、概念2.6.1、Message2.6.2、Publisher2.6.3、Consumer2.6.4、Exchange2.6.5、Binding2.6.6、Queue2.6.7、
zhz小白·2024-01-11 21:11

JDBC连接数据库

JDBC连接数据库https://www.cnblogs.com/hongten/archive/2011/03/29/1998311.html创建一个以JDBC连接数据库的程序，包含7个步骤：1、加载
seto__·2024-01-11 20:36

使用Sqoop将Hive数据导出到TiDB

关系型数据库与大数据平台之间的数据传输之前写过一些使用Sqoop将数据在HDFS与MySQL互导使用Sqoop将SQLServer视图中数据导入Hive使用DataX将Hive与MySQL中的表互导使用
光于前裕于后·2024-01-11 19:26

CUDA10.1+cuDNN 超详细版安装教程，步骤清晰不多余

可以看看自己电脑支持CUDA的最高版本，cmd命令控制行输入：nvidia-smi回车后可以看到自己电脑支持CUDA的最高版本，建议安装稍低于电脑版本的CUDA~CUDA下载地址：CUDAToolkitArchive
Q小Q琪·2024-01-11 18:47

ubuntu 16.04 安装 StarUML

Downloadlibgcrypt11_1.5.3from:https://launchpad.net/ubuntu/+archive/primary/+files/libgcrypt11_1.5.3-
林慕空·2024-01-11 18:58

pyspark config设置、增加配置、限制_success文件生成；spark-submit 集群提交参数

1、pyspark增加config设置javaheap错误增加内存spark=(SparkSession.builder.config("spark.hadoop.hive.exec.dynamic.partition
loong_XL·2024-01-11 18:00

IdentitySever4 入门篇(简单的身份验证)

本文参考：https://www.cnblogs.com/stulzq/p/8119928.html什么是IdentitySever4什么是identityServer4,这是一个OpenIDConnect提供程序的身份验证组件。是一套身份验证框架服务端将需要限制访问的数据，进行封装套一个壳。只有用户通过令牌验证核对才可以请求服务端包裹壳内的数据。identity4的认证授权方式1)客户端认证控制
叶大白丶·2024-01-11 18:21

java项目中,META-INF是什么意思

这个目录经常存在于JAR文件（JavaArchive，Java归档文件）中，用于存放与类加载、模块配置等相关的信息。
脚大江山稳·2024-01-11 16:38

Linux（Ubantu）交叉编译生成windows(32位,64位)可执行程序和库

机缘机缘巧合下收到了这个小任务.工作流先是找了下资料发现过去的都是关于mingw32.教程的做法:增加个源(trusty是linux发行的版本标识,比如22.04是jammydebhttp://us.archive.ubuntu.com
昊月光华·2024-01-11 16:58

《PySpark大数据分析实战》-27.数据可视化图表Pyecharts介绍

对大数据技术栈Hadoop、Hive、Spark、Kafka等有深入研究，对Data
wux_labs·2024-01-11 16:21

labelstudio镜像构建提示 Problem executing scripts APT::Update::Post-Invoke ‘rm

报如下的错误：#1254.36E:ProblemexecutingscriptsAPT::Update::Post-Invoke'rm-f/var/cache/apt/archives/*.deb/var
k5.gs·2024-01-11 15:24

labelstudio镜像构建，网速慢，设置国内源

如下FROMubuntu:latestRUNsed-i's/archive\.ubuntu\.com/mirrors\.aliyun\.com/g'/etc/apt/sources.listCMD["bash
k5.gs·2024-01-11 15:23

Python零基础入门篇 - 16 - Python中的集合，Python面试题2019

文章目录什么是集合？定义集合与列表的区别特殊集合[常见运算操作](about:blank#_运算符|运算符-运算符&运算符^关键字in常见方法add(item)方法remove(item)方法clear()方法union()方法intersection()方法issubset()方法issuperset()方法小节[]()什么是集合？集合是一个无序、不重复的序列它的基本用法包括成员检测和消除重复元
不放弃的小康·2024-01-11 14:20

conda的安装资源链接

1、Indexof/anaconda/archive/|清华大学开源软件镜像站|TsinghuaOpenSourceMirror
lock cylinder·2024-01-11 14:54

鸿蒙HarmonyOS学习手册_入门篇

鸿蒙HarmonyOS学习手册_入门篇文章目录鸿蒙HarmonyOS学习手册_入门篇入门快速入门开发准备基本概念UI框架应用模型工具准备构建第一个ArkTS应用（Stage模型）-快速入门-入门创建ArkTS
特创数字科技·2024-01-11 13:41

hive学习笔记之四：分区表

欢迎访问我的GitHubhttps://github.com/zq2599/blog_demos内容：所有原创文章分类汇总及配套源码，涉及Java、Docker、Kubernetes、DevOPS等；《hive
程序员欣宸·2024-01-11 13:04

Apache Flink 和 Paimon 在自如数据集成场景中的使用

业务背景自如目前线上有基于Hive的离线数仓和基于Flink、Kafka的实时数仓，随着业务发展，我们也在探索引入湖仓一体的架构更好的支持业务，我们对比了Iceberg、Hudi、Paimon后，最终选择
Apache Flink·2024-01-11 13:09

windows下Linux子系统安装conda和jupyterlab

1.安装conda升级系统sudoapt-getupdate-y&&sudoapt-getupgrade-y下载anacondawgethttps://repo.anaconda.com/archive
LeoinUSA·2024-01-11 11:21

C#入门篇（一）

变量顾名思义就是变化的容器，即可以用来存放各种不同类型数值的一个容器折叠代码第一步：#region第二步：按tab键14种数据类型有符号的数据类型sbyte：-128~127short：-32768~32767int：-21亿多~21亿多long：-900多万兆~900多万兆无符号的数据类型byte：0~255ushort：0~65535uint：0~42亿多ulong：0~18百万兆多浮点型fl
bubbleJessica·2024-01-11 11:19

Pytorch的GPU版本安装，在安装anaconda的前提下安装pytorch

本文基于conda安装GPU版本的PyTorch文章目录一、CUDA1.下载CUDA[点击下载](https://developer.nvidia.com/cuda-toolkit-archive)2.
In 2029·2024-01-11 10:17

Windows+Qt5.14.2+android x86配置（待完善）

资源下载可在部分国内镜像源下载Qt5.14.2：Indexof/qt/archive/qt/|清华大学开源软件镜像站|TsinghuaOpenSourceMirror其他工具androidstudio:
penghuilater·2024-01-11 09:02

【NVIDIA】Jetson Orin Nano系列：烧写Ubuntu22.04

://developer.nvidia.com/sdk-manager2、版本介绍JetPack版本：https://developer.nvidia.com/embedded/jetpack-archiveJetsonLinux
郭老二·2024-01-11 09:47

DataX 学习笔记

一.DataX简介1.1DataX概述DataX是阿里巴巴开源的一个异构数据源离线同步工具，致力于实现包括关系型数据库(MySQL、Oracle等)、HDFS、Hive、ODPS、HBase、FTP等各种异构数据源之间稳定高效的数据同步功能
十二同学啊·2024-01-11 08:39

[从零开始学习FPGA编程-12]： 快速入门篇 - 操作步骤3(功能仿真)-1-Mentor HDL仿真工具modelsim SE 10.4简介与安装

作者主页(文火冰糖的硅基工坊)：文火冰糖（王文兵）的博客_文火冰糖的硅基工坊_CSDN博客本文网址：https://blog.csdn.net/HiWangWenBing/article/details/125029586目录前言：第1章Mentormodelsim简介
文火冰糖的硅基工坊·2024-01-11 08:10

Hive基础题-1

别看我，不看答案我也不会写正因为不会写，所以才要每天一练本地hive练习题SEThive.exec.mode.local.auto=true;--默认falseSEThive.exec.mode.local.auto.inputbytes.max
中长跑路上crush·2024-01-11 07:19
上一页 28 29 30 31 32 33 34 35 下一页
按字母分类： ABCDEFGHIJKLMNOPQRSTUVWXYZ其他