hive源码解析

Hive基础题-1

别看我，不看答案我也不会写正因为不会写，所以才要每天一练本地hive练习题SEThive.exec.mode.local.auto=true;--默认falseSEThive.exec.mode.local.auto.inputbytes.max
中长跑路上crush·2024-01-11 07:19

Hive事务表转换为非事务表

环境：hive3.1.0由于建表时默认会建为非事务表CREATETABLEbucket_text_table2(column1string,column2string,column3int)CLUSTEREDBY
dogplays·2024-01-11 07:47

Hive ACID事务表

环境：hive3.1.0执行引擎：hiveontez什么是hiveACID？
dogplays·2024-01-11 07:47

hive sql 和 spark sql的区别

HiveSQL和SparkSQL都是用于在大数据环境中处理结构化数据的工具，但它们有一些关键的区别：底层计算引擎：HiveSQL：Hive是建立在Hadoop生态系统之上的，使用MapReduce作为底层计算引擎
深度学习研究员·2024-01-11 07:08

2024.1.10 SparkSQL ,函数分类, Spark on HIVE,底层执行流程

目录一.开窗函数二.SparkSQL函数定义1.HIVE_SQL用户自定义函数2.Spark原生UDF3.pandasUDF4.pandasUDAF三.SparkonHIVE四.SparkSQL的执行流程一
白白的wj·2024-01-11 07:08

【AI】WSL安装Anaconda

Anaconda安装包这里有两个方式，一是直接在wsl中执行wget命令下载，这种方式没什么好说的，直接下载好了，具体的版本可根据自己需求选择；wgethttps://repo.anaconda.com/archive
AI柱子哥·2024-01-11 05:27

JVM基础（1）——JVM类加载机制

阶段1、深入多线程阶段2、深入多线程设计模式阶段3、深入juc源码解析阶段4、深入jdk其余源码解析阶段5、深入jvm源码解析一、简介首先，我们来简单看下Java程序的执行流程：上图中，典型的Jav
smart哥·2024-01-11 05:55

JVM基础（3）——JVM垃圾回收机制

阶段1、深入多线程阶段2、深入多线程设计模式阶段3、深入juc源码解析阶段4、深入jdk其余源码解析阶段5、深入jvm源码解析一、简介我们在JVM内存模型一章中，介绍了JVM中的Java堆内存区域。
smart哥·2024-01-11 05:55

webpack高手秘籍（四）

前言我们继续前面的内容，把webpack剩下的配置项撸一遍，推荐大家先看一下前面的文章：webpack源码解析一webpack源码解析二（html-webpack-plugin插件）webpack源码解析三
vv_小虫虫·2024-01-11 05:44

Electron相关的一些概念

ASAR（AtomShellArchiveFormat）asar其实是一种类似tar这样的把文件和目录结构整合为一个文件的文件格式，electron可以不用解包来读取一个asar文件里面的任意文件，在windows
mercurygear·2024-01-11 04:34

openeuler的安装和两台linux主机配置ssh实现互相免密登陆

一、openeuler的安装下载OpenEuler-网址：https://www.openeuler.org/zh/download/archive/-版本选择：openEuler22.03LTSSP2
monster - r·2024-01-11 04:09

Hive（总）看完这篇，别说你不会Hive！

文章目录1.Hive入门1.1什么是Hive1.2Hive的优缺点1.2.1优点1.2.2缺点1.3Hive架构原理2.Hive安装2.1Hive安装2.2HiveJDBC访问2.2.1启动hiveserver2
Archie_java·2024-01-11 03:22

spring源码解析（六）

bean对象的初始化及销毁时，执行相关操作的几种方式。packagecom.test;importorg.springframework.beans.factory.DisposableBean;importorg.springframework.beans.factory.InitializingBean;importorg.springframework.context.annotation.
w_l666·2024-01-11 02:25

Linux 内核源码解析---心得记录

系统启动全流程图linux源码解读系列关于内核源码解读的一系列资料：链接1，链接2从内核源码的init/main.c开始阅读。fork()函数涉及到linux内核源码fork()函数的理解。相关资料：https://blog.51cto.com/u_13064014/5079734声明与实现：/*init/main.c*/staticinline_syscall0(int,fork)/**以汇编的
mosiwi·2024-01-11 02:42

Qt5.9.8安装教程Qt5.12.3卸载教程以及VS2022+QT开发环境搭建

（我其他博文用的Qt版本是5.12.3）1.Qt5.9.8安装官方下载网址：Indexof/new_archive/qt/5.9/5.9.8在官方网址上选择对应的版本（Mac，Windows，Linux
梦里花乡·2024-01-11 02:38

Redisson 源码解析 - 分布式锁实现过程

一、Redisson分布式锁源码解析Redisson是架设在Redis基础上的一个Java驻内存数据网格。
小毕超·2024-01-11 01:54

ARouter源码解析（五）

arouter-gradle-pluginversion:1.0.2AutoRegister:https://github.com/luckybilly/AutoRegister前言====在本系列的第一篇中讲过，ARouter可以通过扫描dex文件中class的全类名，来加载compiler生成的路由类。但这种方式影响性能，并且效率也不高。所以在ARouterv1.3.0之后的版本中，加入了自动
俞其荣·2024-01-11 01:00

BitMap源码解析

文章目录前言数据结构添加与删除操作JDK中BitSet源码解析重要成员属性初始化添加数据清除数据获取数据size和length方法集合操作：与、或、异或优缺点前言为什么称为bitmap？
倜傥村的少年·2024-01-11 00:52

linux安装java8

根据自己系统的位数下载查看系统位数命令：getconfLONG_BIT下载地址https://www.oracle.com/java/technologies/javase/javase8u211-later-archive-downloads.html2
乾坤鸟·2024-01-10 22:17

Phoenix基本使用

1.2Phoenix特点容易集成：如Spark，Hive，Pig，Flume和MapReduce。
有语忆语·2024-01-10 22:30

JetCache源码解析——配置加载和初始化

JetCache自动化配置加载JetCache的配置加载主要是在jetcache-autoconfigure模块中完成的，其中加载配置的核心类是JetCacheAutoConfiguration，主要是用于创建全局性的一些Bean，例如全局缓存配置类GlobalCacheConfig，AutoConfigureBeans和SpringConfigProvider等，源码如下：@Configurat
学海_无涯_苦作舟·2024-01-10 22:00

JetCache源码解析——概览

简介JetCache是一个基于Java的缓存系统封装，提供统一的API和注解来简化缓存的使用。JetCache提供了比SpringCache更加强大的注解，可以原生的支持TTL、两级缓存、分布式自动刷新，还提供了Cache接口用于手工缓存操作。当前有四个实现，RedisCache、TairCache（此部分未在github开源）、CaffeineCache(inmemory)和一个简易的Linke
学海_无涯_苦作舟·2024-01-10 22:29

SpringMVC源码解析——HTTP请求处理

在SpringMVC源码解析——DispatcherServlet的逻辑处理中，最后介绍到了org.springframework.web.servlet.DispatcherServlet的doDispatch
学海_无涯_苦作舟·2024-01-10 22:57

从 Nexus 迁移到 JFrog Artifactory

从SonatypeNexusRepositoryManager迁移到JFrogArtifactory1.Nexus1.1下载下载链接：DownloadArchives-RepositoryManager3
晓数·2024-01-10 21:03

如何用python编写hive udf函数

相比于java编写udf，python编写udf就显得简单的多。站在数据处理的角度来说，python也更合适。那python如何编写udf函数呢？使用方法：（1）将编写的python代码上传到服务器（2）添加python文件（3）使用函数：TRANSFORM(data)USING“pythonudf_test.py”as(name,address)对比java编写udf函数来说，少了打包、创建临时
不想起的昵称·2024-01-10 21:00

黑猴子的家：Hive 数据倾斜优化之 小文件合并

在map执行前合并小文件，减少map数：CombineHiveInputFormat具有对小文件进行合并的功能（系统默认的格式）。
黑猴子的家·2024-01-10 20:26

虚拟机安装centos7部署mysql5.7.33详细步骤

稍后安装选择更快捷选择Linux--->版本里可以根据需求再选择磁盘大小可根据需求自定义二.建立网络连接三.mysql官网取包Mysql下载地址https://downloads.mysql.com/archives
伪程序文艺猿·2024-01-10 20:02

Hive分组取满足某字段的记录

在SQL分组后取第一条记录中介绍了分组取满足条件的第一条记录的方法，现在业务上面临如此需求：在做公司流程监控时，要求监控每个流程每个节点的用时情况。其中有个字段isend可以判断流程是否结束，但是流程结束后可能还会有操作（例如转发、会签等）,分析时需要将结束后的节点删除掉。思路：根据流程ID分组，按照操作时间从小到大排序，得到字段rk，根据流程ID和isend分组，按照操作时间从小到大排序，得到字
Forge_ahead·2024-01-10 20:57

Hive常用函数

一、关系运算：1.等值比较:=举例：Hive>select1fromlxw_dualwhere1=1;2.不等值比较:select1fromlxw_dualwhere1select1fromlxw_dualwhere1select1fromlxw_dualwhere1
勤奋的超跑·2024-01-10 19:26

编写高质量代码的50条黄金守则-Day 03(首选is或as而不是强制类型转换)

转载请注明本文地址：https://www.byteflying.com/archives/6710。
比特飞_byteflying·2024-01-10 19:15

ABP 源码解析 一. ABP启动

介绍此系列文章主要是对ABP源码进行解读，初探作者在创造ABP的框架思路，和使用到的设计模式进行。通过解读ABP源码，可以提升ABP使用方式，可以提升编码意识，提高面向对象编程思想。此篇文章主要解读ABP框架的启动过程已经相关类。ABP启动通过测试代码AbpBootstraper_Tester可以一窥ABP启动类的使用方式abp启动测试代码abp启动测试运行结果由测试代码可知，要启动abp框架，主
诸葛_小亮·2024-01-10 18:20

hive中的日期处理

hive自带的时间/日期处理函数将某种格式的时间转换为Unix时间戳selectunix_timestamp('2018053113:01:01','yyyyMMddHH:mm:ss');将Unix时间戳转换为指定格式的时间
evanzh7·2024-01-10 18:38

设计模式之责任链模式【行为型模式】

想系统/深入学习某技术知识点…一个人摸索学习很难坚持，想组团高效学习…想写博客但无从下手，急需写作干货注入能量…热爱写作，愿意让自己成为更好的人…文章目录前言一、概述二、结构三、案例实现四、优缺点五、源码解析总结前言一
哥的时代·2024-01-10 18:46

PHP 8.1.0 正式发布了

enumStatus{casedraft;casepublished;casearchived;publicfunctioncolor():string{returnmatch($this){Status
PHP技术社区·2024-01-10 17:09

【看看源码】一、ArrayList源码解析

前言：工作中涉及到并发编程，于是看了看java集合源码的各种实现，在这里记录下。汇总贴CSDN链接：【看看源码】Java1.8集合源码一、初识ArrayList首先看一下类引用框图：然后翻译下ArrayList的类的官方注释：*List接口的由可调整大小的数组实现。实现所有可选的列表操作，并允许所有元素，包括null。除了实现List接口外，这个类还提供了一些方法来操作内部用于存储列表的数组的大小
佩洛君·2024-01-10 15:10

《PySpark大数据分析实战》-26.数据可视化图表Seaborn介绍

对大数据技术栈Hadoop、Hive、Spark、Kafka等有深入研究，对Data
wux_labs·2024-01-10 14:58

Hive分区表实战 - 单分区字段

文章目录一、实战概述二、实战步骤（一）创建图书数据库（二）创建国别分区的图书表（三）在本地创建数据文件（四）按分区加载数据1、加载中文书籍数据到`country=cn`分区2、加载英文书籍数据到`country=en`分区（五）查看分区表book全部记录（六）通过HDFS查看分区对应的目录及文件（七）手动创建分区并上传数据1、在HDFS上手动创建`country=jp`分区目录2、创建日文书籍数据
howard2005·2024-01-10 13:55

linux内核学习（好东西）

转自：http://blog.csdn.net/michaelrun/archive/2010/05/30/5634390.aspxlinux内核学习（好东西）2012-05-1121:12:13|分类
killcpp·2024-01-10 12:13

洞悉linux下的Netfilter&iptables

原文链接：http://blog.chinaunix.net/uid-23069658-id-3160506.htmlhttp://www.zsythink.net/archives/1199一、什么是
lx_jian·2024-01-10 12:11

【Python数据采集系列】利用协程并发采集豆瓣TOP250电影信息（源码解析）

这是Python数据采集系列原创文章，我的第193篇原创文章。一、引言前文回顾：Python语言高级实战-基于协程的方式来实现异步并发编程（附源码和实现效果）【Python程序开发系列】进程、线程、协程？一文全面梳理多任务并发编程基本概念Python数据分析实战-爬取豆瓣电影Top250的相关信息并将爬取的信息写入Excel表中（附源码和实现效果）本期知识点：协程在数据爬虫中的应用非常常见，特别是
数据杂坛·2024-01-10 11:41

Tomcat源码解析(一)： Tomcat整体架构

Tomcat源码系列文章Tomcat源码解析(一)：Tomcat整体架构目录一、Tomcat整体架构1、Tomcat两个核心组件功能2、Tomcat支持的多种I/O模型和应用层协议二、Connector
冬天vs不冷·2024-01-10 09:09

Hive 日期处理函数汇总

Hive日期处理函数汇总最近项目处理日期操作比较繁杂,使用Hive的日期函数也较频繁1.加减日期date_add(‘日期字符串’,int值):把一个字符串日期格式加n天,n为int值selectdate_add
mizuhokaga·2024-01-10 09:30

Hive之set参数大全-7

指定HiveLLAP（LiveLongandProcess）守护进程的委托令牌的生存期在ApacheHive中，hive.llap.daemon.delegation.token.lifetime是一个配置属性
OnePandas·2024-01-10 09:59

Hive之set参数大全-6

L指定是否启用延迟评估（lazyevaluation）的扩展布尔字面量在ApacheHive中，hive.lazysimple.extended_boolean_literal是一个配置属性，用于指定是否启用延迟评估
OnePandas·2024-01-10 09:29

Hive之set参数大全-2

C指定是否启用表达式缓存的评估hive.cache.expr.evaluation是Hive中的一个配置属性，用于指定是否启用表达式缓存的评估。
OnePandas·2024-01-10 09:28

Hive之set参数大全-3

D是否启用本地任务调试模式hive.debug.localtask是ApacheHive中的一个配置参数，用于控制是否启用本地任务调试模式。
OnePandas·2024-01-10 09:28

Hive之set参数大全-4

F指定在使用FETCH命令提取查询结果时的序列化/反序列化器hive.fetch.output.serde是Hive的一个配置参数，用于指定在使用FETCH命令提取查询结果时的序列化/反序列化器。
OnePandas·2024-01-10 09:28

Hive的时间处理函数from_unixtime和unix_timestamp

一、概述hive时间处理函数from_unixtime和unix_timestamp的实现以及实例，从而方便后续的时间处理。
RayBreslin·2024-01-10 09:23

hive 基本操作与示例

comment'库的注释'][location'库在hdfs上存放的路径'][withdbproperties('属性名'='属性值'，...)]注意：location可以省略，默认存放在/user/hive
我很ruo·2024-01-10 08:49

react源码解析——react 任务调度：scheduleWork

React创建了update，并且将update放入updateQueue中,接下来就是任务调度的过程。任务调度的起点是scheduleWork方法一般先要进行调度的检查防止出现死循环。这个其实很好理解，就是你在render中进行setstate操作的时候会有Maximumupdatedepthexceeded报错接下来是markUpdateTimeFromFiberToRoot，该函数用于获得F
Amao?·2024-01-10 08:07
上一页 32 33 34 35 36 37 38 39 下一页
按字母分类： ABCDEFGHIJKLMNOPQRSTUVWXYZ其他