hive源码解析

Docker ubuntu apt-get更换国内源解决Dockerfile构建速度过慢

解决使用国内的镜像源即可解决问题，注意如果使用的包比较冷门或者国内镜像网站没同步过来可能就下载不到镜像在dockerfile中执行安装包命令或者RUNapt-get-qupdate之前增加如下内容RUNsed-is@/archive.ubuntu.com
寂夜了无痕·2024-01-18 07:27

基于华为MRS实时消费Kafka通过Flink落盘至HDFS的Hive外部表的调度方案

1Kafka1.1Kerberos安全模式的认证与环境准备1.2创建一个测试主题1.3消费主题的接收测试2Flink1.1Kerberos安全模式的认证与环境准备1.2Flink任务的开发3HDFS与Hive3.1Shell
大数据程序终结者·2024-01-18 06:25

Hive之set参数大全-9

指定LLAP（LowLatencyAnalyticalProcessing）引擎中的IO（输入/输出）线程池的大小hive.llap.io.threadpool.size是ApacheHive中的一个配置属性
OnePandas·2024-01-18 06:23

hive批量检查 partition是否存在，删除不存在的 partition

hive表的数据有时会发生partition还在，但是数据已经被删除了的情况。为了找出这些partition，并删除数据已经不存在的partition，做了几个小的脚本。
飞有飞言·2024-01-18 06:16

Qt之QSignalMapper

资料来源：https://doc.qt.io/archives/qt-4.8/qsignalmapper.htmlhttps://blog.csdn.net/mcgrady_tracy/article/
无尽V深海·2024-01-18 04:44

Qt之Q_PROPERTY

QtStyleSheetsExamples:https://doc.qt.io/archives/qt-4.8/stylesheet-examples.htmlQ_PROPERTY：https://blo
无尽V深海·2024-01-18 04:44

poj1218 完全平方数

/*Time:2019.11.7Author:Goventype：完全平方数err:ref:题目理解：https://www.cnblogs.com/platalcigarette/archive/2012
暖昼氤氲·2024-01-18 04:24

JVM实战（24）——大对象优化

阶段1、深入多线程阶段2、深入多线程设计模式阶段3、深入juc源码解析阶段4、深入jdk其余源码解析阶段5、深入jvm源码解析一、案例背景本章将介绍一个因为大对象而导致的频繁GC问题，其本质也是开发
smart哥·2024-01-18 01:02

JVM实战（22）——jamp和MAT实战

阶段1、深入多线程阶段2、深入多线程设计模式阶段3、深入juc源码解析阶段4、深入jdk其余源码解析阶段5、深入jvm源码解析一、简介我们通过jstat进行分析，发现FullGC非常频繁，基本上每隔
smart哥·2024-01-18 01:32

JVM实战（23）——内存碎片优化

阶段1、深入多线程阶段2、深入多线程设计模式阶段3、深入juc源码解析阶段4、深入jdk其余源码解析阶段5、深入jvm源码解析一、案例背景本案例的背景是一个高峰期每秒十万QPS的社交APP，这类AP
smart哥·2024-01-18 01:32

JVM实战（21）——jstat实战（2）

阶段1、深入多线程阶段2、深入多线程设计模式阶段3、深入juc源码解析阶段4、深入jdk其余源码解析阶段5、深入jvm源码解析一、简介上一章，我们通过jstat命令分析了BI系统中新生代对象的GC情
smart哥·2024-01-18 01:59

github国内镜像代理【持续更新】

按域名字母顺序排序域名更新时间备注https://api.git.sdut.me/2023.03.14https://archive.fastgit
听！起风了~~~·2024-01-18 01:58

Note08：Hive-1.2.2安装配置

安装包下载安装地址：http://archive.apache.org/dist/hive/把安装包上传到/opt/software目录解压[kevin@hadoop112software]$tar-zxvfapache-hive
K__3f8b·2024-01-18 00:22

Go新项目-Gin中wire的依赖注入方式实战（6）

medium.com/@dche423/master-wire-cn-d57de86caa1bhttps://toutiao.io/posts/et0t2lk/previewhttps://imlht.com/archives
ifanatic·2024-01-17 23:45

如何获得免费的人类图

请认准人类图官网IHDS~https://www.ihdschool.com/Jovian~https://www.jovianarchive.com此文介绍的均是官方网址。
人类图_活出独一无二的自己·2024-01-17 21:37

[CDH5] Oozie web console is disabled 问题解决

CDH5安装完成以后OozieWebUI点开显示Ooziewebconsoleisdisabled.问题解决：下载ExtJS2.2:下载地址：http://archive.cloudera.com/gplextras
尼小摩·2024-01-17 19:12

Hotspot源码解析-第十八章-元空间的创建与分配

元空间就是从C堆中划出来的一片完整的区域，为了提升元数据的内存分配效率，又把元空间按若干个chunk内存块管理起来，其中chunk块又分为已使用和空间两种类型，并分别用VirtualSpaceList和ChunkManager来管理，chunk内存块之间以链表的形式关联起来，同时为了满足不同元数据占用内存大小的内存分配，chunk内存块也是有多种不同大小的chunk，如SpecializedChu
多栖码农·2024-01-17 19:53

Hotspot源码解析-第二十章-虚函数表

这一章涉及到一个vtable（虚函数表）的概念，所以先从虚函数表讲起20.1虚函数表刚学Java入门的时候，有一个概念叫多态，这是面向对象语言都有的特性，C++也不例外，在C++中，虚函数的主要作用就是实现多态机制。多态就是用父类的指针指向子类的实例，再通过父类指针调用实际子类的成员函数，该技术可以让父类的指针有“多种形态”，所以叫多态，也是一种泛型技术。所谓泛型技术，就是试图使用不变的代码来实现
多栖码农·2024-01-17 19:53

Hotspot源码解析-第二十章-基础类型的数组类型对象的创建与分配

20.2基础类型的数组类型创建该函数的入口在init.cpp->init_globals()，然后再调用universe.cpp->universe2_init()函数，实际执行的函数是Universe::genesis，所以从这开始源码的解析。解析前先了解一下Klass的概念，大家思考个问题：我们编写的java类在JVM中是以何种形式存在的呢？答：其实他就是以Klass类存在的，Klass类就是
多栖码农·2024-01-17 19:53

Hotspot 内存管理之ClassLoaderData 源码解析

目录一、ClassLoaderData1、Dependencies2、ChunkedHandleList3、JNIMethodBlock4、init_null_class_loader_data/init_dependencies5、构造和析构函数6、record_dependency7、add_to_deallocate_list/free_deallocate_list8、metaspace_
孙大圣666·2024-01-17 19:21

Hotspot启动和初始化源码解析

目录1、JVM启动入口2、JLI_Launch3、可移植性4、JavaMain5、JavaVM和JNIEnv对象6、JNI_CreateJavaVM7、Threads::create_vm学习一个复杂项目源码的最关键的一步是找准应用启动和对外提供服务的入口，从这些入口处开始顺藤摸瓜式的查看代码，可以对项目的各功能模块有一个整体宏观上的认识，并以此为切入点，有的放矢，按需深入了解各功能模块的实现细节
孙大圣666·2024-01-17 19:21

Hotspot源码解析一

文章目录call_stub_call_stub_entry例程JAVA数据结构与面向对象解析魔数java字节码试了一天,windows一直失败.无奈了.安装了一个linux明天试试.詹姆斯老爷子通过一种中间语言形式,兼容所有操作系统.刚开始是通过C进行编译,但是效率极低,为了提高中间语言执行效率,老爷子从指令集出发,高度抽象出了java指令集.从而当一个程序编译成中间语言也就是class后,运行时
Nuan_Feng·2024-01-17 19:51

Hotspot源码解析-第十九章-ClassLoaderData、符号表、字符串表的初始化

第十九章-ClassLoaderData初始化讲解本章先从一张图开始众所周知，Java类的相关信息都是存储在元空间中的，但是是怎么存储的，相信很多读者是不清楚的，这里就不得不涉及到ClassLoaderDataGraph、classLoader、classLoaderData（简称CLD）和Klass的概念及他们四者的关系，这里简单描述下他们的概念，具体细节放到类加载器那一张来讲解。Instanc
多栖码农·2024-01-17 19:50

left join NULL踩坑

相应的，大数据BDPHIVE这边的数据处理也要做相应的改造，之前处理时会判断身份证位数，如果非15位和18位，则认为数据不正确，置为NULL。姓名身份证匿名化后要去除这个判断逻辑。
莱特昂·2024-01-17 18:55

HIVE优化之map和reduce数量

1、控制hive任务中的map数我们先来了解下什么情况要设置map数量。一般来讲，map数量默认，不需要我们设置，一般情况下，Hive自己就可以知道到底使用多少个map。
莱特昂·2024-01-17 18:52

手把手从0开始SpringBoot多模块项目搭建

SpringLnitalizer创建，我这里使用的是springboot2.7.3+jdk11创建好后删除刚创建工程里不需要的文件，只保留：.idea文件夹、项目pom文件、以及一个*.iml文件2.创建子模块我们创建archives_common
01宇宙·2024-01-17 17:59

Ubuntu 安装mono

getting-started/install/linux/#debian-ubuntu-and-derivativesjexus参考：http://www.cnblogs.com/acles/archive
yingwang9·2024-01-17 17:27

Shiro + JWT + Spring Boot Restful 简易教程

原文地址：www.inlighting.org/archives/sp…。序言我也是半路出家的人，如果大家有什么好的意见或批评，请务必issue下。
Dashesand·2024-01-17 16:14

HIVE注解乱码问题解决

在HIVE中建表的时候，有时候难免要表中文注释，然而如果不经过配置，会导致desc某个表名的时候，直接以？的方式返回。因此也来解决一下HIVE中文注释乱码的问题。
朱佳宇·2024-01-17 16:17

2024.1.16 用户画像day01 - 项目介绍

项目架构:二.名词解释一.项目介绍整体流程:项目介绍-elasticSearch-业务数据源导入-离线指标开发-Flume实时采集-Nginx日志埋点数据-结构化流实时指标-制作报表数仓开发用户画像实时开发hive-spark
白白的wj·2024-01-17 15:40

Python 与批处理：数据处理、系统管理和任务调度

批处理学习大数据篇｜大数据实操三剑客之一的批处理目录批处理的概念使用场景框架选择选型如何选docker安装hivePython操作hivedocker安装sparkpyspark操作dataframe如果使用
Wade_Crab·2024-01-17 15:23

Ubuntu20.04降低linux版本到5.4.0-26-generic

/Ascend-hdk-910-npu-driver_23.0.rc3_linux-aarch64.run--fullVerifyingarchiveintegrity...100%SHA256checksumsareOK.Allgood.Uncompressing
大海里的猴儿·2024-01-17 15:13

flutter在iOS中发布

在命令行输入：fluttercleanflutterbuild--release在xcode菜单项选择Product->Archive打包后把程序发布到苹果应用商店里
渣渣曦·2024-01-17 15:26

数仓数据含有特殊字符，如何更方便的导出成excel文件

如果遇到数据中含有特殊字符,"\n","\r","\t",或者其他的特殊分隔符在数据导出时造成错位，都用sql替换，但是需求是导出的数据要保持原有内容格式，就不能替换剔除这些特殊字符，这种情况下使用json方式1，在hive
第一次看海·2024-01-17 15:00

面试官：ThreadLocal 为什么会内存泄漏吗？是怎么产生的？面试必问！

每天14:00更新文章，每天掉亿点点头发...源码精品专栏原创|Java2021超神之路，很肝~中文详细注释的开源项目RPC框架Dubbo源码解析网络应用框架Netty源码解析消息中间件RocketMQ
Java基基·2024-01-17 12:26

Redis下载安装使用和简单连接node服务

1下载Redis，可以到官网或者去github上下载https://github.com/MicrosoftArchive/redis/releases/tag/win-3.0.502（github连接地址
殢无伤_5e03·2024-01-17 12:30

机器学习算法实战案例：Informer 源码详解与代码实战

文章目录机器学习算法实战案例系列答疑&技术交流1源码解析1.1文件结构1.2mian_informer.py文件1.3模型训练1.4模型测试1.5模型预测2Informer模型2.1process_one_batch2.2Informer
Python算法实战·2024-01-17 11:28

讲解：Modelling、dataset、Python，Java，c/c++Python|Python

ApplicationtoBankTelemarketingThiscaseisbasedaroundareal-worlddatasetabouttelemarketingcallsmadebyaPortuguesebank.Youcanfindmoreinformationaboutthisdatasethere:https://archive.ics
yaoaizhen·2024-01-17 11:24

数据库Mysql8.0详细安装

目录一、压缩包安装数据库二、图形化安装数据库一、压缩包安装数据库下载网址链接：MySQL::DownloadMySQLCommunityServer(ArchivedVersions)https://downloads.mysql.com
以我之名，换我未来·2024-01-17 09:19

Ubuntu 16.04 sudo apt-get update报错

Resourcetemporarilyunavailable)E:无法对目录/var/lib/apt/lists/加锁解决方法:sudorm/var/lib/apt/lists/locksudorm/var/cache/apt/archives
Homary·2024-01-17 09:07

【转载】workflow 源码解析 : 深入分析 workflow 线程池

深入分析workflow线程池线程池是日常开发中很常用的一种管理线程的工具。它是池化技术中的一种。池化技术的初衷就是将一些资源进行重复利用，以避免重复的构建来提高执行效率。类似的还有数据库连接池，字符串常量池，httpClient连接池。本文将分享一个好用的线程池，其来源于搜狗开源高性能网络框架workflow。workflow是搜狗公司近期开源发布的一款C++服务器引擎，支撑搜狗几乎所有后端C+
敬先生·2024-01-17 08:53

【转载】workflow 源码解析 : 基础数据结构 list

https://zhuanlan.zhihu.com/p/474833945workflow源码解析:基础数据结构list项目源码:https://github.com/sogou/workflow更加详细的源码注释可看
敬先生·2024-01-17 08:23

workflow源码解析：ThreadTask

1、使用程序，一个简单的加法运算程序#include#include#include//直接定义thread_task三要素//一个典型的后端程序由三个部分组成，并且完全独立开发。即：程序=协议+算法+任务流。//定义INPUTstructAddInput{intx;inty;};//定义OUTPUTstructAddOutput{intres;};//加法流程voidadd_routine(co
敬先生·2024-01-17 08:20

Hive架构设计

我们知道MapReduce和Spark它们提供了高度抽象的编程接口便于用户编写分布式程序，它们具有极好的扩展性和容错性，能够处理超大规模的数据集。这些计算引擎提供了面向高级语言（比如Java，Python等）的编程接口，然而，考虑到分布式程序编写的复杂性，直接使用这些编程接口实现应用系统（比如报表系统）无疑会提高使用门槛，降低开发效率。考虑到SQL仍然是一种非常主流的数据分析语言，开源社区在分布式
跟着大数据和AI去旅行·2024-01-17 08:12

Hive数据导出的四种方法

hive数据仓库有多种数据导出方法，我在本篇文章中介绍下面的四种方法供大家参考：Insert语句导出、Hadoop命令导出、Hiveshell命令导出、Export语句导出。
冬瓜的编程笔记·2024-01-17 08:31

java链接hive数据库实现增删改查操作

要在Java中连接Hive数据库并实现增删改查操作，需要使用HiveJDBC驱动程序。首先，确保已经安装了Hive，并且Hadoop集群正在运行。
酷爱码·2024-01-17 08:30

hive除数取整

简介Hive是一个构建在Hadoop上的数据仓库基础设施，它提供了一个类似于SQL的查询语言，用于处理大规模的结构化数据。在Hive中，我们常常需要对数据进行数学运算，包括除法操作。
cuisidong1997·2024-01-17 08:30

HashData湖仓一体方案：方案概览与Hive数据同步

随着云计算、大数据、AI的发展和普及，各行各业的业务场景日益复杂，数据呈现出大规模、多样性的特点，企业对数据仓库的需求也进一步拓展至对多元化数据实时处理的场景。数据湖是多元数据存储与使用的便捷选择，而云原生具有数据资产统一、基础资源成本低、高性能计算体验升级等优势，是数据湖未来部署的重要形态。湖仓一体架构结合了数据仓库和数据湖的性能优势，在成本、灵活性、事务一致性、多元数据分析等方面具备显著的优势
HashData酷克数据·2024-01-17 07:55

在k8s安装CICD-devtron

在k8s安装CICD-devtron先前条件《kubernetes(k8s)存储动态挂载》参考我之前的文档进行部署https://www.oiox.cn/index.php/archives/32/安装
小陈运维·2024-01-17 07:31

R语言【paleobioDB】——pbdb_ref_occurrences()：根据输入的分布记录信息返回参考文献的信息

可以选择在Indexof/src/contrib/Archive/paleobioDB(r-project.org)下载安装包后，执行本地安装。
ALittleHigh·2024-01-17 06:23
上一页 25 26 27 28 29 30 31 32 下一页
按字母分类： ABCDEFGHIJKLMNOPQRSTUVWXYZ其他