大数据平台-源码解析

性能全面提升！白山云基于StarRocks替换ClickHouse的数据库实践

白山云大数据团队在两年多的学习和实践中，基于StarRocks搭建了全新的大数据平台，并已全量投入使用。因此我们将选型接入、改造优化的过程与经验进行分享，希望能为大家带来一些借鉴与思考。
BaishanCloud·2025-02-08 19:58

使用OpenSSL生成/签发证书的原理、流程与示例

博主历时三年精心创作的《大数据平台架构与原型实现：数据中台建设实战》一书现已由知名IT图书品牌电子工业出版社博文视点出版发行，点击《重磅推荐：建大数据平台太难了！给我发个工程原型吧！》
Laurence　·2025-02-08 10:59

【java】java 定时任务线程池 ScheduledThreadPoolExecutor 源码阅读

文章目录1.概述1.1问题1.2简介1.2数据结构2.源码解析2.1接口和类2.1.1Delayed接口2.1.2ScheduledFuture接口2.1.3DelayedWorkQueue2.1.3.1take2.1.3.2offer2.1
九师兄·2025-02-07 18:10

【大数据平台】大数据平台的成本管理

⭐️大数据平台建设指南：全面讲解从数据采集到数据可视化的整个过程，掌握构建现代化数据平台的核心技术和方法。⭐️《遇见Python：初识、了解与热恋》：涵盖了Pytho
野老杂谈·2025-02-06 21:19

【axios】尚硅谷Web前端axios入门与源码解析

视频地址：【尚硅谷Web前端axios入门与源码解析】https://www.bilibili.com/video/BV1wr4y1K7tq/?
abigale03·2025-02-06 18:30

Wayland 源码解析之代码结构

获取、编译Wayland及其依赖库可参考Wayland官方网站的Build指南：http://wayland.freedesktop.org/building.html。Wayland实现的代码组成可以分成以下四部分：1.Wayland库Wayland中最核心的部分，Wayland协议的大部分实现位于这里。1）工具程序（wayland-scanner）分析Wayland协议文件，并生成相应的头文件
basilc·2025-02-05 17:56

CDH/HDP国产替换之路

原企业版用户企业版不再更新Cloudera和Hortonworks合并后推出了新一代大数据平台CDP，CDH6和H
yumgpkpm·2025-02-05 09:59

TensorFlow 示例项目实战与源码解析.zip

本文还有配套的精品资源，点击获取简介：TensorFlow是谷歌大脑团队开发的开源机器学习库，广泛应用于深度学习、人工智能等领域。该压缩包提供了一个TensorFlow示例项目的源代码，涵盖了从基础操作到复杂模型的各种主题。文章将详细介绍TensorFlow的核心概念，如张量、图计算、会话、变量、梯度下降与优化器、损失函数、数据集、模型评估、模型保存与恢复以及KerasAPI。读者可通过实践这些示
ELSON麦香包·2025-02-05 01:34

开源游戏服务器引擎goworld源码解析14_aoi

aoipkg\mod\github.com\xiaonanln\[email protected]\aoi.go这段代码定义了一个名为aoi的包，其中包含了一些用于处理游戏中区域（AOI）相关逻辑的类型和接口。以下是对代码的详细解释：Coord类型：Coord是一个自定义的浮点型，用于表示坐标轴上的值。AOI结构体：x和y：表示AOI在二维空间中的位置。dist：表示AOI的半径或范围。Data：一个接口
lao geng·2025-02-05 00:26

VSCode源码分析参考资料

VSCodeArchitectureAnalysis-ElectronProjectCross-PlatformBestPractices中文版VSCode架构分析-Electron项目跨平台最佳实践SihanLi博客上的vscode源码分析系列：分析了微服务架构、事件体系、资源管理、配置系统等文召博客上的vscode源码解析系列文章
AI时代的程序员·2025-02-04 10:05

Spark基础【RDD依赖关系--源码解析】

文章目录一RDD依赖关系1RDD血缘关系2RDD依赖关系3RDD阶段划分4RDD任务划分一RDD依赖关系1RDD血缘关系相邻两个RDD之间的关系，称之为依赖关系，多个连续的依赖关系称之为血缘关系RDD只支持粗粒度转换，即在大量记录上执行的单个操作。将创建RDD的一系列Lineage（血统）记录下来，以便恢复丢失的分区。RDD的Lineage会记录RDD的元数据信息和转换行为，当该RDD的部分分区数
OneTenTwo76·2025-02-03 21:52

nginx源码解析-ngx_strerror()/ngx_strerror_init()

nginx源码解析-ngx_strerror()/ngx_strerror_init()将所有的错误码errno以及错误描述strerror(errno)提前存储到ngx_sys_errlist中，用于解决异步信号安全的问题
wenpeng_lu·2025-02-03 18:26

Java 集合框架：HashMap 的介绍、使用、原理与源码解析

一、HashMap介绍HashMap是Java集合框架中最常用的数据结构之一。它实现了Map接口，允许我们以键值对的形式存储数据。HashMap的主要特点是通过哈希表（HashTable）来实现对数据的高效查找、插入和删除操作。1.特性无序存储：HashMap并不保证元素的顺序，元素的顺序可能会随着插入的顺序和哈希冲突的解决方式而变化。允许null键和null值：HashMap允许一个null键和
NicoleGus·2025-02-03 15:01

STM32（hal库）通过MQTT协议连接onenet

本程序参考超级大洋葱806的STM32CubeMXESP8266AT指令实现MQTT协议并接入阿里云IOT平台源码解析【附Github源码地址】一、esp8266驱动我将esp8266设置为station
sea1216·2025-02-03 09:42

量化交易系统中+如何实现实时数据分析和决策支持？

microPythonPython最小内核源码解析NI-motion运动控制c语言示例代码解析python编程示例系列python编程示例系列二python的Web神器Streamlit如何应聘高薪职位在量化交易系统中
openwin_top·2025-02-03 02:17

Java 中 List 源码解析：深度剖析与实现

List是Java中最常用的数据结构之一，广泛用于存储有序的元素集合。它是Java集合框架中的一个接口，提供了多种常见的实现，如ArrayList、LinkedList、Vector等。通过对List接口及其常见实现类的源码分析，开发者可以深入理解其内部机制和实现方式，进而优化应用程序的性能，做出更合适的选择。本文将通过深入解析List接口及其常见实现（特别是ArrayList和LinkedLis
HelloZheQ·2025-02-03 00:34

CompletableFuture#getNow 源码解析&最佳实践

一、源码/***Returnstheresultvalue(orthrowsanyencounteredexception)*ifcompleted,elsereturnsthegivenvalueIfAbsent.**@paramvalueIfAbsentthevaluetoreturnifnotcompleted*@returntheresultvalue,ifcompleted,elseth
秋夫人·2025-02-02 08:33

CompletableFuture#allOf 源码解析&最佳实践

一、源码/***ReturnsanewCompletableFuturethatiscompletedwhenallof*thegivenCompletableFuturescomplete.Ifanyofthegiven*CompletableFuturescompleteexceptionally,thenthereturned*CompletableFuturealsodoesso,with
秋夫人·2025-02-02 08:32

Android应用开发详解：核心章节源码解析

这些章节构成了高效Android应用开发的基础，通过源码解析，开发者将能够掌握如何创建功能丰富的应用，并为深入探索高级主题打下坚实基础。1.Android开发入门1.1Android平台
丹力·2025-02-02 07:25

Flink Connector 写入 Iceberg 流程源码解析_confluent icebergsinkconnector

//添加Writer算子，有并行度SingleOutputStreamOperatorwriterStream=appendWriter(distributeStream,flinkRowType,equalityFieldIds);//添加Commit算子，并行度固定为1SingleOutputStreamOperatorcommitterStream=appendCommitter(write
字节全栈_mMD·2025-02-01 20:16

FreeRTOS深入教程（任务创建的深入和任务调度机制分析）

文章目录前言一、深入理解任务的创建二、任务的调度机制1.FreeRTOS中任务调度的策略2.FreeRTOS任务调度策略实现的核心3.FreeRTOS内部链表源码解析4.如何通过就绪链表管理任务的执行顺序三
花落已飘·2025-02-01 08:38

企业数字化规划蓝图、企业数字化运营分析管理大数据平台建设方案

**企业数字化规划蓝图及运营分析管理大数据平台建设方案****一、企业数字化规划蓝图**1.**数字化目标设定**企业在规划数字化进程时，首先需要明确数字化目标。
公众号：优享智库·2025-01-30 19:57

QT核心模块源码解析：组件化开发与模块化设计

QT核心模块源码解析：组件化开发与模块化设计使用AI技术辅助生成QT界面美化视频课程QT性能优化视频课程QT原理与源码分析视频课程QTQMLC++扩展开发视频课程免费QT视频课程您可以看免费1000+个
QT性能优化QT原理源码QT界面美化·2025-01-29 20:26

Linux 4.19内核中的内存管理：x86_64架构下的实现与源码解析

在现代操作系统中，内存管理是核心功能之一，它直接影响系统的性能、稳定性和多任务处理能力。Linux内核在x86_64架构下，通过复杂的机制实现了高效的内存管理，涵盖了虚拟内存、分页机制、内存分配、内存映射、内存保护、缓存管理等多个方面。本文将深入探讨这些机制，并结合Debian10所使用的Linux4.19内核源码进行解析。1.虚拟内存与分页机制在x86_64架构下，Linux内核利用虚拟地址空间
109702008·2025-01-29 08:27

《Apache Shiro 源码解析》- 11.Shiro 对 Spring 的支持

11.Shiro对Spring的支持Shiro的第一个版本发布于2004年，Spring项目起源于2002年，在Shiro最初的版本中没有与Spring相关的内容。后来，随着Spring的流行，从2010年开始，Shiro开始提供对Spring的支持，推出了一个独立的jar包，名为shiro-spring。从2018年开始，Shiro在v1.4中开始增强对SpringBoot的支持。在本章中，我们
大漠穷秋9527·2025-01-28 16:11

Nacos3# 服务注册与发现服务端启动源码解析

引言本文从gRPC的.proto文件解读其暴露的服务，由此生成gRPC的客户端/服务端存根。进而分析服务端加载启动过程。最近家里事情较多，本文短了点，大伙随便看看。一、内容提要gRPCService.proto解读暴露用于服务端到客户端流式RPC的服务RequestStream#requestStream暴露用于简单RPC调用的服务Request#request暴露用于双向流式RPC调用的服务Bi
瓜农老梁·2025-01-28 15:32

JVM垃圾回收器的原理和调优详解！

全文目录：开篇语前言摘要概述垃圾回收器分类及原理1.Serial垃圾回收器2.Parallel垃圾回收器3.CMS垃圾回收器4.G1垃圾回收器源码解析示例代码使用案例分享案例1：Web服务的GC调优案例
喵手·2025-01-28 02:34

Spring注解篇：@RequestParam详解！

全文目录：开篇语前言摘要概述源码解析使用案例分享应用场景案例优缺点分析核心类方法介绍测试用例测试用例分析使用场景优缺点分析测试用例小结总结文末开篇语哈喽，各位小伙伴们，你们好呀，我是喵手。
喵手·2025-01-28 02:03

深度解析：MyBatis-Plus实现分页查询的封装！

本文目标源码解析分页插件核心逻辑使用案例分享1.配置MyBatis-Plus分页插件2.定义分页查询方法3.Controller层调用应用场景案例优缺点分析优点缺点核心类方法介绍测试用例小结总结文末开篇语哈喽
喵手·2025-01-28 02:03

SpringBoot 多租户架构，轻松驾驭复杂业务场景！

全文目录：开篇语前言摘要概述多租户架构的定义SpringBoot的多租户支持源码解析使用案例分享应用场景案例优缺点分析优点缺点核心类方法介绍测试用例小结总结文末开篇语哈喽，各位小伙伴们，你们好呀，我是喵手
喵手·2025-01-28 01:56

大数据平台建设整体架构设计方案

《大数据平台建设整体架构设计方案》关键词：大数据平台、分布式存储、分布式计算、数据仓库、数据湖、数据安全、数据质量管理、数据治理、数据挖掘、机器学习、图计算、自然语言处理、Hadoop、Spark、Flink
AI天才研究院·2025-01-27 02:55

Lambda架构

原文地址：https://www.cnblogs.com/xiaodf/p/11642555.html首先我们来看一个典型的互联网大数据平台的架构，如下图所示：在这张架构图中，大数据平台里面向用户的在线业务处理组件用褐色标示出来
leveretz·2025-01-26 22:54

C# Json字符串生成工具的实现与应用

课程将涵盖数据类型、库的使用、源码解析、工具定制、效率提升、扩展性以及如何将工具集成到项目中，从而加深对JSON生成原理的理
徐子贡·2025-01-25 21:01

嵌入式轻量级uIP协议栈源码解析与应用

本文还有配套的精品资源，点击获取简介：uIP（microIP）是一个为资源受限的嵌入式设备设计的轻量级TCP/IP协议栈。本文深入解析了uIP协议栈的设计理念、架构、源码结构以及其在物联网和工业控制等领域的应用。uIP源码具有模块化设计、小型化内存管理、事件驱动等特点，为开发者提供了一个理解TCP/IP协议工作原理和实现资源受限网络通信的实践平台。1.uIP协议栈概述uIP，即微型IP协议栈，是一
福建低调·2025-01-25 19:19

【微服务33】分布式事务Seata源码解析一：在IDEA中启动Seata Server

文章目录一、前言二、IDEA中运行SeataServer1、把源码从Github中荡下来坑：一定要从mavenmodules中移除序列化的包SeataServer使用到的DB2、调整seata-server的配置seata-server3、运行seata-server三、总结和后续一、前言至此，博主介绍了一些Seata环境搭建的常见坑、Seata的两种案例（SpringCloud集成Seata、S
秃秃爱健身·2025-01-25 11:21

CDH大数据平台

CDH是一个大数据平台，简化和加速了大数据处理分析的部署和管理。CDH提供Hadoop的核心元素-可伸缩存储和分布式计算-以及基于web的用户界面和重要的企业功能。
梦龙zmc·2025-01-25 06:44

Vue3 源码解析（六）：响应式原理与 reactive

今天这篇文章是笔者会带着大家一起深入剖析Vue3的响应式原理实现，以及在响应式基础API中的reactive是如何实现的。对于Vue框架来说，其非侵入的响应式系统是最独特的特性之一了，所以不论任何一个版本的Vue，在熟悉其基础用法后，响应式原理都是笔者最想优先了解的部分，也是阅读源码时必细细研究的部分。毕竟知己知彼百战不殆，当你使用Vue时，掌握了响应式原理一定会让你的coding过程更加游刃有余
·2025-01-24 07:14

【数据治理】数据治理框架概述

⭐️大数据平台建设指南：全面讲解从数据采集到数据可视化的整个过程，掌握构建现代化数据平台的核心技术和方法。⭐️《遇见Python：初识、了解与热恋》：涵盖了Pytho
野老杂谈·2025-01-24 06:07

spring boot源码解析之SpringApplication启动流程

1.启动入口我们一般的启动SpringBoot应用方式为：@SpringBootApplicationpublicclassMyApplication{publicstaticvoidmain(String[]args){SpringApplication.run(MyApplication.class,args);}}这里使用静态方法启动，传入参数为启动类、命令行参数实际此处使用的是以下方法：p
crayon-shin-chan·2025-01-22 22:28

c#视觉应用开发中如何在C#中进行图像颜色空间转换？

microPythonPython最小内核源码解析NI-motion运动控制c语言示例代码解析python编程示例系列python编程示例系列二python的Web神器Streamlit如何应聘高薪职位在
openwin_top·2025-01-22 21:21

Presto 时间、日期及计算相关日期

由于工作中在数据迁移，大数据平台数据查询引擎使用Presto，和传统的数据库时间函数有区别，整理一版，供大家参考，一起学习，有错误欢迎指正。
三生暮雨渡瀟瀟·2025-01-22 20:49

大数据平台Bug Bash大扫除最佳实践

为此，大数据平台部门组织了一次BugBash活动，既能提升自己对兄弟产品的理解和使用，又能促使自家产品功能日趋完善。今天来给大家分享一些实际操作过程和经验总结~二、什么是BugBash？
京东云开发者·2025-01-22 19:42

玩转至轻云大数据平台-docker部署篇

产品介绍至轻云是一款超轻量级、企业级大数据计算平台，基于Spark生态打造。一键部署，开箱即用。快速实现大数据离线ETL、Spark计算、实时计算、可视化调度、自定义接口、数据大屏以及自定义表单等多种功能，为企业提供高效便捷的大数据解决方案。至轻云有什么特点呢？又能怎么玩呢？产品特点开源轻量化云原生架构:兼容云原生架构，支持Docker、Rancher平台的快速部署。国内镜像下载:可直接从阿里云镜
fanciNate454·2025-01-21 16:34

3.解析logback.xml配置文件入口

文章目录一、前言二、源码解析LogbackServiceProviderDefaultJoranConfiguratorJoranConfigurator三、总结一、前言前面介绍了slf4j相关的知识点
uncleqiao·2025-01-21 06:58

国产海光CPU平台兼容性指南-基础软件分册-20231013（附各系统下载链接）

2.2.2KVM上的虚拟机操作系统2.2.3WindowsHyper-V上的虚拟机操作系统2.2.4VirtualBox上的虚拟机操作系统三、分布式存储四、数据库五、中间件六、大数据七、平台组件7.1云平台7.2大数据平台
技术瘾君子1573·2025-01-20 20:59

Java 中可作为 GC Roots 的对象有哪几种？

作者简介：大家好，我是码炫码哥，前中兴通讯、美团架构师，现任某互联网公司CTO，兼职码炫课堂主讲源码系列专题代表作：《jdk源码&多线程&高并发》，《深入tomcat源码解析》，《深入netty源码解析
码炫课堂-码哥·2025-01-20 02:52

hive小文件合并机制_hive小文件的问题弊端以及合并

，包括位置大小分块信息等，都保存在NN内存中，在小文件数较多的情况下，会造成占用大量内存空间，导致NN性能下降；2、在读取小文件多的目录时，MR会产生更多map数，造成GC频繁，浪费集群资源；3、现在大数据平台文件总数超过
做生活的创作者·2025-01-19 08:49

mybatis源码解析-sql执行流程

1执行器的创建1.SimpleExecutor描述：最基本的执行器，每次查询都会创建新的语句对象，并且不会缓存任何结果。特点：每次查询都会创建新的PreparedStatement对象。不支持一级缓存。适用于简单的查询操作，不需要缓存的情况。2.ReuseExecutor描述：复用型执行器，会复用PreparedStatements。特点：通过缓存PreparedStatement对象来提高性能。
吴冰_hogan·2025-01-19 01:36

Golang面试题四（并发编程）

RWMutex(读写互斥锁)3.Atomic3.1.使用场景3.2.整型操作3.3.指针操作3.4.使用示例4.Channel使用场景使用示例5.sync.WaitGroup使用场景使用示例内部结构关键方法源码解析内部实现细节
os-lee·2025-01-18 23:47

Rabbitmq源码分析，重复消费问题的redis或数据库代码实现

目录底层源码解析自定义唯一id算法MessageProperties类的相关实现自定义消息ID生成器配置和使用Rabbitmq是怎么判断是不是重复消息的呢？
xweiran·2025-01-18 10:26
上一页 1 2 3 4 5 6 7 8 下一页
按字母分类： ABCDEFGHIJKLMNOPQRSTUVWXYZ其他