云计算云原生实时计算大数据

hive sql 正则 提取括号中内容

我整理的一些关于【数据】的项目学习资料（附讲解～～）和大家一起分享、学习一下：https://d.51cto.com/eDOcp1使用HiveSQL正则提取括号中的内容在数据分析和处理的过程中，尤其是在大数据平台
Rideo-rax·2025-03-27 11:58

Spark大数据分析与实战笔记（第四章 Spark SQL结构化数据文件处理-01）

文章目录每日一句正能量第4章SparkSQL结构化数据文件处理章节概要4.1SparkSQL概述4.1.1SparkSQL的简介4.1.2SparkSQL架构每日一句正能量世事洞明皆学问，人情练达即文章。第4章SparkSQL结构化数据文件处理章节概要在很多情况下，开发工程师并不了解Scala语言，也不了解Spark常用API，但又非常想要使用Spark框架提供的强大的数据分析能力。Spark的开
想你依然心痛·2025-03-27 10:19

Hive UDF开发实战：构建高性能JSON生成器

核心代码实现3.1UDF类骨架3.2高级类型处理四、部署与使用4.1打包与注册4.2使用示例五、性能优化技巧六、功能扩展方向七、生产环境注意事项八、性能对比测试九、总结与展望往期精彩一、背景与需求场景在大数据生态中
莫叫石榴姐·2025-03-27 09:16

Hadoop/Spark 生态

Hadoop/Spark生态是大数据处理的核心技术体系，专为解决海量数据的存储、计算和分析问题而设计。以下从底层原理到核心组件详细讲解，帮助你快速建立知识框架！一、为什么需要Hadoop/Spark？
不辉放弃·2025-03-27 09:15

MOSN（Modular Open Smart Network）-04-TLS 安全链路

SOFAStack-00-sofa技术栈概览MOSN（ModularOpenSmartNetwork）-00-简单聊一聊MOSN（ModularOpenSmartNetwork）-01-是一款主要使用Go语言开发的云原生
老马啸西风·2025-03-27 09:42

MOSN（Modular Open Smart Network-01-是一款主要使用 Go 语言开发的云原生网络代理平台

SOFAStack-00-sofa技术栈概览MOSN（ModularOpenSmartNetwork）-00-简单聊一聊MOSN（ModularOpenSmartNetwork）-01-是一款主要使用Go语言开发的云原生
老马啸西风·2025-03-27 09:12

数字化知识管理：理论与应用研究

一、数字化知识管理的背景与框架随着人工智能、大数据等技术的快速发展，知识管理逐渐从传统模式转向数字化、智能化。
meisongqing·2025-03-27 08:40

MOSN（Modular Open Smart Network）-03-流量劫持

SOFAStack-00-sofa技术栈概览MOSN（ModularOpenSmartNetwork）-00-简单聊一聊MOSN（ModularOpenSmartNetwork）-01-是一款主要使用Go语言开发的云原生
老马啸西风·2025-03-27 08:07

边缘计算与物联网的结合

传统的云计算模
AI天才研究院·2025-03-27 08:06

Python人工智能项目报告

GPT与Sora，AIGC，财务管理，HR，服务管理，工农业，安全管理，温度，大规模推动人工智能2.0时代已经到来，以高质量大数据为原料，场景智能，人机交互，视觉技术，
烂白菜@·2025-03-27 06:51

数据湖和Apache Iceberg，Apache Hudi，Delta Lake

数据湖这个词目前已经流行开来，逐步被数据相关的从业者接受，可能还有很多人不太清楚它和Hadoop，Hive，Spark这些大数据系统的区别，简单说数据湖是个业务概念，主要是为了区别传统数仓这个概念的（传统数仓的定义
西土城计划·2025-03-27 05:17

五大.NET开源框架，助你快速构建高效应用，告别996！

一、随着云计算、微服务等新兴技术趋势的发展，传统的
墨夶·2025-03-27 02:26

大数据分析工具Power BI（八）：动态TOPN统计

动态TOPN统计一、TOPN统计分析在一些数据分析场景中我们经常遇到获取topN统计的问题，例如统计销量topN的店铺对应的总销售额、统计订单量TopN的门店总销售额等等。针对这种TopN问题的分析，在PowerBI中我们需要使用TOPN函数，TOPN函数可以返回指定表的前N行数据。之前我们学习过RANKX函数，RANKX可以根据指定的度量值表达式来对数据进行排名没有办法获取前几名数据，TOPN可
Lansonli·2025-03-27 02:55

镜舟科技荣登《2024 中国大数据产业年度「国产化」优秀代表厂商》榜单！

在近日于上海成功举办的“释放×数效应·共创智+未来”2024第七届金猿&魔方论坛上，镜舟科技凭借其在数据分析领域的卓越贡献和国产化技术实力，入选《2024中国大数据产业年度「国产化」优秀代表厂商》榜单，
·2025-03-27 02:58

算力网络战略布局与数字未来演进

以“东数西算”工程为例，通过构建八大枢纽节点与十大数据中心集群，实现算力资源跨区域动态调配，支撑工业互联网、智慧医疗等高实时性场景需求。关键维度技术特征典型应用场景异构计算架构
智能计算研究中心·2025-03-27 02:23

Spring Cloud Stream：打造强大的微服务事件驱动架构

随着云计算、微服务和大数据技术的快速发展，构建可扩展、高性能和弹性的应用程序变得越来越重要。
Java爱好狂.·2025-03-27 00:08

2022年全国职业院校技能大赛（高职组）“云计算”赛项赛卷②公有云

2022年全国职业院校技能大赛（高职组）“云计算”赛项赛卷2第三场次：公有云（30分）环境说明：某信息技术科技公司实施数字化转型与应用上云，要对公司内部项目搭建基于云原生的Devops相关服务。
旺仔Sec·2025-03-26 23:00

2020年全国职业院校技能大赛改革试点赛高职组“云计算”竞赛赛卷第二场次题目：容器云平台部署与运维

2020年全国职业院校技能大赛改革试点赛高职组“云计算”竞赛赛卷第二场次题目：容器云平台部署与运维说明：本任务提供有2台服务器master和node，都安装了centos7.5操作系统，在/opt/centos
春生黎至1005·2025-03-26 22:57

2020年全国职业院校技能大赛改革试点赛高职组“云计算”竞赛赛卷第三场次题目：公有云部署与运维

2020年全国职业院校技能大赛改革试点赛高职组“云计算”竞赛赛卷第三场次题目：公有云部署与运维云梦是一家科技公司，在公司内为产品展示搭建了面向公众的WordPress。
春生黎至1005·2025-03-26 22:25

施尧耘：量子计算终将实现；段路明：大规模量子计算还任重道远

本讲将由阿里云量子技术首席量子科学家施尧耘亲临现场，与清华大学海峡研究院大数据AI中心专家委员、百度七剑客之一、酷我音乐创始人雷鸣老师、清华大学姚期智讲座教授段路明教授、昆仲资本创始管理合伙人王钧老师共同参与
lyuharvey·2025-03-26 22:54

谷歌云：快速实现业务需求的云平台

谷歌云（GoogleCloud）是全球领先的云计算平台之一，凭借其强大的计算能力、丰富的功能和先进的技术，为企业和个人提供了广泛的应用场景和解决方案。
I~Lucky·2025-03-26 22:52

数据库总结

由于近期实习涉及到阿里云大数据开发套件的使用，主要涉及到odps、ads、rds、ots相关数据库的操作，所以针对性的做一些总结，并将阿里云中产品与实际产品对应分析。
wzz87·2025-03-26 20:09

AnalyticDB: 强大的云端向量数据库解决方案

AnalyticDB:强大的云端向量数据库解决方案引言在当今大数据和人工智能快速发展的时代，高效的数据存储和检索系统变得越来越重要。
qq_37836323·2025-03-26 19:36

Redis 事务详解：迈向未来的分布式数据一致性方案

在大数据和分布式系统不断演进的今天，数据一致性与高性能存取成为了系统设计中的核心问题。Redis作为内存数据存储的佼佼者，其事务机制为开发者提供了一种既高效又可靠的方式来实现数据的原子性操作。
金枝玉叶9·2025-03-26 19:01

Unity使用ProtoBuf

ProtoBuf1ProtocolBuffers(protobuf)和protobuf-net1.0protobuf的优势1.网络通信2.数据存储3.配置文件4.日志记录5.游戏开发6.微服务架构7.移动应用8.物联网（IoT）9.大数据处理
飞浪纪元[FWC–FE]·2025-03-26 12:13

云原生 | 下一代CI/CD工具，Tekton入门部署指南

Tekton是什么?历史背景Tekton的前身是Knative的子项目build-pipeline，主要用来给Kantive的build模块增加pipeline功能之后独立出来，Tekton的最终目标是一个通用的CI/CD工具。目前，私有云市场占有率比较高的CICD工具对Kubernetes都有所支持，比如Jenkins、GitLabCI。但是这些工具只是将Kubernetes作为其扩展的一个方面
元气满满的热码式·2025-03-26 10:53

MySQL 学习 之 批量插入数据性能问题

文章目录现象优化现象在使用kettle同步大数据的数据到我们的MySQL数据库中时发现，数据量大时插入效率很慢，大约在2000/s优化在MySQL驱动连接中添加rewriteBatchedStatements
zxguan·2025-03-26 08:15

Rust语言的无服务器架构

Rust语言的无服务器架构：未来的技术选择引言随着云计算和微服务架构的迅猛发展，无服务器（Serverless）计算逐渐成为了一种受欢迎的架构模式。
赵蓂岚·2025-03-26 08:45

ETL与数据迁移：从传统系统到云平台的平稳过渡全攻略

在当今数字化转型的浪潮中，云计算已成为推动企业发展的关键力量。越来越多的组织意识到，将数据和应用程序从传统系统迁移到云平台，不仅能降低IT成本，还能提升业务灵活性、可扩展性和创新能力。
谷云科技RestCloud·2025-03-26 08:44

云原生CI/CD | Argo CD 详细介绍 （一）

什么是ArgoCD?ArgoCD是以KubernetesController的形式来实现的，它会对运行在Kubernetes集群上的应用程序进行监听，并将实际运行状态和期望状态（在部署清单文件中指定，且存储在版本控制系统中）进行对比，当两者状态不一致的时候，则提示OutOfSync，此时可以通过自动或者手动的方式来完成同步操作，以让两者状态再次保持一致。存储在Git仓库中的任何变更都会被自动同步至
元气满满的热码式·2025-03-26 08:08

python工商银行流水_工商银行基于 Dubbo 构建金融微服务架构的实践-服务发现篇...

作者|张远征来源|阿里巴巴云原生公众号导读：Dubbo作为分布式微服务框架，众多公司在实践中基于Dubbo进行分布式系统架构。
weixin_39850152·2025-03-26 05:14

Flink CDC 在阿里云实时计算Flink版的云上实践

摘要：本文整理自阿里云高级开发工程师，ApacheFlinkCommitter阮航老师在FlinkForwardAsia2024生产实践（三）专场中的分享，主要分为以下四个方面：一、FlinkCDC&实时计算
·2025-03-26 03:19

如何根据个人现状确定职业方向转型大数据

本文章目录如下：一、大数据相关职位介绍（数据来源于拉钩、智联）（一）大数据相关职位列举（二）每个相关职位的岗位职责与要求二、非程序员转型大数据职位推荐与SWOT分析（一）金融财会，统计，其他商科转型大数据
xiaokaiabcde·2025-03-26 03:59

未来数据驱动的视觉革命

在大数据与人工智能蓬勃发展的时代，数据不再只是静态的数字，而是推动创新与决策的“燃料”。如何以直观、高效的方式展示数据，成为各行各业实现数字化转型的关键。
金枝玉叶9·2025-03-26 03:28

2024年大数据最全教你IDEA解决GIT冲突_idea git解决冲突(2)，2024年最新面试复盘

既有适合小白学习的零基础资料，也有适合3年以上经验的小伙伴深入学习提升的进阶课程，涵盖了95%以上大数据知识点，真正体系化！
2401_84170337·2025-03-26 00:09

X86平台使用Docker模拟ARM64环境

引言随着云计算和物联网技术的迅猛发展，跨平台开发变得越来越重要。ARM架构因其低功耗和高性能，广泛应用于移动设备和嵌入式系统。而X86架构在桌面和服务器领域依然占据主导地位。
吃辣我第一·2025-03-25 23:37

40% 降本：多点 DMALL x StarRocks 的湖仓升级实战

作为DMALLOS数字化能力的技术底座，大数据平台历经多次迭代平稳支撑了公司ToB业务的快速开展。随着国家产业升级和云原生技术的成熟，平台架构也从存算一体逐步转向存算分离。
·2025-03-25 23:41

Java云原生性能核爆指南：量子级穿透技术捅破天花板，让GC跪着回收！

1.云原生GC优化：像“量子扫描仪”穿透JVM黑箱核心原理：JVM代际GC与云原生适配：G1GC/ZGC：云原生推荐使用低延迟GC算法堆内存分代策略：通过-XX:NewRatio调整新生代/老年代比例代码示例
墨夶·2025-03-25 21:43

2024年河南省职业院校 技能大赛高职组 “大数据分析与应用” 赛项任务书（四）

2024年河南省职业院校技能大赛高职组“大数据分析与应用”赛项任务书（四））背景描述：任务一：Hadoop完全分布式安装配置（25分）任务二：离线数据处理（25分）子任务一：数据抽取任务三：数据采集与实时计算
落寞的魚丶·2025-03-25 19:32

云原生周刊丨CIO 洞察：Kubernetes 解锁 AI 新纪元

DRANET采用Apache-2.0开源许可，鼓励社区贡献与扩展，是云原生环境下提升网络性能的创新解决方案。LazyjournalLazyjournal是一个用Go语言编写的终端用户界
·2025-03-25 18:32

经营帮：让企业数字化转型不再是难题

经营帮用前沿技术和大数据生态，让企业转型不再是选择
中钧科技·2025-03-25 18:25

云原生周刊：Ingress-NGINX 漏洞

FlyteFlyte是Lyft开发的云原生工作流自动化平台，专为数据科学和机器学习工作
·2025-03-25 18:30

【Golang】字符串和其他数据类型之间的转换 strconv

它跨平台能力强，拥有丰富的标准库和良好的扩展性，适用于后端开发、云计算、分布式系统和命令行工具等多种应用场景。在Go语言中，strconv是"stringconversion"的简称。
is_Andy_·2025-03-25 18:20

全面深入Spring Cloud：构建企业级微服务架构的终极指南

SpringCloud为分布式系统开发提供了一整套工具链，帮助开发者快速构建健壮的云原生应用。
杨凯凡·2025-03-25 16:38

尚硅谷大数据项目【电商数仓6.0】-Kafka安装-3

解压tar-zxvf/opt/software/kafka_2.12-3.3.1.tgz-C/opt/module/mvkafka_2.12-3.3.1/kafkacd/opt/module/kafka/configviserver.properties#LicensedtotheApacheSoftwareFoundation(ASF)underoneormore#contributorlice
Xiaoweidumpb·2025-03-25 15:32

大数据项目之电商数仓（用户行为采集平台）

大数据项目之电商数仓（用户行为采集平台）版本：V5.0第1章数据仓库概念数据仓库（DataWarehouse），是为企业制定决策，提供数据支持的。可以帮助企业，改进业务流程、提高产品质量等。
qq_42042882·2025-03-25 15:01

尚硅谷大数据项目【电商数仓6.0】-Datax-6

安装tar-zxvfdatax.tar.gz-C/opt/module/测试python/opt/module/datax/bin/datax.py/opt/module/datax/job/job.jsonMySQLToHDFS根据官方文档写配置json{"job":{"content":[{"reader":{"name":"mysqlreader","parameter":{"column"
Xiaoweidumpb·2025-03-25 14:26

大数据学习-hive（四：数仓搭建，数据监控，数据支持）

一：数仓搭建1：完备性。要保证所需要的数据全部到达数仓。2：准备性。etl，和数据的计算校验，确保输出的数据准确。3：一致性。确保输出端口一致，防止输出数据不准。4：时效性。每天的定时调度。5：规范性。表名，字段名要进行规范化处理。6：稳定性。确保数仓稳定。二：数仓校验1：建表语句--建表--droptableifexistsdm.dim_dk_vehicle_info_dqc;createtab
宇智波云·2025-03-25 14:23

【大数据入门核心技术-Hive】（二十一）Hive中double和decimal的区别

一、集群环境部署1、Hive环境安装部署参考【大数据入门核心技术-Hive】（三）Hive3.1.2非高可用集群搭建【大数据入门核心技术-Hive】（四）Hive3.1.2高可用集群搭建二、HiveDouble
forest_long·2025-03-25 13:49

如何避免AWS天价账单

面对相当于全年学费的账单，这个00后工科生第一次感受到云计算的双刃剑威力。这绝非个例。
AWS官方合作商·2025-03-25 13:19
上一页 1 2 3 4 5 6 7 8 下一页
按字母分类： ABCDEFGHIJKLMNOPQRSTUVWXYZ其他