零基础学习大数据-学习笔记第10页

AI 大模型应用数据中心建设：数据中心成本优化

随着AI模型和大数据量的增长，数据中心的建设和管理成本逐渐成为AI技术落地和应用的核心挑战之一。为了优化数据中心成本，同时保持高性能

杭州大厂Java程序媛·2025-03-10 09:38

信号处理应用：电力系统中的信号处理_（9）.基于电力系统信号的数据挖掘技术

随着大数据和人工智能技术的发展，数据挖掘技术在电力系统中的应用越来越广泛。本节将介绍如何利用数据挖掘技术对电力系统中的信号进行处理和分析，以提高系统的可靠性和效率。

kkchenkx·2025-03-10 08:27

CCF-GESP Python一级考试全解析：网络协议+编程技能双突破

Python一级考试作为入门级认证，主要考察考生对计算机基础逻辑、编程工具使用及网络基础概念的掌握程度，证书受教育部认可，为后续人工智能、大数据等领域学习奠定基石。

奕澄羽邦·2025-03-10 07:50

2024年大数据最新图解curator如何实现zookeeper分布式锁_curator 锁(3)

三、Zookeeper分布式锁概述1、Zookeeper分布式锁实现思路2、Zookeeper分布式锁解决的问题3、Zookeeper分布式锁优缺点？四、InterProcessMute实现分布式锁原理1、加锁流程（acquire()方法）0）加锁流程图1）internalLock()LockDatainternalLock()方法逻辑2）LockInternals#attemptLock()--

2401_84183802·2025-03-10 07:47

Stm32学习笔记2-中断系统-对射式红外传感器计次

一.中断系统：1.中断条件：当主程序运行时，出现了特点的中断条件，此时程序暂停运行当前直到处理完中断程序后再继续执行操作。2.中断优先级：当有多个中断时，cpu会根据中断轻重优先选择加急的中断程序。3.参考nvic基本结构：可以看出stm32中的许多外设像EXTI、TIM等都有中断通道。通过NVIC统一管理。经过NVIC裁决后可向中断CPU当前程序转而执行这些外设的中断程序。二.EXTI外设：1.

Anon_Tokoyo·2025-03-10 06:12

物联网通过数字孪生技术实现设备状态的实时仿真和优化

它结合了物联网（IoT）、大数据、人工智能（AI）和仿真技术，能够实现对设备状态的实时监控、预测和优化。

小赖同学啊·2025-03-10 05:36

数据湖架构与实时数仓实践：Hudi、Iceberg、Kafka + Flink + Spark

1.引言：数据湖与数据仓库的融合趋势在大数据时代，传统的数据仓库（DataWarehouse,DW）因其强一致性和高效查询能力，一直是企业数据分析的核心。

晴天彩虹雨·2025-03-10 03:22

笔试题6：销售区域业绩对比

2025年3月某运营商大数据笔试题（真实）并附有解答和解析说明笔试题6销售区域业绩对比：有一份销售业绩数据文件regional_sales.csv，包含字段：region（销售区域）、product_category

clownAdam·2025-03-10 03:19

JavaScript学习笔记一

web三大标准：HTML(结构)+CSS（样式）+JavaScript(行为)JavaScript的作用：动态效果+数据交互编程语言编程让计算机为解决某个问题而使用某种程序设计语言编写程序代码，最终得到结果是什么？世界上最流行的语言之一，是一种运行在客户端的脚本语言脚本语言不需要编译，运行过程中由**js解析器(js引擎)**逐行来进行解释并执行现在也可以基于Node.js技术来进行服务器端编程作

跨界科技汇·2025-03-10 03:48

Laravel如何实现MySQL分库分表的功能？使用场景是什么？底层原理是什么？

大数据存储：单表数据量超过千万甚至亿级时，需要分表以

快点好好学习吧·2025-03-10 02:44

探秘开源项目 MapReduce：分布式计算的新篇章

探秘开源项目MapReduce：分布式计算的新篇章去发现同类优质开源项目:https://gitcode.com/在大数据处理领域，一个名字始终熠熠生辉，那就是。

褚知茉Jade·2025-03-10 01:32

基于Python的微博舆情分析与可视化系统【附源码】

数据流程总体架构二、详细处理流程与代码实现1.数据采集模块2.数据清洗与预处理3.情感分析与特征工程4.舆情分析模型5.可视化呈现三、性能优化要点摘要基于Python的微博舆情分析与可视化系统旨在利用大数据和自然语言处理技术

AI博士小张·2025-03-10 01:31

MapReduce：分布式计算的基石

MapReduce是一种用于处理和生成大数据集的编程模型，以及一个用于执行该模型的关联实现。它使得在大型商用硬件集群（数千台机器）上进行并行处理海量数据成为可能。

Earth explosion·2025-03-10 00:30

区块链大数据平台搭建系列（二）：如何搭建以太坊RPC节点

Erigon是Ethereum（执行客户端）的一个实现，效率高，用Go编写。这里我们将采用Erigon进行搭建生产环境的以太坊RPC节点。环境准备1.系统要求操作系统：Ubuntu20.04或更高版本。硬件要求：由于Erigon会存储大量区块链数据，需要至少2TB的NVMeSSD磁盘、32GB或更多的内存（推荐64GB），以及8核CPU或更高的配置以提高性能。2.安装必需的软件包运行以下命令来安装

WuJiWeb3·2025-03-10 00:56

大数据实战：Spark + Hive 逐笔计算用户盈亏

简介本文将通过使用Spark+Hive实现逐笔计算区块链上用户交易数据的盈亏需求。由于我们是进行离线计算，所以我们的数据源是Hive表数据，Sink表也是Hive表，即Spark读取Hive表数据进行批计算之后写回到Hive表并供后续使用。通过本文你将会学到：如何使用SparkSQLAPI读取Hive数据源如何通过读取配置文件进行传参执行SQL如何将SparkSQL转换为JavaRDD进行处理如何

WuJiWeb3·2025-03-10 00:56

【5】单调队列学习笔记

前言鸽了很久，2023/1/52023/1/52023/1/5开始，2023/1/212023/1/212023/1/21才完工。中途去集训了，没时间来补漏洞。单调队列单调队列是一种非常实用的数据结构，可以用于查询一个定长区间在以一定速度向后滑动，并查询区间内最值的问题（具体见例题111）。时间复杂度非常低，总体是O(n)O(n)O(n)，均摊到每个元素是O(1)O(1)O(1)，所以常用来优化其

W9095·2025-03-09 22:41

大数据测试总结

总结测试要点：参考产品文档，技术文档梳理以下内容需求来源业务方应用场景数据源，数据格转，数据产出，数据呈现方式（数据消亡史），数据量级（增量，全量），更新频率，数据产出时效数据流转方式（http接口，GRPC接口，中间表，宽表等）数据多样性（不同类型维度的处理数据，例如被标识的维度数据以用户为例:客户，客服，用户，玩家等）使用数据的频次频率（相对应的查询服务数据库的压力，接口服务器的压力，评测是否

SuperCreators·2025-03-09 22:10

大数据分析服务器硬件配置如何选择

大数据，现如今已被人工智能替代。我们先不讨论人工智能，就大数据而言，我们都是在强调他的技术，而我们在用大数据时候，经常用它的来神话它的影响。例如，广告投放精准化，社会安全管理有序，医药行业智能化等。

elva428204358·2025-03-09 22:33

侯捷 C++ 课程学习笔记：C++面向对象开发

学习C++面向对象开发需要具备一些基础。学习过某种proceduurallanguage（C语言最佳）了解变量（variables）、类型（types）、作用域（scope）、循环（loops）、流程控制。知道一个程序需要编译才能被执行。以良好的方式编写C++class是一种基于对象（ObjectBased）classwithoutpointermembers——Complex带指针classwi

『六哥』·2025-03-09 21:31

《DeepSeek+Langchain落地实操:RAG知识增强检索和智能体实战开发》

大数据与人工智能实战专家—周红伟老师法国科学院数据算法博士/曾任阿里人工智能专家/曾任马上消费金融风控负责人课程背景LangChain是一项旨在赋能开发人员利用语言模型构建端到端应用程序的强大框架。

AI周红伟·2025-03-09 21:25

数据安全策略与实践：从理论到落地

数据安全策略与实践：从理论到落地在大数据时代，数据早已成为企业和机构的核心资产，但随之而来的数据泄露、非法访问和滥用问题也屡见不鲜。从用户隐私到企业机密，再到国家级信息安全，无一不受到数据安全的影响。

Echo_Wish·2025-03-09 19:48

Apache Spark: 大数据处理的利器对比与应用实例

本文已收录于《Python超入门指南全册》本专栏专门针对零基础和需要进阶提升的同学所准备的一套完整教学，从基础到精通不断进阶深入，后续还有实战项目，轻松应对面试，专栏订阅地址：https://blog.csdn.net/mrdeam/category_12647587.html优点：订阅限时19.9付费专栏，私信博主还可进入全栈VIP答疑群，作者优先解答机会（代码指导、远程服务），群里大佬众多可以

步入烟尘·2025-03-09 19:45

宽带,带宽,光纤,光猫,WiFi,路由器,令人傻傻搞不清?这篇文章讲明白他们之间的关系.

带宽(bandwidth),简单理解为频带宽度单位时间内通过网络通信信道传输的最大数据量,一般单位是mps(兆比特每秒),家里一般办的是百兆光纤但是一百兆比特每秒下

*星之卡比*·2025-03-09 17:54

Linux学习笔记--shell脚本（二）

20.1什么是shell脚本shell脚本并不能作为正式的编程语言，因为它是在linux的shell中运行的，所以称为shell脚本。事实上，shell脚本就是一些命令的集合。假如完成某个需求需要一口气输入10条命令，对于简单的命令，我们可以直接在shell窗口中输入，但如果是比较长且复杂的命令，一次一次敲就会显得很麻烦。我们可以把这10条命令都记录到一个文档中，然后去调用文档中的命令，这样就能一

运维派C·2025-03-09 17:52

sqlite3 学习笔记

某风吾起·2025-03-09 16:40

Datawhale AI夏令营第四期 AIGC方向 task02学习笔记

探探前沿：了解一下AI生图技术的能力&局限今天我们的任务是对baseline的代码有一个更加细致的理解，然后我们会学习如何借助AI来提升我们的自学习能力，从而帮助大家在后面的学习工作中如何从容迎接各种挑战。授人以鱼不如授人以渔，你可以从中学大模型的提问技巧来实现快速学习，学会如何制作一个话剧连环画。‘自其不变者而观之，则物与我皆无尽也’，拥抱AI、学习AI、运用AI解决各种变化的问题，一起加油！！

流火_授衣·2025-03-09 15:06

【开题报告】基于Springboot+vue智能停车场管理系统（程序+源码+论文) 计算机毕业设计

智能停车场管理系统作为一种创新的解决方案，通过集成先进的物联网技术、云计算技术和大数据分析技

计算机程序_设计·2025-03-09 15:04

DeepSeek smallpond搅动大数据风云

DeepSeek的smallpond涉足大数据DuckDB！降维打击传统大数据领域，搅动中台数据工程风云！

彭铖洋·2025-03-09 14:29

UDP学习笔记（一）为什么UDP需要先将数据转换为字节数组

UDP发送数据时需要先将数据转换为字节数组再发送，主要是因为计算机网络传输的最基本单位是“字节”（Byte）。让我们从以下几个方面来深入理解这个设计选择：1.计算机网络只能传输“字节”在网络通信中，无论是TCP还是UDP，最终传输的都是二进制数据。计算机不能直接传输字符串、整数或对象，而是需要转换为字节数组。示例：发送字符串"Hello"valdata="Hello".toByteArray()/

居然是阿宋·2025-03-09 11:38

FPGA学习笔记（二）Verilog语法初步学习(语法篇1)

FPGA系列文章目录一、FPGA学习笔记（一）入门背景、软件及时钟约束二、FPGA学习笔记（二）Verilog语法初步学习(语法篇1)三、FPGA学习笔记（三）流水灯入门FPGA设计流程四、FPGA学习笔记

贾saisai·2025-03-09 10:02

【CMakeLists】学习笔记

编写CMakeLists.txt最常用的功能就是调用其他的头文件（*.h*.hpp）、动态链接库（*.so）、静态链接库（*.a），将源文件*.cpp*.c*.cc编译成目标可执行或目标可链接库文件。CMake是makefile的上层工具，用于跨平台构建环境，生成可移植的makefile，并简化自己动手写makefile时的巨大工作量。cmake安装--linuxsudoaptinstallcma

何故清风不知意·2025-03-09 09:11

golang游戏开发学习笔记-开发一个简单的2D游戏(基础篇）

go-glexamplego-gl的示例代码二.基础概念这里涉及到的概念在之前的文章里基本上都有过介绍，不再赘述。不过大家有兴趣可以去看一看碰撞检测的一些算法实现三.依赖没有新增任何依赖四.资源准备我们创建的游戏世界里有两个地方需要用到纹理资源（贴图），一是组成世界的方块、二是游戏主角。由于方块是静态的，不需要动画效果，所以只需要一张贴图就可以了。而游戏主角则需要多张纹理图像来组成运动时的动画。要

2401_86638887·2025-03-09 05:50

element ui 中 Cascader 级联选择器实现动态加载动态禁用入门_cascader动态加载(2)

简单列一下我自己遇到的一些题HTML+CSSJavaScript前端框架前端性能优化前端监控模块化+项目构建代码管理信息安全网络协议浏览器算法与数据结构团队管理开源分享：【大厂前端面试题解析+核心总结学习笔记

2401_84619606·2025-03-09 05:20

数学建模：评价性模型学习——层次分析法（AHP模型）

构建层次结构2.构建判断矩阵1.对指标进行赋权2.建立判断矩阵3.层次单排序及一致性检验1、准则层2、方案层4、计算得分三、方法分析总结前言之前在课程作业上简单用过层次分析法，这次再系统性学习一遍，写一篇学习笔记

美肚鲨ccc·2025-03-09 04:54

大数据Flink（六十四）：Flink运行时架构介绍_flink中涉及到的大数据组件

于是人们提出了“不共享任何东西”（share-nothing）的分布式架构。从以Greenplum为代表的MPP（MassivelyParallelProcessing，大规模并行处理）架构，到Hadoop、Spark为代表的批处理架构，再到Storm、Flink为代表的流处理架构，都是以分布式作为系统架构的基本形态的。我们已经知道，Flink就是一个分布式的并行流处理系统。简单来说，它会由多个进

2401_84181942·2025-03-09 03:39

ElasticSearch学习笔记 --- 调研笔记知识点

笔记总结知识点：1.安装ElasticSearch。2.ELasticSearch是使用Java开发并使用Lucene作为核心来实现所有索引和搜索的功能3.使用是通过简单的restfulAPI来使用。4.安装Marvel(ES的管理和监控)5.特点：分布式的实时文件存储，每个字段都被索引并可被搜索分布式的实时分析搜引擎可以扩展到上百台服务器，处理PB级机构化或非结构化数据6.集群是一组具有相同cl

杨鑫newlfe·2025-03-09 03:00

TypeScript 学习笔记（十五）：TypeScript 与数据库的深度结合

TypeScript学习笔记（十五）：TypeScript与数据库的深度结合1.引言在前几篇学习笔记中，我们探讨了TypeScript的基础知识、前后端框架的结合应用、测试与调试技巧、性能优化、前端架构设计以及

Evaporator Core·2025-03-09 03:30

大数据运维实战指南：零基础入门与核心技术解析（第一篇）

大数据运维实战指南：零基础入门与核心技术解析（第一篇）系列文章目录第一篇：大数据运维概述与核心技能体系第二篇：Hadoop生态体系与集群部署实战第三篇：分布式存储系统运维与优化第四篇：资源调度框架YARN

emmm形成中·2025-03-09 01:19

大事件开发 - 前端学习笔记

1.环境准备1.1创建Vue项目使用vite创建Vue3工程。目录结构调整，确保清晰的项目结构。1.2安装依赖npminstallaxioselement-plussassElement-Plus：UI组件库Axios：HTTP请求库Sass：CSS预处理器2.前后端连接（以注册功能为例）2.1搭建注册页面使用Element-Plus组件搭建注册表单。（就是前端一些样式和组件的代码可以从Eleme

我只是什么都不会而已·2025-03-09 00:42

ruby 学习笔记method

RubyMethodsClassmethod（类方法，相当于java里的静态方法）ruby的classMethod是属于类本身的方法。定义classmethod的方法与普通的实例方法不同的地方就是要在类方法的名称前加上类的名字，并用点号隔开类名和方法名。调用类方法时也需要在方法名前加类名，并用点号隔开。例：classMyClassdefMyClass.classMethodPrint"hellof

luckybright·2025-03-09 00:45

C语言学习笔记-进阶（4）字符函数

在编程的过程中，我们经常要处理字符和字符串，为了方便操作字符和字符串，C语言标准库中提供了一系列库函数，接下来我们就学习一下这些函数。1.字符分类函数C语言中有一系列的函数是专门做字符分类的，也就是一个字符是属于什么类型的字符的。这些函数的使用都需要包含⼀个头文件是ctype.h这些函数的使用方法非常类似，我们就讲解一个函数的事情，其他的非常类似：intislower(intc);islower是

John.Lewis·2025-03-09 00:38

Golang学习笔记_47——访问者模式

Golang学习笔记_44——命令模式Golang学习笔记_45——备忘录模式Golang学习笔记_46——状态模式文章目录一、核心概念1.定义2.解决的问题3.核心角色4.类图二、特点分析三、适用场景

LuckyLay·2025-03-08 22:16

Go学习笔记：基础语法9

1.包Go语言是使用包来组织源代码的，包（package）是多个Go源码的集合，是一种高级的代码复用方案。Go语言中为我们提供了很多内置包，如fmt、os、io等。任何源代码文件必须属于某个包，同时源码文件的第一行有效代码必须是packagepacakgeName语句，通过该语句声明自己所在的包。1.1包的基本概念Go语言的包借助了目录树的组织形式，一般包的名称就是其源文件所在目录的名称，虽然Go

银河小铁骑plus·2025-03-08 22:05

AI大模型报告 | 《中国数字人发展报告(2024)》（完整版PDF免费附下载）

当前，数字人正成为人工智能活跃的应用落地入口，对大数据、智能终端、具身智能等产业链接度、嵌入度、融合度较强，或将成为下一代互联网活跃的交互界面之一。公开数据显示，目前

AI大模型_学习君·2025-03-08 21:10

论分布式存储系统架构设计

一、引言随着大数据、人工智能和物联网等技术的快速发展，数据存储需求呈现爆发式增长。传统集中式的存储系统架构逐渐暴露出性能瓶颈、可靠性差、扩展性不足等问题，无法满足日益增长的数据存储需求。

一休哥助手·2025-03-08 21:37

什么是数据库中的宽表？

宽表常见于数据仓库、OLAP（联机分析处理）系统或大数据场景，其核心目标是优化查询性能，尤其是在需要频繁进行复杂分析或生成报表的场景中。

見贤思齊·2025-03-08 20:02

数字孪生对于新基建的价值浅析，算是抛砖引玉。

模拟预测与优化利用AI和大数据分析

大千UI工场·2025-03-08 19:59

SVG 基础教程

2.8绘制文本三、SVG中的滤镜3.1SVG滤镜类型3.2SVG实现马赛克效果四、SVG实现动画五、SVG中的渐变5.1线性渐变5.2径向渐变最近笔者在抓取数据的时候，遇到了SVG反爬，故找了一份SVG学习笔记

Amo Xiang·2025-03-08 19:55

深度学习笔记——神经网络

本文为在拓尔思智能举办的训练营中学习内容的总结，部分内容摘自百度百科个人在这里推荐一个好用的软件，Trae，主要是免费。人工神经元是人工神经网络的基本单元。模拟生物神经元，人工神经元有1个或者多个输入（模拟多个树突或者多个神经元向该神经元传递神经冲动）；对输入进行加权求和（模拟细胞体将神经信号进行积累和树突强度不同）；对输入之和使用激活函数计算活性值（模拟细胞体产生兴奋或者抑制）；输出活性值并传递

肆——·2025-03-08 16:10

电商系统设计专题系列的第一篇：概述与总体架构

数据驱动：通过大数据分析优化定价、库存和用户服务。

不出名的架构师·2025-03-08 15:37

推荐频道

零基础学习大数据-学习笔记