大数据篇之Clouder 第5页

分布式存储的技术选型之HDFS、Ceph、MinIO对比

分布式存储的技术选型比：HDFS、Ceph、MinIO对比一文读懂分布式存储在当今数字化时代，数据呈爆炸式增长，分布式存储技术应运而生，成为大数据存储与管理的得力助手。

Linux运维老纪·2025-01-22 00:40

【云原生布道系列】第三篇：“软”饭“硬”吃的计算

1虚拟化技术定义首先援引一段《虚拟化技术发展编年史》中针对虚拟化技术的定义：在计算机科学中，虚拟化技术（Virtualization）是一种资源管理（优化）技术，将计算机的各种物理资源（例如CPU、内存、磁盘空间，以及网络适配器等I/O设备）予以抽象、转换，然后呈现出一个可供分割并任意组合为一个或多个（虚拟）计算机的配置环境。虚拟化技术打破了计算机内部硬件实体结构不可分割的物理实体障碍，使用户能够

江中散人·2025-01-22 00:35

python etree模块所有函数详解_09.XML处理之etree模块

本主题主要说明python的xml处理标准模块xml.etree的使用。xml.etree模块包含4个子模块，其中cElementTree是ElementTree的别名，已经不推荐使用。本主题主要包含内容：1.ElementInclude模块使用2.ElementPath模块使用3.ElementTree模块使用一、etree模块帮助importxml.etreehelp(xml.etree)He

weixin_39878401·2025-01-21 23:04

服务化架构 IM 系统之红包功能设计与实现

在文章（见《分层架构IM系统之消息收发功能设计与实现》）中，我们深入分析过消息的收发流程；在IM的服务化架构中，消息收发逻辑与在分层架构中类似，见下图，我们快速回顾一下。图中箭头表示数据流向。

棕生·2025-01-21 23:03

分层架构 IM 系统之消息收发功能设计与实现

“消息收发”是IM系统最最核心的业务逻辑模块，本篇文章是整个“分层架构IM系统”的核心！IM，即“即时通讯”，要求消息具备“及时性”和“可靠性”：及时性，要求消息的收发需要很低的延时，在线双方通过消息交流时，没有明显的滞后感。可靠性，要求消息不能丢失；对于消息发送方来说，只要消息发送成功了，消息就会一直存在服务端，不会丢失（除非因产品策略，删除久远的历史消息）；对于服务端来说，只要接收方在线，一定

棕生·2025-01-21 23:33

分层架构 IM 系统之架构演进

分层架构的IM系统，整体上包含了【终端层】、【入口层】、【业务逻辑层】、【路由层】、【数据访问层】和【存储层】，我们在上篇文章（分层架构IM系统之架构解读）中进行了介绍。今天讨论局部的架构调整和演进！

棕生·2025-01-21 23:32

基于hadoop的协同过滤算法电影推荐系统的设计与实现

AI天才研究院·2025-01-21 23:32

C++ Primer：3.3 标准库类型vector

集合中的每个对象都有一个与之对应的索引，用于访问对象。vector容纳着其他对象，也被称作容器。使用vector必须包含适当的头文件。

天空的蓝耀·2025-01-21 23:31

Java 驱动大数据流处理：Storm 与 Flink 入门（大数据）

随着数据量的不断增长，处理大数据流成为了现代软件开发中的一个重要领域。ApacheStorm和ApacheFlink是两个用于处理大规模数据流的开源框架，它们都支持用Java编写的应用程序。

用心去追梦·2025-01-21 22:28

【人工智能 | 大数据】基于人工智能的大数据分析方法

基于人工智能（AI）的大数据分析方法是指利用机器学习、深度学习和其他AI技术来分析和处理大规模数据集。

用心去追梦·2025-01-21 22:58

数据结构之链表（linked list）代码实现(小白轻松懂，C语言版)

一、前言：链表的简单介绍链表（LinkedList）是一种重要的线性数据结构，它以节点（Node）的形式存储数据，每个节点通过指针（或引用）指向下一个节点，从而形成一个动态的数据链条。与数组不同，链表的内存分配并不连续，因此具有更灵活的插入和删除操作，但在随机访问元素时效率相对较低。链表通常分为单向链表（SinglyLinkedList）、双向链表（DoublyLinkedList）和循环链表（C

Morandi_Chen·2025-01-21 22:26

Python增强办公效率的11个实用代码段，零基础入门到精通，收藏这一篇就够了

引言在日常工作中，许多任务可以通过编程自动化来提高效率。本文将介绍一些实用的Python脚本，用于批量创建文件夹、重命名文件、处理Excel数据、合并PDF文件等。这些工具能显著减少重复性工作，提升工作效率。1.快速生成批量文件夹工作中经常需要创建多个文件夹来分类存储不同类型的文件。手动创建不仅耗时还容易出错。利用Python可以快速生成批量文件夹。importosdefcreate_folder

Python_chichi·2025-01-21 22:50

大数据组件之Azkaban简介

一、Azkaban介绍1.1背景一个完整的大数据分析系统，必然由很多任务单元(如数据收集、数据清洗、数据存储、数据分析等)组成，所有的任务单元及其之间的依赖关系组成了复杂的工作流。

努力的小星星·2025-01-21 22:20

分析-MQ消息队列中间件-在IM即时通讯系统的用途

消息的发送属于高吞吐场景，直接操作DB可能会让DB崩溃，所有离线消息在落地入库前，可以先扔到MQ消息队列中，再由单独部署的消费者来有节奏地存储到DB中；２)用户的行为数据收集环节：因为用户的聊天消息和指令等，可以用于大数据分析

酱油瓶啤酒杯·2025-01-21 22:50

20240619－James-快速鸟瞰并发编程, 呕心沥血整理的架构技术(第3篇)

接口描述Runnablerun()方法没有返回值。Callablecall方法有返回值。FutureFuture是对于具体的Runnable任务或Callable任务的执行结果进行取消、查询是否完成、获取结果。必要时可以通过get方法获取执行结果，该方法会阻塞直到任务返回结果。ExecutorService使用Future作为返回类型。ExecutorServiceexecutorService=

2401_89821541·2025-01-21 22:50

2024年最全（一）大数据---Hadoop整体介绍（架构层）----（组件，并发知识体系大全

Hadoop方案一、大数据介绍============

2401_84586689·2025-01-21 21:19

【第二天】零基础入门刷题Python-算法篇-数据结构与算法的介绍-五种常见的排序算法（持续更新）

提示：文章写完后，目录可以自动生成，如何生成可参考右边的帮助文档文章目录前言一、Python数据结构与算法的详细介绍1.Python中的常用的排序算法1.排序算法的介绍2.五种详细的排序算法代码总结前言提示：这里可以添加本文要记录的大概内容：第一天Python数据结构与算法的详细介绍第二天五种常见的排序算法提示：以下是本篇文章正文内容，下面案例可供参考一、Python数据结构与算法的详细介绍1.P

Long_poem·2025-01-21 21:18

python中lxml 库之 etree 使用详解

目录一、etree介绍二、xpath解析html/xml1、第一步就是使用etree连接html/xml代码/文件。2、xpath表达式定位①xpath结合属性定位②xpath文本定位及获取③xpath层级定位④xpath索引定位⑤xpath模糊匹配一、etree介绍lxml库是Python中一个强大的XML处理库，简单来说，etree模块提供了一个简单而灵活的API来解析和操作XML/HTML文

闲人陈二狗·2025-01-21 21:48

20240619－James-快速鸟瞰并发编程, 呕心沥血整理的架构技术(第3篇)(1)

其实功能接口如下接口描述Runnablerun()方法没有返回值。Callablecall方法有返回值。FutureFuture是对于具体的Runnable任务或Callable任务的执行结果进行取消、查询是否完成、获取结果。必要时可以通过get方法获取执行结果，该方法会阻塞直到任务返回结果。ExecutorService使用Future作为返回类型。ExecutorServiceexecutor

2401_89760309·2025-01-21 21:47

数据分析基础定义

一、大数据的定义数据分析是基于商业等目的，有目的的进行收集、整理、加工和分析数据，提炼有价值信息的过程。

阿金要当大魔王~~·2025-01-21 21:16

大数据学习(36)- Hive和YARN

&&大数据学习&&系列专栏：哲学语录:承认自己的无知，乃是开启智慧的大门如果觉得博主的文章还不错的话，请点赞+收藏⭐️+留言支持一下博主哦当客户端提交SQL作业到HiveServer2时，HiveServer2

viperrrrrrr·2025-01-21 21:16

python模拟手写笔迹_原笔迹手写实现平滑和笔锋效果之:笔迹的平滑(一)

之前研究过一种用于模拟真实手写笔迹签名的算法,要求能够保持原笔迹平滑,并有笔锋的效果.在网上看了一些资料,资料很多,能够达到用于正式产品中的效果的一个都没有找到.但是即使按照这篇文章讲的方法去实现手写笔迹,表现的效果也非常的不理想.而且,这篇文章还只是涉及到了笔迹平滑的问题,没有涉及到如何解决笔锋的问题经过我一段时间的研究,终于在上厕所的时候(有没有被duang了一下的感觉,哈哈~O(∩_∩)O)

weixin_39570530·2025-01-21 21:14

Vue：现代前端开发的首选框架-【应用篇】

引言在现代前端开发中，Vue.js以其轻量、灵活和易学的特性成为开发者的热门选择。本文将深入探讨Vue.js的核心优势，与React和Angular的比较，前端工程化的最佳实践，性能优化的关键策略，测试驱动开发（TDD）的实施方法，以及Vue.js生态系统的强大工具和资源。Vue.js与React和Angular的深度比较Vue.js的核心优势学习曲线：Vue.js的设计哲学使得新手能够快速上手，

行动π技术博客·2025-01-21 21:42

深度学习-90-大型语言模型LLM之基于LM Studio本地化部署运行自己的大模型

文章目录1LMStudio1.1LMStudio的优点1.2LMStudio的安装1.3配置国内下载模型2LMStudio的应用2.1查找/下载模型2.2模型名称的含义2.3查看已经下载的模型2.4使用聊天3配置服务端3.1启动服务3.2支持的接口3.2.1列出当前加载的模型/v1/models3.2.2聊天补全/v1/chat/completions3.2.3文本补全/v1/completion

皮皮冰燃·2025-01-21 20:38

大数据分析专业毕业设计最新最全选题精华汇总--持续更新中⑤

源码空间站11·2025-01-21 20:37

三轴云台之跟随模式篇

一、定义与原理定义：跟随模式是三轴云台的一种工作模式，在此模式下，云台能够跟随用户的操作或预设的路径进行平滑的移动和拍摄。原理：跟随模式的实现依赖于云台的传感器、电机控制系统和算法。云台通过内置的传感器感知用户的操作或预设路径，然后通过电机控制系统调整云台的角度和位置，以实现跟随效果。算法则用于优化云台的移动路径和速度，以确保拍摄的稳定性和流畅性。二、功能特点平滑跟随：在跟随模式下，云台能够平滑地

SKYDROID云卓小助手·2025-01-21 20:33

机器算法之逻辑回归(Logistic Regression)详解

一、什么是逻辑回归？逻辑回归并不是传统意义上的回归分析，而是一种用于处理二分类问题的线性模型。它通过计算样本属于某一类别的概率来进行分类，尽管名字中有“回归”二字，但它实际上是一种分类算法。简单来说，逻辑回归回答的是“这件事发生的可能性有多大”。二、逻辑回归的基本原理在讲原理之前，我们先来了解一下逻辑回归的数学基础。逻辑回归的核心是一个Logistic函数（或称为Sigmoid函数），它的公式如下

HappyAcmen·2025-01-21 20:32

RabbitMQ 可靠性、重复消费、顺序性、消息积压解决方案

实际上消息队列可以说是没法百分之百保证可靠性的！RabbitMQ提供的相关机制也只是在于缩小消息丢失的概率，或者说提供了消息丢失后的我们可以记录日志的功能。

鸨哥学JAVA·2025-01-21 20:30

2024年CSDN年度回顾：个人成长、创作历程与生活的融合与平衡

这一年，我在CSDN平台上度过了169天，创作了264篇原创文章，收获了9976位粉丝的喜爱与支持。回顾这一年，不仅是我在技术领域的成长与突破，更是我个人生活与博客事业深度融合的一年。

IT枫斗者·2025-01-21 19:29

Java高频面试之SE-11

hello啊，各位观众姥爷们！！！本牛马baby今天又来了！哈哈哈哈哈嗝Java中是引用传递还是值传递？在Java中，方法参数传递是通过值传递的方式实现的，但这可能会引起一些误解，尤其是在处理引用类型（对象）时。为了更好地理解这一点，让我们详细探讨一下：1.基本数据类型对于基本数据类型（如int、float、char等），Java采用值传递的方式。这意味着：当你将一个基本数据类型的变量作为参数传递

牛马baby·2025-01-21 19:58

java面试合集之SE

java中的自动包箱和拆箱是什么在Java中，“自动包箱”（Auto-boxing）和"自动拆箱"（Auto-unboxing）是与基本数据类型和其对应的包装类之间的转换相关的概念。让我们来详细解释一下这两个概念：自动包箱（Auto-boxing）自动包箱是Java编译器自动进行的操作，它将基本数据类型（如int、double等）自动转换为它们对应的包装类对象（如Integer、Double等）。

牛马baby·2025-01-21 19:28

上位机知识篇---ROS命令行命令

文章目录前言ROS命令行命令1.roscore（1）ROSMaster（2）ROSParameterServer2.rosnode（1）列出当前运行的节点（2）显示节点的详细信息（3）杀死一个节点3.rostopic（1）列出当前活跃的话题（2）显示话题的详细信息（3）发布消息到话题（4）订阅话题并打印消息（5）查看话题的消息类型（6）以Hz为单位查看话题的发布频率（7）记录话题数据到文件4.ro

Ronin-Lotus·2025-01-21 19:57

嵌入式硬件篇---ADC模拟-数字转换

文章目录前言第一部分：STM32ADC的主要特点1.分辨率2.多通道3.转换模式4.转换速度5.触发源6.数据对齐7.温度传感器和Vrefint通道第二部分：STM32ADC的工作流程：1.配置ADC2.启动ADC转换第三部分：ADC转化1.抽样2.量化3.编码第四部分：额外小知识总结前言以上就是今天要讲的内容，本文仅仅简单介绍了STM32中ADC模拟-数字转换的实现。第一部分：STM32ADC的

Ronin-Lotus·2025-01-21 19:27

100天精通Python（基础篇）——第19天：异常类型大全、异常处理介绍

目录1.异常的概念2.异常类型1）Python内置异常2）requests爬虫模块内置异常类3）自定义异常2.捕获异常1）简单的捕获异常语法2）错误类型捕获3）异常捕获完整语法3.异常的传递4.抛出raise异常1）应用场景2）抛出异常1.异常的概念程序在运行时，如果Python解释器遇到到一个错误，会停止程序的执行，并且提示一些错误信息，这就是异常程序停止执行并且提示错误信息这个动作，我们通常称

袁袁袁袁满·2025-01-21 19:54

Python私房菜——筑基篇（已完结）

1Python私房菜【一】——（前置基础）大白可直接跳转到：Python私房菜——高级篇1.1编码就是把人类语言（文字）通过编码的形式一一映射成计算机认识的语言（二进制：0101…），即将人类语言通过某种形式转换成计算机认识的二进制数

陪我一起学编程·2025-01-21 19:22

探秘IO分布式模块设计：让大数据处理更高效

一、引言随着互联网的飞速发展，大数据、云计算、人工智能等技术逐渐成为时代的主流。在这个数据爆炸的时代，如何高效地处理海量数据成为企业面临的重大挑战。

清水湾落车·2025-01-21 19:21

大带宽业务都包含哪些内容？

大带宽业务包括大规模数据传输、云计算和远程存储等内容，大规模数据传输是涉及到大文件的传输或者是大数据集的传输。同时在云计算中会涉及到云服务器和虚拟化环境的应用，需要有着

wanhengidc·2025-01-21 19:20

C++ 线程安全之互斥锁

目录线程安全1.原子性2.可见性3.顺序性互斥锁1.mutex类2.timed_mutex类3.recursive_mutex类4.lock_guard类线程安全线程安全是多线程编程是的计算机程序代码中的一个概念。在拥有共享数据的多条线程并行执行的程序中，线程安全的代码会通过同步机制保证各个线程都可以正常且准确的执行，不会出现数据污染等意外情况。上述是百度百科给出的一个概念解释。换言之，线程安全就

__雨夜星辰__·2025-01-21 18:49

Jmeter进阶篇（33）报错Error occurred during initialization of VM Could not reserve enough space…的解决方案

报错现象在使用Jmeter进行性能测试等操作时，可能会遇到各种各样的问题，其中一个比较常见的报错是在启动Jmeter的时候出现：ErroroccurredduringinitializationofVMCouldnotreserveenoughspacefor1048576KBobjectheaperrorlevel=1请按任意键继续...这个报错可能会让不少新手感到困惑，甚至会影响到性能测试工作

綦枫Maple·2025-01-21 18:17

高频量化交之李庆：在华尔街狼共舞的岁

转“高频量化交易之王”李庆：在华尔街与狼共舞的岁月在华尔街打拼16年，成为最顶尖的量化投资基金经理，李庆并没有忘记初心，依然几十年如一日的努力、勤奋。他相信一个人无论做什么，要成功只有一句话，“非常踏实，严谨地去做这件事情”，“只要是努力工作，努力去研究，努力去严谨地做一件事情，最后成功的可能性才会很大。”李庆有自己的独门秘籍。他原本应该是数学家，最终却在16年间成为华尔街的顶级资本玩家。他和很多

顺其自然�非之歌�·2025-01-21 18:46

Android 内核开发之—— repo 使用教程

前言repo是一个用于管理多个Git仓库的工具，特别适用于管理大型项目如Android的源码。它是由Google开发的，用于解决多个Git仓库的同步、管理和代码审查等问题。因此，做Android内核开发，首先要了解repo是什么，它是如何使用的？1repo的概念repo是一种代码版本管理工具，它是由一系列的Python脚本组成，封装了一系列的Git命令，用来统一管理多个Git仓库。2repo的作用

ByteSaid·2025-01-21 18:43

明达云：赋能化工园区，智绘安全高效新蓝图

明达云平台通过集成物联网、大数据、人工智能等先进技术，为

明达技术·2025-01-21 17:09

C语言程序设计基础（例题（请看注释）03

一，基础篇案例1—1《点到直线的距离》已知直线L的方程是Ax+By+C=0,点P的坐标是（x,y)，求点P到直线L的距离。

24白菜头·2025-01-21 17:38

vim系列-文本操作篇

Vim实用技巧：文本编辑与处理基数行与偶数行分组使用Vim的替换命令，可以轻松地将基数行和偶数行分组：%s/$^.*$$\n$^.*$$/\1\2/g然后，删除所有的基数行：%s/^.*$\n$^.*$$/\1/g删除重复行在Vim中删除重复行是一个常见的操作，以下是几种方法：删除相邻重复行:g/$.\+$$\n\1/d删除不相邻重复行使用排序命令删除不相邻的重复行：:sortu删

·2025-01-21 16:59

《重生到现代之从零开始的C++生活》—— 类和对象2

类的默认成员函数默认成员函数就是用户没有显示实现，编译器会自动生成的成员函数，一个类会默认生成6个成员函数构造函数构造函数时特殊的成员函数，构造函数的初始化对象函数名与类名相同没有返回值对象实例化的时候胡自动调用构造函数构造函数可以重载如果类中没有显式定义函数，会自动生成一个无参的默认构造函数classa{public:add(inta.intb){returna+b;}a(){_a=1;_b=1

yttandb·2025-01-21 16:34

JS工程化集锦

项目工具模块化JS模块规范CommonJS·AMD·CMD·UMD·ES6NPM版本NPM版本介绍打包构建polyfill工程化篇-JS兼容方案项目管理LintCodeReview效率工具ESLint方案官方

·2025-01-21 16:58

玩转至轻云大数据平台-docker部署篇

产品介绍至轻云是一款超轻量级、企业级大数据计算平台，基于Spark生态打造。一键部署，开箱即用。

fanciNate454·2025-01-21 16:34

第4篇：使用ChatterBot构建基本聊天机器人

在这一篇文章中，我们将实际构建一个简单的聊天机器人，展示如何使用ChatterBot库进行基本的对话交互。我们将集中讨论代码实现，并介绍一些有用的功能扩展。

Python测试之道·2025-01-21 16:01

5g网络架构_【5G网络架构】系列之五：5G核心网向to B演进

编者按：前面推文小编简要介绍了移动通信核心网的发展历程，以及变得“妈都不认识了”5G核心网。然而，toB业务才是5G的核心业务，本期我们看下5G核心网是如何向toB业务演进的。根据3GPP标准组织定义，5G网络的大脑——核心网发生了空前变化。首先，5G核心网原生支持控制面和用户面彻底分离，使得用户面UPF可灵活下沉，与边缘计算(MEC)一起分布式部署于更靠近用户和数据源的位置，从而可降低网络时延，

weixin_39980298·2025-01-21 16:00

Python数据分析与程序设计-番外：在vscode中使用Jupyter Notebook

前言在系列文章的第二篇中，我们介绍了使用“if__name__=="__main__":”来模拟c语言中的main函数+封装测试函数的方法来提高代码可读性。

想当糕手·2025-01-21 15:52

推荐频道

大数据篇之Clouder