云计算&分布式

大数据Hadoop集群运行程序

目录1运行自带的MapReduce程序2常见错误1运行自带的MapReduce程序下面我们在Hadoop集群上运行一个MapReduce程序，以帮助读者对分布式计算有个基本印象。
赵广陆·2025-03-08 08:37

网关边缘计算：让数据处理更贴近 一线

然而，传统云计算模式下，数据需长途跋涉至云端处理，这不仅带来了延迟问题，更在带宽成本、隐私安全等方面遭遇瓶颈。
北京天拓四方·2025-03-08 08:33

云原生边缘计算：重塑分布式智能的时空边界

引言：算力向数据源头迁移的革命特斯拉自动驾驶系统每小时产生20TB边缘数据，时延要求低于50ms。中国移动5G边缘云实现ARPU值提升38%，华为云IEF平台将工业质检响应速度提升至15ms以内。ABIResearch预测2026年边缘AI芯片市场规模达520亿美元，KubeEdge管理边缘节点数突破千万级，单节点资源开销仅为K8s的1/8。一、边缘计算架构范式演进1.1技术架构对比矩阵特征维度中
桂月二二·2025-03-08 08:33

ShardingSphere 和 Spring 的动态数据源切换机制的对比以及原理

ShardingSphere与Spring动态数据源切换机制的对比及原理一、核心定位对比维度ShardingSphereSpring动态数据源（如AbstractRoutingDataSource）定位分布式数据库中间件轻量级多数据源路由工具核心目标分库分表
龙大.·2025-03-08 07:28

Ceph实战（一）-分布式存储介绍与原理架构概述

CEPH还有一个重要原因就是我同时要补充kubernetes、rancher专栏必定会涉及到有状态的存储资源抽象（StatefulSet、PV、PVC、StorageClass等），首先绕不开的就是高可用的分布式存储系统
深度视觉机器·2025-03-08 07:57

云计算与边缘计算大白话(●一●)

目录一、云计算和云原生概念1.1云计算1.2云原生二、云计算四个层次2.1IaaS(InfrastructureasaService)2.2PaaS(PlatformasaService)2.3SaaS
Jodie大白话·2025-03-08 06:57

selenium grid分布式

seleniumgrid环境在很多实体电脑上可以实现，如果我们没有那么多电脑，就需要利用docker来完成seleniumgrid环境搭建一、环境搭建创建一个docker网络dockernetworkcreategrid完成中心的搭建拉取镜像dockerpullselenium/hub:4.10启动镜像dockerrun-d-p4442-4444:4442-4444--networkgrid--n
进阶的DW·2025-03-08 06:22

老榕树的Java专题：XA的二阶提交

例如，在一个包含数据库A和数据库B的分布式事务中，TC会分别向管理数据库A和数据库B的RM发送准备消息。RM接收到准备请求后，会执行本地事务操作，但并不提交。它会将事务执行过程中涉及的数据修改记录
程序员_老榕树·2025-03-08 05:03

PingCAP 连续两年入选 Gartner 云数据库管理系统魔力象限“荣誉提及”

市场研究和咨询公司Gartner®发布最新报告《MagicQuadrant™forCloudDatabaseManagementSystems》（云数据库管理系统魔力象限），PingCAP因其企业级开源分布式数据库
TiDB_PingCAP·2025-03-08 04:25

海量数据融合互通丨TiDB 在安徽省住房公积金监管服务平台的应用实践

为了应对海量数据处理需求，安徽省选择TiDB作为底层数据库，利用其分布式架构和HTAP能力，实现了快速的数据分析与治理。
TiDB_PingCAP·2025-03-08 04:23

Redis 持久化配置：保障数据安全与可恢复性

Redis持久化配置：保障数据安全与可恢复性引言在现代的应用开发中，Redis作为一款高性能的内存数据库，被广泛应用于缓存、消息队列、分布式锁等场景。
艾斯比的日常·2025-03-08 04:22

K8S常见的面试题

答：和大多数分布式系统一样，K8S集群至少需要一个主节点（Master）和多个计算
水月清辉·2025-03-08 04:21

Kafka

1.概述ApacheKafka是一个分布式流处理平台，由LinkedIn开发并开源，具有高吞吐、低延迟、可水平扩展等特性。它广泛应用于实时数据管道、日志聚合、事件溯源、消息队列等场景。
茶本无香·2025-03-08 04:19

开源游戏服务器框架NFShmServer 简介(一)

NFShmServer是一个使用C++开发的轻量级,敏捷型,弹性的,分布式的共享内存（C++热更）/多进程lua(lua热更)的插件开发框架,让你更快更简单的开发服务端应用.部分思路来自UE4和Ogre
gaoyi445·2025-03-08 04:48

全方位解读消息队列：原理、优势、实例与实践要点

全方位解读消息队列：原理、优势、实例与实践要点一、消息队列基础认知在数字化转型浪潮下，分布式系统架构愈发复杂，消息队列成为其中关键一环。
恩爸编程·2025-03-08 04:46

hadoop框架与核心组件刨析（三）YARN

负载均衡广泛应用于计算机网络、分布式系统、云计算等领域。负载均衡的核心目标提高性能：通过将负载分配到多个资源，避免单个资源成为瓶颈，从而提高系统的整体性能。提高可用性：如
小刘爱喇石( ˝ᗢ̈˝ )·2025-03-08 04:46

Kafka 消息不丢失：全方位保障策略

Kafka消息不丢失：全方位保障策略引言在现代分布式系统中，Kafka作为一款高性能、高可扩展性的消息队列，被广泛应用于数据传输、日志收集、实时流处理等场景。
艾斯比的日常·2025-03-08 03:46

智能算法安全优化与关键技术实践

在医疗影像分析、金融风控、自动驾驶等场景中，联邦学习的分布式协作机制有效解决了数据孤岛问题，而生成对抗网络通过对抗训练增强数据生成能力，为小样本场景提供技术支撑。
智能计算研究中心·2025-03-08 03:02

算力网驱动数字经济多场景融合创新

其核心架构整合了异构计算、分布式存储和智能调度系统，形成覆盖云端、边缘端及终端的协同网络。
智能计算研究中心·2025-03-08 03:01

体育数据分析：竞技表现优化与商业价值挖掘的技术范式

一、数据采集与处理技术架构现代体育数据采集系统采用分布式架构，集成了计算机视觉、惯性测量单元(IMU)和生物电传感器等多模态数据源。计算机视觉系统通过高速摄像机和深度学习算法，可实现运动
Tina0898·2025-03-08 02:21

k8s service type_RabbitMQ(k8s)-随手笔记

介绍基于Erlang开发消息队列(AMQP)在分布式系统中,有一些功能我们希望能够提高系统稳定性,比如说支付、订单功能,服务后移,长时间操作的功能,同步数据我们通过监听数据变化实现功能联动特点分布式各节点互相冗余元数据
weixin_39873325·2025-03-08 02:42

什么是云计算平台？如何打造云平台核心要件？

云计算平台，依托云计算技术而构建的计算服务平台，其核心价值彰显在为用户提供一种极具灵活性、易于扩展且能广泛共享的计算资源与系统服务框架。
·2025-03-08 01:42

什么是TiDB，什么是分布式数据库？它和 MySQL 比优缺点是什么？

TiDB简介与分布式数据库概念一、什么是分布式数据库？分布式数据库是一种将数据分散存储在多个物理节点上的数据库系统，通过分布式架构实现水平扩展、高可用性和容错能力。
蒂法就是我·2025-03-08 01:31

分分钟搞定分布式技术专题面试——Nginx+ZK+ActiveMQ+Kafka+RabbitMQ+MongoDB+Redis！

前些日子听很多朋友说面试跪在分布式，所以今天特地来总结一波分布式技术专题面试，限流、通讯、缓存：01分布式限流：Nginx+ZooKeeper1.1分布式限流之Nginx请解释一下什么是Nginx?
独孤球球·2025-03-07 23:43

分布式中间件：Redis介绍

目录Redis概述Redis的特点高性能丰富的数据结构持久化分布式特性简单易用Redis的数据结构字符串（String）哈希（Hash）列表（List）集合（Set）有序集合（SortedSet）Redis
顾北辰20·2025-03-07 23:13

kafka 在Linux上的安装部署

一、前言Kafka是一个分布式流处理平台，在大数据领域有着广泛的应用。在Linux系统上安装部署Kafka可以为我们搭建高效的数据处理环境。本教程将详细介绍在Linux中安装和部署Kafka的步骤。
The博宇·2025-03-07 22:35

ECS与VPS技术角力：从算力成本到免备案雷区，企业服务器选型合规指南

ECS（云服务器），它是一种简单高效、处理能力可弹性伸缩的计算服务基于云计算技术，通过将计算、存储、网络等资源整合在云端，为用户提供灵活的资源分配。采用分
·2025-03-07 21:33

网络安全防御矩阵：从云防火墙流量清洗到WAF语义分析的立体化防护

云防火墙定义云防火墙依托云计算技术而生，它并非传统意义上孤立存在于本地的防火墙设备，而是基于云计算平台构建的。
·2025-03-07 21:32

迁移也有温度，隆重推荐：温迁移

以前，Akamai云计算平台上有两种类型的迁移：
·2025-03-07 21:00

什么是云互联网

云互联网并非一个孤立的全新概念，它融合了云计算与互联网的特性，以一种创新的架构模式为用户提供服务。
·2025-03-07 21:58

为什么云服务器需要高防 IP？

随着互联网的快速发展，网络攻击事件日益频繁，其中分布式拒绝服务攻击（DDoS）已成为最常见的威胁手段之一。DDoS攻击通过向目标服务器发送海量无效请求，导致正常服务无法响应，最终迫使业务中断。
·2025-03-07 21:27

云数据库是什么数据库？

云数据库，简单来说，是一种部署在云计算环境中的数据库服务。
·2025-03-07 21:56

容器云服务是什么？

容器云是一种以容器技术为核心的云计算服务形态，其核心目标是通过标准化封装应用及其依赖环境，实现跨平台快速部署和高效管理。
·2025-03-07 21:56

Git与GitHub：它们是什么，有什么区别与联系？

Git是一个开源的、分布式版本控制系统（VersionControlSystem,VCS），由LinusTorvalds于2005年开发，最初用于管理Linux内核的开发。
名之以父·2025-03-07 20:41

分布式锁—Redisson的读写锁

1.Redisson读写锁RedissonReadWriteLock概述(1)RedissonReadWriteLock的简介RedissonReadWriteLock提供了两个方法分别获取读锁和写锁。RedissonReadWriteLock的readLock()方法可以获取读锁RedissonReadLock。RedissonReadWriteLock的writeLock()方法可以获取写锁R
液态不合群·2025-03-07 19:36

【硬核拆解】DeepSeek开源周五连击：中国AI底层技术的“破壁之战”

从GPU计算内核到分布式训练框架，用五大开源项目，在硬件适配、算力优化、通信调度等“卡脖子”领域打
shelly聊AI·2025-03-07 18:50

Java 大视界 -- 基于 Java 的大数据分布式任务调度系统设计与实现（117）

亲爱的朋友们，热烈欢迎来到青云交的博客！能与诸位在此相逢，我倍感荣幸。在这飞速更迭的时代，我们都渴望一方心灵净土，而我的博客正是这样温暖的所在。这里为你呈上趣味与实用兼具的知识，也期待你毫无保留地分享独特见解，愿我们于此携手成长，共赴新程！一、欢迎加入【福利社群】点击快速加入：青云交灵犀技韵交响盛汇福利社群点击快速加入2：2024CSDN博客之星创作交流营（NEW)二、本博客的精华专栏：大数据新视
青云交·2025-03-07 17:46

弹性算力革命：企业级GPU云服务如何重构AI与图形处理的效能边界

企业级GPU云服务是一种面向企业用户，基于云计算技术，将强大的图形处理器（GPU）资源以服务的形式提供给企业的创新模式。
·2025-03-07 17:21

弹性算力革命：企业级GPU云服务如何重构AI与图形处理的效能边界

企业级GPU云服务是一种面向企业用户，基于云计算技术，将强大的图形处理器（GPU）资源以服务的形式提供给企业的创新模式。
·2025-03-07 17:21

工业级Pandas性能优化：Dask/Modin实战教程

目录工业级Pandas性能优化：Dask/Modin实战教程1.引言与背景1.1Pandas的局限性1.2分布式计算与GPU加速的需求1.3Dask与Modin简介2.数据集介绍3.工业级数据处理理论基础
闲人编程·2025-03-07 17:06

9种 分布式ID生成方案，让你一次学个够

一、为什么要用分布式ID？在说分布式ID的具体实现之前，我们来简单分析一下为什么用分布式ID？分布式ID应该满足哪些特征？1、什么是分布式ID？
我有一头小花驴·2025-03-07 16:23

C、C++ 与 C# 的区别及应用场景

IT行业的现状和发展趋势在当今的IT行业中，云计算、大数据、人工智能（AI）以及物联网（IoT）等技术正在引领新一轮的技术革新。这些技术
xl.liu·2025-03-07 16:23

解析Python网络爬虫：核心技术、Scrapy框架、分布式爬虫（期末重点题目）

第一章网络爬虫又称网页蜘蛛或（网络机器人）网络爬虫能够按照一定的（规则），自动请求万维网站并提取网络数据爬虫是手动请求万维网网站且提取网页数据的程序。（×）爬虫爬取的是网站后台的数据。（×）通用爬虫用于将互联网上的网页下载到本地，形成一个互联网内容的镜像备份。（√）简答题：简述通用爬虫和聚焦爬虫。1.通用爬虫又称全网爬虫，主要用于将互联网上的网页下载到本地，形成一个互联网内容的镜像备份。聚焦网络爬
一口酪·2025-03-07 15:21

常见分布式ID解决方案（数据库、算法、开源组件）

分布式ID分布式ID（DistributedID）是指在分布式系统中生成全局唯一的标识符，用于标识不同实体或数据对象。
Java爱好狂.·2025-03-07 15:50

Leaf-美团分布式ID生成服务

Leaf:美团分布式ID生成服务Therearenotwoidenticalleavesintheworld.（世界上没有两片相同的树叶。）
Ujay0731·2025-03-07 15:20

调用链追踪（Trace ID）

前言：在Java中实现调用链追踪（TraceID）通常用于分布式系统中跟踪请求的完整链路，常见的实现方式包括手动编码或使用开源框架（如SkyWalking、Zipkin、SpringCloudSleuth
18你磊哥·2025-03-07 15:48

常见分布式ID生成方案

常见分布式ID生成方案文章目录一、为什么要用分布式ID1、什么是分布式ID2、那么分布式ID需要满足哪些条件二、分布式ID有哪些生成方式1、基于UUID2、基于数据库自增ID3、基于数据库集群模式4、基于数据库的号段模式
amo的代码园_毕设·2025-03-07 15:16

请说一下你对分布式和微服务的理解

分布式系统定义：分布式系统由多个独立计算机（节点）组成，这些节点通过网络通信协作完成任务，对外表现为一个整体。特点：分布性：节点分布在不同的物理位置。并发性：多个节点可以同时执行任务。
LiuYuHani·2025-03-07 15:56

深入探索 Dubbo：高效的 Java RPC 框架

深入探索Dubbo：高效的JavaRPC框架随着微服务架构的流行，分布式系统中的服务间通信变得愈加复杂。
Kale又菜又爱玩·2025-03-07 15:56

到底什么是工业操作系统？（3）定义

工业操作系统，全称：分布式工业控制操作系统1、运行在单个或多个边缘计算机上的为工业控制服务的操作系统。2、实现对边缘计算机的硬件、内存、CPU、文件系统的管理和调度。
Wnq10072·2025-03-07 14:22
上一页 1 2 3 4 5 6 7 8 下一页
按字母分类： ABCDEFGHIJKLMNOPQRSTUVWXYZ其他