IT->分布式计算

阿里云 ACK One 多集群管理全面升级：多集群服务、多集群监控、两地三中心应用容灾

作者：宇汇ACKOne概述ACKOne是阿里云面向混合云、多集群、分布式计算等场景推出的分布式云容器平台，能够统一管理阿里云上、边缘、部署在客户数据中心以及其他云上的Kubernetes集群，并简化集群管理界面
·2022-08-25 12:18

01_大数据导论与Linux基础

贯穿分布式存储技术（HadoopHDFS）分布式计算技术（HadoopMapReduce）、分布式资源调度技术（HadoopYARN）以及数据仓库技术（Hive）。
饮马翰海·2022-08-24 18:36

重新定义分析 - EventBridge 实时事件分析平台发布

对于日志分析大家可能并不陌生，在分布式计算、大数据处理和Spark等开源分析框架的支持下，每天可以对潜在的数百万日志进行分析。
m0_68459853·2022-08-21 14:25

大数据平台最常用的30款开源工具

大数据平台处理的数据量通常是TB级，甚至是PB或EB级的数据，这是传统数据仓库工具无法处理完成的，其涉及的技术有分布式计算、高并发处理、高可用处理、集群、实时性计算等，汇集了当前IT领域热门流行的各类技术
饮水思源09·2022-08-21 12:09

高性能自动化协同设计平台在工业制造业中的应用

整合和管理如此复杂的分布式计算面临着诸多挑战。大多数的端到端的分析或业务流程涉及多个时序要求严格的步骤和工具：工程分析财务报告设备验证数字呈现商业智能随着高性
周建丁·2022-08-13 17:33

快手一面：讲一讲 Hadoop、Hive、Spark 之间的关系？

由两部分组成，分布式存储（HDFS）和分布式计算（MapReduce）HDFS
Park33448·2022-08-13 12:22

大数据开发，Hadoop Spark太重？你试试esProc SPL

很多用户开始转向分布式计算路线，用多台廉价的PC服务器组成集群来完成大数据计算任务。Hadoop/Sp
华为云开发者联盟·2022-08-04 15:46

分布式计算实验5：HDFS论文阅读

一、块存储系统、对象存储系统、文件存储系统的区别1.存储设备不同对象存储对应的存储设备为swift、s3等内置大容量硬盘的分布式服务器；文件存储的对应存储设备为FTP、NFS服务器；块存储的对应存储设备为cinder、硬盘、磁盘阵列。2.体现形式不同比较常见的块存储形式是Windows系统硬盘或手机存储空间，数据是按字节来存储和访问的。文件存储一般体现形式是目录和文件（比如C：\User\Prog
Polaris_T·2022-08-04 15:40

ROS从入门到精通(十一) 项目实战：智能跟随机器人原理与代码实现

详情：《ROS从入门到精通》1智能跟随机器人的应用机器人是传感器网络、通信、人工智能、分布式计算、自动化等多种技术的集大成者，机器人技术的发展水平标志着一个国家工业
Mr.Winter`·2022-08-04 07:29

5.1　拜占庭容错技术

拜占庭容错技术（ByzantineFaultTolerance，BFT）是一类分布式计算领域的容错技术。
xiaohuanglv·2022-08-03 19:03

分布式系列分布式计算框架Hadoop核心组件概述

Hadoop作为成熟的分布式计算框架在大数据生态领域已经使用多年，本文简要介绍Hadoop的核心组件MapReduce、YARN和HDFS，以加深了解。
solihawk·2022-08-02 09:32

C++遍历map方法

=m2.end();it++){strings=it->first;printf("%s%d",s.data(),it->second);}c++11以后for(autoit:map1){cout<
m0_67393413·2022-07-29 18:26

SOA和微服务的区别

SOA，ESB，微服务的区别和关系1、SOA是一种理念，它的主要特性–面向服务的分布式计算，服务间松散耦合，支持服务的封装，服务注册和自动发现，以服务契约方式定义服务交互方式。
Mrs_DongDong·2022-07-28 19:55

云计算和大数据区别和联系

1.概述云计算和大数据最重要的都是分布式存储和分布式计算，但二者有所区别。
小胡今天有变强吗·2022-07-28 07:39

分布式系统架构理论与组件

分布式计算将任务分解成更小的部分，分配给多台计算机处理，这样可以节约整体计算时间，大大提高计算效率。互联网大型网站往往面临高并发访问、海量数据处理等问题，必须保证系统高可用、易伸缩等等。
编码砖家·2022-07-27 11:00

大数据(3)：HDFS

一、什么是HDFSHDFS（HadoopDistributedFileSystem）是Hadoop项目的核心子项目，是分布式计算中数据存储管理的基础，是基于流数据模式访问和处理超大文件的需求而开发的，可以运行于商用服务器上
小道萧兮·2022-07-24 10:50

linux 解压分片zip,Hadoop Lzo 源码分析之分片/切片原理

lzo压缩已经广泛用于Hadoop中,至于为什么要在Hadoop中使用Lzo.这里不再重述.其中很重要的一点就是由于分布式计算,所以需要支持对压缩数据进行分片,也就是Hadoop的InputSplit,
大力.MAX001·2022-07-21 07:27

Hadoop Lzo 源码分析之分片/切片原理

首先说明你一点Lzo本身是不具备压缩分割的功能的；lzo压缩已经广泛用于Hadoop中,至于为什么要在Hadoop中使用Lzo.这里不再重述.其中很重要的一点就是由于分布式计算,所以需要支持对压缩数据进行分片
蓝之刃·2022-07-21 07:55

Hadoop生态系统全面介绍

Hadoop作为大数据的分布式计算框架，发展到今天已经建立起了很完善的生态，本文将一一介绍基于Hadoop生态的一系列框架和组件。
五只鸭子·2022-07-18 13:42

Hadoop生态圈介绍

hadoop生态：1、hadoop的核心组件：（hdfs）分布式存储、（mapReduce）分布式计算、（Yarn）资源调度与任务管理、Common2、Lucene：索引检索工具包3、Nutch：开源的搜索引擎
月疯·2022-07-18 13:07

如何优雅的升级 Flink Job？

Flink作为有状态计算的流批一体分布式计算引擎，会在运行过程中保存很多的「状态」数据，并依赖这些数据完成任务的Failover以及任务的重启恢复。
Single_Yam·2022-07-17 17:00

Spark总结（SparkCore,SparkSQL,SparkStreaming）

SparkCore1.一句话介绍Hadoop和Sparkspark是基于内存的分布式计算框架。
ambitfly·2022-07-16 15:58

Spark3.x入门到精通-阶段一(入门&yarn集群&java和scale双语开发)

相对于MapReduce的批处理计算，Spark可以带来上百倍的性能提升，因此它成为继MapReduce之后，最为广泛使用的分布式计算框架。
顶尖高手养成计划·2022-07-16 15:56

TDSQL PG版再升级，深度参与开源生态建设

7月14日，腾讯云数据库TDSQLPG版的开源版本（开源代号TBase）迎来又一次重大升级：升级后的TDSQLPGV2.4.0版在2PC事务方面得到优化，易用性大幅提升，具备更强的分布式计算性能。
·2022-07-15 10:24

Hadoop核心HDFS——HDFS概念及优缺点

Hadoop：Hadoop是一个开源的大数据框架Hadoop是一个分布式计算的解决方案Hadoop=HDFS(分布式文件系统)+MapReduce(分布式计算)Hadoop核心HDFS分布式文件系统：存储是大数据技术的基础
南瓜数据客栈·2022-07-14 15:14

分布式计算的八大谬论

在20世纪90年代SunMicrosystems的PeterDeutsch，JamesGosling和其他人总结出了分布式计算的八个谬论。
夜雨风云·2022-07-04 08:39

负载均衡一致性哈希算法实现 | nginx 负载均衡一致性哈希源码分析 | ngx_http_upstream_consistent_hash_module 源码分析

这是本学期分布式计算/系统课程负载均衡节的课后作业，理解七层反向代理的负载均衡Nginx中使用的的一致性哈希算法。
RzBu11d023r·2022-06-30 07:31

【MindSpore易点通】分布式并行经验总结

1简单介绍现如今数据的存储越来越多，想要提高算力的话，其实我们可以提高分布式计算。
·2022-06-28 16:54

22 | 想成为架构师，你必须知道CAP理论

2002年，麻省理工学院的赛斯·吉尔伯特（SethGilbert）和南希·林奇（NancyLynch）发表了布鲁尔猜想的证明，使之成为分布式计算领域公认的一个定理。对于设计分布式系统的架构师来说
d_quan·2022-06-24 09:35

tomcat + nginx 的 负载均衡和动静分离集群

应用程序可以通过网络共享内存进行消息传送，实现分布式计算机。通俗一点来说，就是让若干台计算机联合起来工作(服务)，可以是并行的，也可以是做备份。
Steve lu·2022-06-21 22:40

hadoop入门简介

概述：Hadoop是一个适合海量数据的分布式存储和分布式计算的平台。背景：作者DougCutting受Google三篇论文的启发，开发了hadoop。
北慕辰·2022-06-20 12:31

【Hadoop】Hadoop组件 -之 HDFS组件

一、概述Hadoop作为分布式存储，分布式计算的大数据生态系统，涵盖了从数据源到数据采集，数据存储，数据计算，数据分析，数据应用的各个场景，学习大数据的架构，了解各个组件对地工作原理和运行机制非常关键。
Echo_Jiang220417·2022-06-20 12:57

7张图揭晓RocketMQ存储设计的精髓

其中的秘诀就是消息队列RocketMQ版，它能实现分布式计算场景中所有异步解耦功能，像一个万能变压器，不论输入电压多高，输出电压都很平稳。
hzbooks·2022-06-13 19:06

Python数据集库Vaex秒开100GB加数据

第二种使用分布式计算：虽然在某些情况下这是一种有效的方法，但是它带来了管理和维护集群的巨大开销。想象一下，必须为一个刚好超出RAM范围的数据集设置一个集群
·2022-06-13 16:11

Python使用RPC例子

目录主要内容远程过程调用RPC常用与分布式计算，对应Python库名为rpyc；上段为rpyc服务端，下段为rpyc调用端；主要内容所谓RPC，是远程过程调用（RemoteProcedureCall）的简写
·2022-06-12 15:18

hadoop本地模式部署_简述Hadoop各种部署方式及学习路线

HDFS为海量数据的持久化存储提供了一个分布式环境，MapReduce则是在HDFS的基础之上对海量数据进行计算；需要特别声明的是：MapReduce既是一个计算框架，也是一种编程思想，这种框架为海量数据分布式计算提供了可能性
weixin_39898248·2022-06-07 09:48

大数据学习线路_大数据学习路线指南（最全知识点总结）

大数据是对海量数据进行存储、计算、统计、分析处理的一系列处理手段，处理的数据量通常是TB级，甚至是PB或EB级的数据，这是传统数据处理手段所无法完成的，其涉及的技术有分布式计算、高并发处理、高可用处理、
Cosmic Cycler·2022-06-05 15:51

2020大数据学习路线指南（最全知识点总结）

大数据是对海量数据进行存储、计算、统计、分析处理的一系列处理手段，处理的数据量通常是TB级，甚至是PB或EB级的数据，这是传统数据处理手段所无法完成的，其涉及的技术有分布式计算、高并发处理、高可用处理、
juan333·2022-06-05 15:19

图书管理系统

逻辑模型设计及优化6、课程设计心得体会参考文献1、开发背景90年代中期，由于Internet的迅速普及，使Intranet成为Internet技术在企业管理信息系统中的应用和延伸，形成了集计算机，计算机网络、数据库、分布式计算等于一体的信息技术综合体
软件源码·2022-06-01 14:22

码农的自我修养 - 关于ARM你需要知道的

据ARM公司的工程师说，第九代Arm处理器架构可以在这十年的剩余时间里支持所有的分布式计算。Arm的崛起是否意味着我们所知道的中央处理器的终结？
夜流冰·2022-05-31 09:53

不了解云计算、云原生？简介、背景、发展、特点、技术、场景、影响、总结等等，应有尽有。。。。。

百度百科定义：云计算（cloudcomputing）是分布式计算的一种，指的是通过网络“云”将巨大的数据计算处理程序分解成无数
以吾性命胜天半子·2022-05-30 07:55

2021-12-29大数据学习日志——Hadoop离线阶段——大数据导论、Apache Zookeeper

分布式计算大数据5V特征大数据应用分布式、集群（2）ApacheZookeeper（重要）zk概念介绍分布式协调服务软件zk是分布式小文件存储系统zk特性：全局数据一致性zk角色主从架构zk集群
成长的小狮子·2022-05-28 03:56

云原生和云计算的区别，普通人都能看懂！

百度解释：云计算是分布式计算的一种，指的是通过网络“云”将巨大的数据计算处理程序分解成无数个小程序，然后，通过多部服务器组成的系统进行处理和分析这些小程序得到结果并返回给用户。
Methodot·2022-05-24 02:25

手把手教你实现基于eTS的分布式计算器

本期我们将带来“分布式计算器”的开发，帮助大家了解声明式开发范式的UI描述、组件化机制、UI状态管理、渲染控制语法等核心机制和功能。
HarmonyOS开发者社区·2022-05-23 18:00

手把手教你实现基于eTS的分布式计算器

本期我们将带来“分布式计算器”的开发，帮助大家了解声明式开发范式的UI描述、组件化机制、UI状态管理、渲染控制语法等核心机制和功能。下面我们直接进入正题。
·2022-05-23 17:47

【历史上的今天】5 月 19 日：Java 之父诞生；中国首家互联网公司成立；CP/M 操作系统发明者出生

今天是2022年5月19日，在1999年的今天，分布式计算项目SETI@home正式向公众发布。SETI@home是一个通过网际网路利用个人电脑处理天文数据的分布式计算项目。
历史上的今天·2022-05-19 13:29

Dubbo学习记录(一)----分布式服务框架Dubbo以及编写入门实例

Dubbo来自官网介绍中文：ApacheDubbo是一款高性能、轻量级的开源服务框架；英文：ApacheDubbo是一款高性能、基于Java的开源RPC框架那么就得说一下RPC:在分布式计算，远程过程调
～玄霄-·2022-05-18 07:25

云计算技术与应用 -基础概念与分布式计算

云计算技术与应用0.课程总览1.云计算的定义1.1计算模式的演进1.1.1集中计算1.1.2效用计算1.1.3客户机/服务器模式1.1.4集群计算1.1.5服务计算1.1.6个人计算机与桌面计算1.1.7分布式计算
ZuckD·2022-05-11 17:25

云会议的优势

把这项分布式计算应用在传统的会议形式上，就可以得到一种高效、便捷、低成本的会议形式——云会议。云会议是云计算和视频会议的完美融合，提供了非常便捷的远程会议体验。
·2022-05-10 09:05

利用Python 实现分布式计算

目录前言什么是Ray安装Ray使用Ray使用Ray集群1.下载ubuntu镜像2.启动ubuntu容器，安装依赖3.启动head节点和worker节点4、执行任务总结前言面对计算密集型的任务，除了多进程，就是分布式计算
·2022-05-07 09:04
上一页 25 26 27 28 29 30 31 32 下一页
按字母分类： ABCDEFGHIJKLMNOPQRSTUVWXYZ其他