IT->分布式计算

HBase 数据库介绍

Hadoop使用分布式文件系统，用于存储大数据，并使用MapReduce分布式计算来处理。Hadoop擅长于存储各种格式的庞大的数据，任意的格式甚至非
.道不虚行·2023-09-18 18:09

学习分布式第一天（分布式系统原理和概念）

目录分布式系统原理和概念1.分布式系统：单体架构：垂直架构：分布式架构：2.分布式计算：3.CAP原理：4.BASE理论：5.Paxos算法：6.Raft算法：分布式系统原理和概念1.分布式系统：学习分布式
AMIOKATT·2023-09-18 05:44

hadoop HDFS分布式计算概述，MapReduce概述，YARN概述

1、分布式计算概述1.1、什么是（数据）计算我们一直在提及：分布式计算，分布式暂且不论，“计算”到底是指什么呢？
新征程，再出发·2023-09-18 03:30

人工智能前景如何？人工智能所对应到企业中是什么样的岗位呢？

目录分布式计算在硕士阶段主要是在干什么呢，主要修的课程是些什么呢？分布式计算所对应到企业中是什么样的岗位呢？分布式计算前景如何？人工智能在硕士阶段主要是在干什么呢，主要修的课程是些什么呢？
盛溪的猫猫·2023-09-18 03:54

北京大学数据科学与大数据技术专业

北京大学数学科学学院数据科学与大数据技术专业一、专业简介数据科学是运用概率统计、分布式计算、现代软件等综合知识探索来自商业贸易，生物医疗，金融证券，社交网络等众多领域的较大规模或结构复杂数据集的高效存储
13351·2023-09-17 23:53

Apache Spark 的基本概念和在大数据分析中的应用

ApacheSpark是一个基于内存的分布式计算系统，可用于大规模数据处理、数据分析和机器学习。
指引拟态没·2023-09-17 10:42

介绍 Apache Spark 的基本概念和在大数据分析中的应用。

它是基于内存计算的分布式计算系统，并且支持包括Scala、Java、Python等多种编程语言。
wxchqaz·2023-09-17 10:12

Apache Spark

Spark支持分布式计算，可以处理大量数据，具有高速的计算和处理能力。
taoyiwei17_QFOI·2023-09-17 10:11

【分布式计算】六、命名机制 Naming

1.基本思想：用于标记分布式系统中的实体2.purename:1、不能代表全部，随机字符串2、仅用于比较3.identifier(ID)：一个ID对应一个实体、一个实体对应一个实体、ID永远对应同一实体4.无层次命名（FlatNaming）  a.非结构化名称（unstructuredpoint)  b.定位相关接入点（associateedaccesspoint)    1.广播（broadca
JaxHur·2023-09-17 09:54

Apache Spark 的基本概念和在大数据分析中的应用

ApacheSpark是一种流行的开源大数据分析框架，它是建立在强大的分布式计算引擎基础上的，可以处理大规模的数据，并提供高性能的数据处理能力。
IKUN家族·2023-09-17 09:08

什么是存储计算分离架构？

1.背景首先我们谈谈Hadoop的背景，说到Hadoop起源，就离不开Google的三辆马车：GoogleFileSystem、MapReduce和BigTable，分别说了分布式文件系统、分布式计算MR
中关村_周某·2023-09-16 12:12

操作系统学习笔记---计算机系统概述

目录概念功能和目标特征并发共享（资源共享）虚拟异步发展与分类手工操作阶段（无OS）批处理阶段单道批处理系统多道批处理系统分时操作系统实时操作系统网络操作系统分布式计算机系统个人计算机操作系统操作系统运行环境内核态和用户态特权和非特权指令状态切换中断中断机制的基本原理系统调用按功能分类过程操作系统体系结构分层法模块化宏内核
清风千里.·2023-09-16 12:04

Hadoop：YARN、MapReduce、Hive操作

分布式计算概述分散->汇总模式：（MapReduce就是这种模式）1.将数据分片，多台服务器各自负责一部分数据处理2.然后将各自的结果，进行汇总处理3.最终得到想要的计算结果中心调度->步骤执行模式：（
独憩·2023-09-16 06:29

ubuntu系统安装hadoop

Hadoop分布式计算平台，核心是分布式文件系统HDFSubantu下安装jdkwgethttps://repo.huaweicloud.com/openjdk/18.0.1.1/openjdk-18.0.1.1
shigen01·2023-09-16 02:30

《十小时入门大数据》学习笔记之初识Hadoop

Hadoop概述1.1Hadoop名字的由来1.2Hadoop介绍1.3Hadoop能做什么Hadoop核心组件2.1HDFS(分布式文件系统)2.2YARN(资源调度系统)2.3MapReduce(分布式计算框架
腊月的梅花·2023-09-15 08:36

zookeeper

先说Paxos，它是一个基于消息传递的一致性算法，LeslieLamport在1990年提出，近几年被广泛应用于分布式计算中，Google的Chubby，Apache的Zookeeper都是基于它的理论来实现的
凤舞飘伶·2023-09-15 05:49

每日一道面试题之什么是C/S架构？什么是B/S架构？

C/S架构（Client/Server架构）是一种分布式计算架构，其中客户端应用程序与服务器应用程序之间通过网络进行通信。在C/S架构中，客户端负责用户界面和交互，而服务器负责处理业务逻辑和数据存储。
从未止步..·2023-09-14 23:10

分布式系统中的死锁处理

1死锁发生的条件分布式计算机系统是一种具有多处理器并且各个处理器之间通过互连网络构建成一个具有整体功能的计算机系统。
辗转盘山·2023-09-14 23:04

分布式数据库系统中的死锁处理

在分布式计算系统中，有两个以上的进程在并发执行，每个进程都在等待被其它的进程所占用的系统资源而不能继续运行，即导致系统中任何一个进程都无法运行下去（死循环），这就产生了死锁。
未名湖畔种千玺·2023-09-14 23:33

分布式系统中的死锁处理 (Wound/Wait Mutexes reservation.c )

1死锁发生的条件分布式计算机系统是一种具有多处理器并且各个处理器之间通过互连网络构建成一个具有整体功能的计算机系统。
eydwyz·2023-09-14 23:02

HTML期末学生大作业-最新QQ音乐、网易云音乐、酷狗音乐、虾米音乐、咪咕音乐网站html+css+javascript

QQ音乐-部分网页截图-学生HTML+CSS+JS期末作业IT-精英联盟CSDN期末作业QQ音乐-部分源码截图-学生HTML+CSS+JS期末作业QQ音乐-千万正版音乐海量无损曲库新歌热歌天天畅听的高品质音乐平台
IT--精英联盟·2023-09-14 09:43

Java中的分布式计算框架有哪些?

Java中有许多流行的分布式计算框架。以下是其中一些：这只是Java中一些流行的分布式计算框架的简要介绍。根据具体需求和场景，还有其他框架可供选择。
玥沐春风·2023-09-13 23:54

CyberC 2019 征稿第11届网络分布式计算与知识发现国际会议

CyberC2019征稿第11届网络分布式计算与知识发现国际会议The11thInt.ConferenceonCyber-EnabledDistributedComputingandKnowledgeDiscoveryGuilin
清酒陌路人·2023-09-13 10:56

计算光刻软件市场报告：半导体和微电子行业对于光刻技术的需求不断增长，推动了计算光刻软件的发展

制造计算机芯片需要一个称为计算光刻的关键步骤，这是一种复杂的计算，涉及电磁物理、光化学、计算几何、迭代优化和分布式计算。
恒州博智QYResearch咨询·2023-09-12 15:47

推荐一款最新开源分布式任务调度框架

高可靠分布式无状态设计，采用Master/Worker架构，支持多样的数据库(H2/MySQL/PostgreSQL/Oracle/TiDB)高性能底层使用一致性分片算法，全程无锁化设计，任务调度精确到秒级别，支持轻量级分布式计算
·2023-09-12 10:01

Flink DataStream 体系

本专栏目录结构和参考文献请见大数据技术体系思维导图正文对Flink这种以流为核心的分布式计算引擎而言，数据流是核心数据抽象，表示一个持续产生的数据流，与ApacheBeam中的PCollection的概念类似
Shockang·2023-09-12 09:58

分布式计算中的数据倾斜

摘要数据倾斜是指在分布式计算中，由于数据负载不均匀或数据倾斜的特性，导致某些计算节点的负载过重，从而影响整个计算任务的性能和并行度。
卢延吉·2023-09-12 08:28

进程与线程

进程之间是相对独立的，一个进程无法访问另一个进程的数据（除非利用分布式计算方式），一个进程运行的失败也不会影响其他进程的运行，Windows系统就是利用进程把工作划分为多个独立的区域的。
Z_W_H_·2023-09-12 08:25

java学习方向

大话设计模式》代码编写优化《重构改善既有代码的设计》《effectivejava》Java深入虚拟机《深入理解Java虚拟机》并发《Java并发编程实战》造自己的轮子找到一个深入的方向成为这个领域的专家，比如分布式计算领域的专家
一路摇到顶·2023-09-12 00:55

【C++】map值自定义key，value排序（含ccfcsp第四次认证第二题演示和map遍历方法）

=res.end();it++)rest.push_back((pair(it->fir
亿维数组·2023-09-11 13:06

VLDB2023｜方略：一个交互式的规则研发系统

文｜梁仕威（花名：栖川）蚂蚁集团算法专家方略平台技术负责人，专注于分布式计算领域，主要负责蚂蚁基础算法的分布式设计与开发。
·2023-09-11 11:23

云计算与虚拟化

云计算（cloudcomputing）是分布式计算的一种，指的是通过网络“云”将巨大的数据计算处理程序分解成无数个小程序，然后，通过多部服务器组成的系统进行处理和分析这些小程序得到结果并返回给用户。
StarkDD1127·2023-09-10 23:37

mysql java uuid_Java生成UUID 与 MySQL数据库如何生成uuid数据

也是被开源软件基金会(OpenSoftwareFoundation,OSF)的组织应用在分布式计算环境(DistributedComputingEnvironment,DCE)领域的一部分。
weixin_39629947·2023-09-10 12:53

hive解决了什么问题

MapReduce难以使用：MapReduce是一种分布式计算框架，它可以用于处理大规模数据，但MapReduce的编程模型比较复杂，难以使用。
demo123567·2023-09-10 06:15

Hadoop概述

语言实现开源软件框架允许使用简单的编程模型跨计算机集群对大型数据集进行分布式处理Hadoop核心组件HadoopHDFS(分布式文件存储管理系统)：解决海量数据存储HadoopYARN(集群资源管理和任务调度框架)：解决资源任务调度HadoopMapReduce(分布式计算框架
藤藤菜丶·2023-09-09 05:15

介绍 Apache Spark 的基本概念和在大数据分析中的应用。

ApacheSpark是一种快速、可扩展的大数据处理框架，利用了内存计算技术，以及良好的并行化和分布式计算模型，Spark能够有效地处理大规模的数据。
kkkliaoo·2023-09-09 05:36

大数据技术之Hadoop：MapReduce与Yarn概述（六）

目录一、分布式计算二、分布式资源调度2.1什么是分布式资源调度2.2yarn的架构2.2.1核心架构2.2.2辅助架构前面我们提到了Hadoop的三大核心功能：分布式存储、分布式计算和资源调度，分别由Hadoop
何苏三月·2023-09-09 04:17

0301yarn&mapredude入门-hadoop-大数据学习

架构2.4辅助角色3MapReduce&YARN部署3.1集群规划3.2配置文件3.3分发配置文件4体验4.1集群启动命令介绍4.2提交MapReduce任务到YARN执行结语1MapReduce概述分布式计算是一种计算模型
gaog2zh·2023-09-08 12:16

操作系统 第一章：计算机系统概述

设备管理作为用户与计算机硬件系统之间的接口命令接口联机命令接口脱机命令接口程序接口（系统调用）作为计算机资源的扩充3.操作系统的特征①并发②共享③虚拟④异步4.操作系统的发展历程手工操作阶段单道批处理系统多道批处理系统（操作系统正式诞生）分时操作系统实时操作系统网络操作系统分布式计算机操
汤姆&Tom·2023-09-08 07:00

Java后端高频面试题集锦 1

Java语言是一种跨平台、适合于分布式计算机环境的面向对象编程语言。
少糖加水·2023-09-08 07:46

Netty简介及ByteBuf组件原理

Netty提供异步的、基于事件驱动的网络应用程序框架，用以快速开发高性能、高可靠性的网络IO程序，是目前最流行的NIO框架，Netty在互联网领域、大数据分布式计算领域、游戏行业、通信行业等获得了广泛的应用
数新网络·2023-09-08 04:05

Hadoop的第二个核心组件：MapReduce框架第一节

Hadoop的第二个核心组件：MapReduce框架第一节一、基本概念二、MapReduce的分布式计算核心思想三、MapReduce程序在运行过程中三个核心进程四、如何编写MapReduce计算程序：
Augenstern K·2023-09-07 04:42

RPC协议交互流程

文章目录RPC特性RPC实现RPC交互流程RPC交互时序图RPC交互流程RPC（RemoteProcedureCall，远程过程调用）是一种分布式计算的通信协议和编程模型，用于不同计算机或进程之间进行远程通信
嵌入式-小王·2023-09-07 02:27

hive中内部表、外部表、分区表、桶表、拉链表

hive查询的基本原理hive的设计思想是通过元数据解析描述将HDFS上的文件映射成表基本的查询原理是当用户通过hql语句对hive中的表进行复杂数据处理和计算时候，默认将其准换为分布式计算mapReduce
李大寶·2023-09-06 19:30

进程和线程

进程之间是相对独立的，一个进程无法访问另一个进程的数据（除非利用分布式计算方式），一个进程运行的失败也不会影响其他进程的运行，Window
kashjack·2023-09-06 15:46

大数据概念解析：分布式计算与服务器集群

今天我们来着重讲解大数据当中的两个重要概念，分布式计算以及服务器集群。大数据技术当中，分布式是非常核心的概念，从存储到计算到分析，大数据处理的整个流程当中，分布式不可或缺。
成都加米谷大数据·2023-09-06 14:25

hadoop-MapReduce

分布式计算模型MapReduce1.理解MapReduce设计思想2.理解MapReduce分布式计算的基本原理3.掌握使用Java进行MapReduce编程4.掌握在Hadoop集群中提交MapReduce
不吃香菜lw·2023-09-06 08:31

Hadoop安装教程

在大数据领域，hadoop是必须学习和掌握的一项技术，hadoop里面包含了三个最主要的组件：HDFS用于数据存储、YARN用于资源的管理、MapReduce用于分布式计算。
書香劍客·2023-09-06 01:54

Spark入门教程

1.简介ApacheSpark是一个开源的分布式计算框架，旨在提供快速、通用、易用的数据处理和分析技术。它可以在集群中处理大规模数据，支持多种数据处理模式，如批处理、交互式查询、流处理等。
zzy979·2023-09-05 07:08

Ignite分布式计算

callcall和funcation都是发送到分布式节点执行的代码。是实现了IgniteCallable接口的算子，被ignite.compute()发送到节点去执行。call和funcation可以同步或者异步执行，大多数情况下，我们会使用异步执行。this.compute.broadcast(()->System.out.println("HelloNode:"+ignite.cluster(
goxplanet·2023-09-05 05:18
上一页 9 10 11 12 13 14 15 16 下一页
按字母分类： ABCDEFGHIJKLMNOPQRSTUVWXYZ其他