分布式计算

Java中的分布式计算框架有哪些?

Java中有许多流行的分布式计算框架。以下是其中一些：这只是Java中一些流行的分布式计算框架的简要介绍。根据具体需求和场景，还有其他框架可供选择。
玥沐春风·2023-09-13 23:54

CyberC 2019 征稿第11届网络分布式计算与知识发现国际会议

CyberC2019征稿第11届网络分布式计算与知识发现国际会议The11thInt.ConferenceonCyber-EnabledDistributedComputingandKnowledgeDiscoveryGuilin
清酒陌路人·2023-09-13 10:56

计算光刻软件市场报告：半导体和微电子行业对于光刻技术的需求不断增长，推动了计算光刻软件的发展

制造计算机芯片需要一个称为计算光刻的关键步骤，这是一种复杂的计算，涉及电磁物理、光化学、计算几何、迭代优化和分布式计算。
恒州博智QYResearch咨询·2023-09-12 15:47

推荐一款最新开源分布式任务调度框架

高可靠分布式无状态设计，采用Master/Worker架构，支持多样的数据库(H2/MySQL/PostgreSQL/Oracle/TiDB)高性能底层使用一致性分片算法，全程无锁化设计，任务调度精确到秒级别，支持轻量级分布式计算
·2023-09-12 10:01

Flink DataStream 体系

本专栏目录结构和参考文献请见大数据技术体系思维导图正文对Flink这种以流为核心的分布式计算引擎而言，数据流是核心数据抽象，表示一个持续产生的数据流，与ApacheBeam中的PCollection的概念类似
Shockang·2023-09-12 09:58

分布式计算中的数据倾斜

摘要数据倾斜是指在分布式计算中，由于数据负载不均匀或数据倾斜的特性，导致某些计算节点的负载过重，从而影响整个计算任务的性能和并行度。
卢延吉·2023-09-12 08:28

进程与线程

进程之间是相对独立的，一个进程无法访问另一个进程的数据（除非利用分布式计算方式），一个进程运行的失败也不会影响其他进程的运行，Windows系统就是利用进程把工作划分为多个独立的区域的。
Z_W_H_·2023-09-12 08:25

java学习方向

大话设计模式》代码编写优化《重构改善既有代码的设计》《effectivejava》Java深入虚拟机《深入理解Java虚拟机》并发《Java并发编程实战》造自己的轮子找到一个深入的方向成为这个领域的专家，比如分布式计算领域的专家
一路摇到顶·2023-09-12 00:55

VLDB2023｜方略：一个交互式的规则研发系统

文｜梁仕威（花名：栖川）蚂蚁集团算法专家方略平台技术负责人，专注于分布式计算领域，主要负责蚂蚁基础算法的分布式设计与开发。
·2023-09-11 11:23

云计算与虚拟化

云计算（cloudcomputing）是分布式计算的一种，指的是通过网络“云”将巨大的数据计算处理程序分解成无数个小程序，然后，通过多部服务器组成的系统进行处理和分析这些小程序得到结果并返回给用户。
StarkDD1127·2023-09-10 23:37

mysql java uuid_Java生成UUID 与 MySQL数据库如何生成uuid数据

也是被开源软件基金会(OpenSoftwareFoundation,OSF)的组织应用在分布式计算环境(DistributedComputingEnvironment,DCE)领域的一部分。
weixin_39629947·2023-09-10 12:53

hive解决了什么问题

MapReduce难以使用：MapReduce是一种分布式计算框架，它可以用于处理大规模数据，但MapReduce的编程模型比较复杂，难以使用。
demo123567·2023-09-10 06:15

Hadoop概述

语言实现开源软件框架允许使用简单的编程模型跨计算机集群对大型数据集进行分布式处理Hadoop核心组件HadoopHDFS(分布式文件存储管理系统)：解决海量数据存储HadoopYARN(集群资源管理和任务调度框架)：解决资源任务调度HadoopMapReduce(分布式计算框架
藤藤菜丶·2023-09-09 05:15

介绍 Apache Spark 的基本概念和在大数据分析中的应用。

ApacheSpark是一种快速、可扩展的大数据处理框架，利用了内存计算技术，以及良好的并行化和分布式计算模型，Spark能够有效地处理大规模的数据。
kkkliaoo·2023-09-09 05:36

大数据技术之Hadoop：MapReduce与Yarn概述（六）

目录一、分布式计算二、分布式资源调度2.1什么是分布式资源调度2.2yarn的架构2.2.1核心架构2.2.2辅助架构前面我们提到了Hadoop的三大核心功能：分布式存储、分布式计算和资源调度，分别由Hadoop
何苏三月·2023-09-09 04:17

0301yarn&mapredude入门-hadoop-大数据学习

架构2.4辅助角色3MapReduce&YARN部署3.1集群规划3.2配置文件3.3分发配置文件4体验4.1集群启动命令介绍4.2提交MapReduce任务到YARN执行结语1MapReduce概述分布式计算是一种计算模型
gaog2zh·2023-09-08 12:16

操作系统 第一章：计算机系统概述

设备管理作为用户与计算机硬件系统之间的接口命令接口联机命令接口脱机命令接口程序接口（系统调用）作为计算机资源的扩充3.操作系统的特征①并发②共享③虚拟④异步4.操作系统的发展历程手工操作阶段单道批处理系统多道批处理系统（操作系统正式诞生）分时操作系统实时操作系统网络操作系统分布式计算机操
汤姆&Tom·2023-09-08 07:00

Java后端高频面试题集锦 1

Java语言是一种跨平台、适合于分布式计算机环境的面向对象编程语言。
少糖加水·2023-09-08 07:46

Netty简介及ByteBuf组件原理

Netty提供异步的、基于事件驱动的网络应用程序框架，用以快速开发高性能、高可靠性的网络IO程序，是目前最流行的NIO框架，Netty在互联网领域、大数据分布式计算领域、游戏行业、通信行业等获得了广泛的应用
数新网络·2023-09-08 04:05

Hadoop的第二个核心组件：MapReduce框架第一节

Hadoop的第二个核心组件：MapReduce框架第一节一、基本概念二、MapReduce的分布式计算核心思想三、MapReduce程序在运行过程中三个核心进程四、如何编写MapReduce计算程序：
Augenstern K·2023-09-07 04:42

RPC协议交互流程

文章目录RPC特性RPC实现RPC交互流程RPC交互时序图RPC交互流程RPC（RemoteProcedureCall，远程过程调用）是一种分布式计算的通信协议和编程模型，用于不同计算机或进程之间进行远程通信
嵌入式-小王·2023-09-07 02:27

hive中内部表、外部表、分区表、桶表、拉链表

hive查询的基本原理hive的设计思想是通过元数据解析描述将HDFS上的文件映射成表基本的查询原理是当用户通过hql语句对hive中的表进行复杂数据处理和计算时候，默认将其准换为分布式计算mapReduce
李大寶·2023-09-06 19:30

进程和线程

进程之间是相对独立的，一个进程无法访问另一个进程的数据（除非利用分布式计算方式），一个进程运行的失败也不会影响其他进程的运行，Window
kashjack·2023-09-06 15:46

大数据概念解析：分布式计算与服务器集群

今天我们来着重讲解大数据当中的两个重要概念，分布式计算以及服务器集群。大数据技术当中，分布式是非常核心的概念，从存储到计算到分析，大数据处理的整个流程当中，分布式不可或缺。
成都加米谷大数据·2023-09-06 14:25

hadoop-MapReduce

分布式计算模型MapReduce1.理解MapReduce设计思想2.理解MapReduce分布式计算的基本原理3.掌握使用Java进行MapReduce编程4.掌握在Hadoop集群中提交MapReduce
不吃香菜lw·2023-09-06 08:31

Hadoop安装教程

在大数据领域，hadoop是必须学习和掌握的一项技术，hadoop里面包含了三个最主要的组件：HDFS用于数据存储、YARN用于资源的管理、MapReduce用于分布式计算。
書香劍客·2023-09-06 01:54

Spark入门教程

1.简介ApacheSpark是一个开源的分布式计算框架，旨在提供快速、通用、易用的数据处理和分析技术。它可以在集群中处理大规模数据，支持多种数据处理模式，如批处理、交互式查询、流处理等。
zzy979·2023-09-05 07:08

Ignite分布式计算

callcall和funcation都是发送到分布式节点执行的代码。是实现了IgniteCallable接口的算子，被ignite.compute()发送到节点去执行。call和funcation可以同步或者异步执行，大多数情况下，我们会使用异步执行。this.compute.broadcast(()->System.out.println("HelloNode:"+ignite.cluster(
goxplanet·2023-09-05 05:18

【超级详细论文解说与代码实现】mit 6.824 分布式系统实现 Spring 2023—lab1

论文回顾mapreduce架构严格来讲，MapReduce是一种分布式计算模型，用于解决大于1TB数据量的大数据计算处理。
【阿冰】·2023-09-04 18:39

12 | 使用 Spark SQL执行CURL

SparkSQL可以让用户使用SQL语言来查询和操作数据，同时也提供了强大的分布式计算能力。
小 森·2023-09-04 17:02

Spark 【RDD编程（一）RDD编程基础】

通俗来讲，RDD是一种抽象的数据结构，用于表示分布式计算中的数据集合。它是Spark中最基本的数据模型，可以看作是一个不可变的、可分区、可并行处理的数据集合。
让线程再跑一会·2023-09-04 10:22

hadoop核心架构

通过对Hadoop分布式计算平台最核心的分布式文件系统HDFS、MapReduce处理过程，以及数据仓库工具Hive和分布式数据库Hbase的介绍，基本涵盖了Hadoop分布式平台的所有技术核心。
凉意先生·2023-09-04 06:38

python——spark入门

Hadoop是对大数据集进行分布式计算的标准工具，这也是为什么当你穿过机场时能看到”大数据(BigData)”广告的原因。
代码输入中...·2023-09-04 04:43

分布式计算相关概念

分布式用互联网上的计算机的中央处理器的闲置处理能力来解决大型计算问题的一种计算科学用分布在不同局域网的多个服务器共同完成业务其中某几个服务器是用户直接访问，为了防止用户访问量大的时候直接访问的服务器挂掉–单点失败，用多个服务器分担用户的访问量对应于集中式系统，分布式系统是一个硬件或软件组件分布在不同的网络计算机上，彼此之间仅仅通过消息传递进行通信和协调的系统。简单来说就是一群独立计算机集合共同对外
久石菜菜子·2023-09-03 22:24

分布式计算、云计算与大数据

第一章分布式计算定义：分布式计算是研究把一个需要非常巨大的计算能力解决的问题分成许多小的部分，然后把这些部分分配给许多计算机进行处理，最后把各部分的计算结果合并起来得到的最终成果（分而治之）。
昵称小丁·2023-09-03 22:24

家用计算机分布式计算,1.1.2 超级计算机、集群与分布式计算

1.1.2超级计算机、集群与分布式计算超级计算机一般指在性能上居于***地位的计算机，通常有成千上万个处理器，以及专门设计的内存和I/O系统。
weixin_39627455·2023-09-03 22:54

分布式计算在云计算中的作用

摘要本文介绍了了云计算中一个非常核心的技术——分布式计算。
EmmauelZ·2023-09-03 22:54

分布式计算

目录什么是分布式计算并行计算与分布计算区别现实的技术手段目前研究点分布式计算的发展历程什么是分布式计算两个或者多个软件共享信息并行计算与分布计算区别目的是不同：并行计算是使用多种计算资源来解决计算问题，
Nefelibat·2023-09-03 22:23

超级计算机与分布式计算架构

作者：禅与计算机程序设计艺术1.简介2020年是世界互联网大发展的一年，有很多企业都开始将大数据、云计算、物联网等新技术应用于自己的业务中。随着互联网的飞速发展，移动互联网、物联网以及云计算的发展让电脑工作负担越来越重。这对大量的IT技术人员来说是个大难题。要解决这个难题就需要对计算机架构进行升级改造，提高性能并降低成本，从而提升整体的可靠性、安全性、扩展性和易用性。超级计算机（Supercomp
禅与计算机程序设计艺术·2023-09-03 22:22

Linux简介

Linux是一个优秀的操作系统硬件方面：适合嵌入式，服务器，移动设备，桌面，计算机集群和超级计算机应用方面：人工智能，分布式计算，云计算，大数据，区块链到物联网等开源平台都是基于Linux。
golitter.·2023-09-03 19:11

golang grpc配置使用实战教程

什么是PRC&GRPCRPC是远程过程调用（RemoteProcedureCall）的缩写形式,RPC的主要功能目标是让构建分布式计算（应用）更容易，在提供强大的远程调用能力时不损失本地调用的语义简洁性
small_to_large·2023-09-03 13:16

Apache Flink 课外阅读

MapReduce计算框架虽然借鉴了函数式编程和矢量编程的思想完成了分布式计算。
麦田里的守望者··2023-09-03 07:30

11 | Spark计算数据文件中每行数值的平均值

你想使用ApacheSpark分布式计算框架来读取数据文件中的数值并计算它们的平均值。功能要求：通过Spark配置和上下文初始化Spark应用程序。从数据文件中读取数值，并将每行文本表示为一个RDD。
小 森·2023-09-03 06:42

一文读懂，高级架构进阶之深入浅出 RPC框架

RPC功能目标RPC的主要功能目标是让构建分布式计算（应用）更容易，在提供强大的远程调用能力时不损失本地调用的语义简洁性。
Java架构007·2023-09-03 02:03

浅谈spark

sparkspark是一个开源分布式计算框架，在于让计算更加快速，通常使用资源调度器yarn和spark自带的资源调度器standalond进行调度，spark相对于Hadoop更加快速，基于它是内存进行迭代
a1361585·2023-09-03 01:11

千万级并发架构下，关系型数据库应该如何优化？大厂是如何做分库分表的！

在互联网电商行业，或者一些O2O平台，每天也能产生上千万的订单数据，这些量级的数据在传统的关系型数据库中已经无法支撑了，那么如何解决海量数据存储和计算等问题，在业内引入了分布式存储和分布式计算等解决方案
跟着Mic学架构·2023-09-02 23:28

技术人员该读什么书？--- 并发编程篇

前言并发编程是IT人面试必备的八股文之一，项目开发中也常遇到高并发的场景，程序员需要考虑多线程编程、资源竞争、锁机制、分布式计算等多个方面的知识和技术。
·2023-09-02 18:14

技术人员该读什么书？--- 并发编程篇

前言并发编程是IT人面试必备的八股文之一，项目开发中也常遇到高并发的场景，程序员需要考虑多线程编程、资源竞争、锁机制、分布式计算等多个方面的知识和技术。
·2023-09-02 18:43

kafka 安装

Kafka初识1、Kafka使用背景在我们大量使用分布式数据库、分布式计算集群的时候，是否会遇到这样的一些问题：我们想分析下用户行为（pageviews），以便我们设计出更好的广告位我想对用户的搜索关键词进行统计
weixin_30657541·2023-09-02 13:48

【RPC 协议】序列化与反序列化 | lua-cjson | lua-protobuf

文章目录RPC协议gRPCJSON-RPC数据序列化与反序列化lua-cjsonlua-protobufRPC协议在分布式计算，远程过程调用（英语：RemoteProcedureCall，缩写为RPC）
ღCauchyོꦿ࿐·2023-09-02 11:45
上一页 11 12 13 14 15 16 17 18 下一页
按字母分类： ABCDEFGHIJKLMNOPQRSTUVWXYZ其他