分布式处理

SWF (Simple Workflow Service)简介

AmazonSimpleWorkflowService(AmazonSWF)提供了给应用程序异步、分布式处理的流程工具。
Loong_1213·2023-03-13 18:24

计算机网络概要

1.3计算机网络的功能数据通信（最基础和最重要的功能）、资源共享、分布式处理、
末雨潮声·2023-03-13 02:52

大数据hadoop运维之hadoop快速入门视频课程

Hadoop是一个能够对大量数据进行分布式处理的软件框架。
POWNshooot·2023-03-10 03:14

大数据技术原理与应用介绍

两大核心技术：分布式存储和分布式处理大数据计算模式批处理计算流计算图计算查询分析计算大数据具有数据量大、数据类型繁多、处理速度快、价值密度低等特点。
CODER8R·2023-02-24 03:04

HADOOP介绍

1.HADOOP背景介绍1.1什么是HADOOPHADOOP是apache旗下的一套开源软件平台HADOOP提供的功能：利用服务器集群，根据用户的自定义业务逻辑，对海量数据进行分布式处理HADOOP的核心组件有
BoltBear·2023-02-02 14:00

01 hadoop介绍、架构原理

允许使用简单的编程模型在大量计算机集群上对大型数据集进行分布式处理。
莹火虫的另一半·2023-02-02 14:00

第八章云计算原理与技术

对专业人员而言：是分布式处理、并行处理和网格计算的发展，或者说是这些计算机科学概念的商业实现。是指基于互联网的超级计算模式–即把原本存储于个
Ironman_681e·2023-02-02 10:56

什么是集群？什么是分布式？两者的区别

集群主要是简单加机器解决问题，对于问题本身不做任何分解；分布式处理里必然包含任
Soul丶Kp·2023-01-31 11:21

大数据面试杀招——Hadoop高频考点，正在刷新你的认知！

Hadoop是一个能够对大量数据进行分布式处理的软件框架。以一种可靠、高效、可伸缩的方式进行数据处理
刀哥说Java·2023-01-31 02:10

分布式系统负载均衡策略分析与研究

纵向扩展是指增强单机处理能力的角度来增强整体集群的处理能力，然而更为广泛的，更适用于分布式处理系统中的方式是横
哎呀牙刷子·2023-01-30 21:59

用Redis轻松实现秒杀系统

对这类问题，有三种优化性能的思路：写入内存而不是写入硬盘异步处理而不是同步处理分布式处理用上这三招，不论秒杀时负载多大，都能轻松应对。更好的是，Redis能够满足上述三点。
大数据客栈yi·2023-01-29 14:44

云计算专业术语速查手册（3）云计算服务类型

而云计算是分布式处理、并行处理和网格计算的发展，或者说是这些计算机科学概念的商业实现，这将是一个时代的来临。如今，不论工作和生活，云计算几乎早已无处不在。
夜海天·2023-01-28 20:04

大数据计算引擎 —— Flink

一、Flink简介  ApacheFlink是一个用于对无边界和有边界数据流进行有状态计算的框架和分布式处理引擎。Flink被设计为运行在所有常见的集群环境中，并且以内存速度和任意规模执行运算。
小胡_鸭·2023-01-27 15:03

Flink知识点总结 Flink简介

Flink简介Flink是一个框架和分布式处理引擎，用于对无界和有界数据流进行有状态计算。并且Flink提供了数据分布、容错机制以及资源管理等核心功能。
null如也·2023-01-27 11:44

计算机网络Part1 概述

互连的，自治的计算机的集合互联-互联互通自治-无主从关系功能数据通信连通性资源共享软件硬件数据分布式处理多台计算机各自承担同一工作任务的不同部分提高可靠性替代机负载均衡组成通信子网数据链路层网络层物理层各种传输介质
SuBHFeng·2023-01-26 12:32

C#上位机与三菱PLC通讯

，我们都在追求快，本人也是，所以本人分享的东西基本都是适用于想快速上手可以顺利接轨项目的筒子们，让浏览者可以站在别人的肩膀上走的更远，将更多的时间精力花费在研究其他的技术难点上面，比如高并发、高可用、分布式处理
工控程序狗·2023-01-16 02:28

数仓知识11：Hadoop生态及Hive、HBase、Impala、HDFS之间的关系

ApacheHadoop软件库是一个框架，允许使用简单的编程模型在计算机集群之间对大型数据集进行分布式处理。它旨在从单个服务器扩展到数千台计算机
维克先生·2023-01-14 16:12

pyspark-01 基础介绍

目录pyspark使用心得pyspark运行架构spark基础概念RDDDAG数据倾斜总结pyspark使用心得分布式处理大规模数据，底层还是spark，包了一层pythonapi一般公司的基建是优先支持
Evangelion-02·2023-01-14 09:29

代码质量与安全 | 使用Incredibuild加速Klocwork静态代码分析

Incredibuild是一款加速编译工具，为C++代码编译和分析提供强大的分布式处理和独特的构建缓存加速。
·2023-01-13 12:31

MMdetection之train_detector 源码解析

目录（一）构建dataloaders（mmdet/datasets/builder.py）（2）构建分布式处理对象（3）构建优化器（4）创建EpochBasedRunner并进行训练（一）构建dataloaders
小刺猬69·2023-01-13 00:10

大数据 hadoop

1.HADOOP背景介绍1.1什么是HADOOP1.HADOOP是apache旗下的一套开源软件平台2.HADOOP提供的功能：利用服务器集群，根据用户的自定义业务逻辑，对海量数据进行分布式处理3.HADOOP
DHRJFH·2023-01-12 21:33

【机器学习】分布式机器学习原理及实战(Pyspark)

自2003年Google公布了3篇大数据奠基性论文，为大数据存储及分布式处理的核心问题提供了思路：非结构化文件分布式存储（GFS）、分布式计算（MapReduce）及结构化数据存储（BigT
风度78·2023-01-11 19:15

研究综述 | 知识图谱划分算法研究综述

作者|王鑫，天津大学智能与计算学部来源|计算机学报知识图谱划分是大规模知识图谱分布式处理的首要工作，是知识图谱的分布式存储、查询、推理和挖掘的基础支撑。
开放知识图谱·2023-01-04 11:47

ODPS 之SQL

1.基本概念1）ODPS：OpenDataProcessingService，简称ODPS；是由阿里云自主研发，提供针对TB/PB级数据、实时性要求不高的分布式处理能力，应用于数据分析、挖掘、商业智能等领域
scott198510·2023-01-02 18:19

Flink学习笔记

ApacheFlink是一个框架和分布式处理引擎，用于对无界和有界数据流进行有状态计算。Flink被设计在所有常见的集群环境中运行，以内存执行速度和任意规模来执行计算。
阳宝宝的向日葵·2022-12-29 10:32

KMeans聚类 K值以及初始类簇中心点的选取 转

本文主要基于AnandRajaraman和JeffreyDavidUllman合著，王斌翻译的《大数据-互联网大规模数据挖掘与分布式处理》一书。
weixin_33955681·2022-12-27 20:07

KMeans聚类 K值以及初始类簇中心点的选取

本文主要基于AnandRajaraman和JeffreyDavidUllman合著，王斌翻译的《大数据-互联网大规模数据挖掘与分布式处理》一书。
brilliantyoho·2022-12-27 20:06

《大数据互联网大规模数据挖掘与分布式处理》阅读笔记(二)

转载连接：http://blog.csdn.net/lovemianmian/article/details/9050617首先来看看这一章讲解的整体架构，分别介绍了分布式文件系统、Map-Reduce、使用Map-Reduce的算法，Map-Reduce扩展和集群计算算法的效率问题。一、分布式文件系统1.1分布式文件系统起因大规模WEB服务流行在数千个计算节点完成大规模计算这些计算节点都是普通的
逍遥扇·2022-12-21 13:04

阿里云-数据仓库-数据分析开发神器-ODPS

ODPS是一种由阿里云自主研发，针对TB/PB级数据、实时性要求不高的分布式处理服务。主要服务于批量结构化数据的存储和计算，可以提供海量数据仓库的解决方案以及针对大数据的分析建模服务。
风一样的美狼子·2022-12-19 09:36

阿里架构师”kafka 数据可靠性深度解读(转)

目前越来越多的开源分布式处理系统如Cloudera、ApacheStorm、Spark等都支持与Kafka集成。
wzz没bug·2022-12-19 07:23

“阿里架构师”kafka 数据可靠性深度解读

目前越来越多的开源分布式处理系统如Cloudera、ApacheStorm、Spark等都支持与Kafka集成。
James0502·2022-12-19 07:21

kafka 数据可靠性深度解读

目前越来越多的开源分布式处理系统如Cloudera、ApacheStorm、Spark等都支持与Kafka集成。如果想学习Java工程化、高性能及分布式、深入浅出。
javaQQ群 866865133·2022-12-19 07:50

什么是分布式软件系统

分布式软件系统(DistributedSoftwareSystems)是支持分布式处理的软件系统,是在由通信网络互联的多处理机体系结构上执行任务的系统。
m0_72864708·2022-12-17 07:52

什么是分布式软件系统

分布式软件系统(DistributedSoftwareSystems)是支持分布式处理的软件系统,是在由通信网络互联的多处理机体系结构上执行任务的系统。
m0_72864708·2022-12-17 07:16

大数据计算系统 Blink 在端侧的应用实践

Blink简介介绍Blink前需要先认识下Flink，其最初是柏林工业大学的一个研究性项目（StratoSphere），早期专注于批计算，于2014年捐赠给Apache并进行孵化，后逐渐演变为数据计算框和分布式处理引擎
阿里巴巴淘系技术团队官网博客·2022-12-17 01:01

大数据基础架构

一、大数据两大核心技术：分布式存储：HDFS、HBase、NoSQL、NewSQL分布式处理：MapReduce二、大数据计算模式：三、代表性大数据技术：1.Hadoop：ETL工具（extract、transform
好啊啊啊啊·2022-12-15 14:48

Hadoop总结

HDFSHDFS架构HDFS设计思路HDFS环境搭建HDFS的使用HDFSshell操作HDFSshell操作练习资源调度框架YARN什么是YARNYARN产生背景YARN的架构和执行流程YARN环境搭建分布式处理框架
CharlesDavid_coder·2022-12-15 11:23

ESP8266开发（三）——如何在电脑上搭建简易TCP服务器

一、什么是服务器服务器是计算机的一种，是在网络环境或分布式处理环境中，为用户提供服务的计算机。可分为访问服务器、文件服务器、数据库服务器、
proibell·2022-12-14 12:50

【云计算与大数据计算】分布式处理CPU多核、MPI并行计算、Hadoop、Spark的简介（超详细）

一、CPU多核和POISXThread为了提高任务的计算处理能力，下面分别从硬件和软件层面研究新的计算处理能力在硬件设备上,CPU技术不断发展,出现了SMP(对称多处理器)和NUMA(非一致性内存访问)两种高速处理的CPU结构在软件层面出现了多进程和多线程编程。进程是内存资源管理单元,线程是任务调度单元总的来说，线程所占用的资源更少，运行一个线程所需要的资源包括寄存器，栈，程序计数器，早期不同厂商
showswoller·2022-12-13 17:55

分布式系列之分布式计算框架Flink深度解析

1、Flink概述ApacheFlink是一个框架和分布式处理引擎，用于在无边界和有边界数据流上进行有状态的计算。在现有的开源计算框架中，流式处理和批量处理会作为不同的应用类型，流处理一般需要低
solihawk·2022-12-12 11:10

深入剖析kafka架构内部原理

目前越来越多的开源分布式处理系统如Cloudera、ApacheStorm、Spark等都支持与Kafka集成。
weixin_30877181·2022-12-11 07:07

银行科技岗工作

分布式处理，区块链技术。
人还是要有梦想的·2022-12-09 14:16

操作系统原理实验报告——读者写者

一、实验目的1.现代操作系统的核心是多道程序设计、多处理器和分布式处理器，这些方案和操作系统设计技术的基础都是并发。
The_Dan·2022-12-08 15:49

【计算机网络】—— 概念、组成、功能和分类

目录一、计算机网络的概念二、计算机网络的功能1、数据通信（连通性）2、资源共享3、分布式处理4、提高可靠性5、负载均衡三、计算机网络的组成1、组成部分2、工作方式3、功能组成四、计算机网络的分类五、总结一
然后就去远行吧·2022-12-07 19:29

ICT系统技术简介

本文主要是个人对相关技术理解，仅做参考）物联网：大数据的基础，采集人、事、物及之间互动的数据；大数据：基于物联网的应用，人工智能的基础；云计算：计算、存储、通讯工具，物联网、大数据和人工智能必须依托云计算的分布式处理
行销指挥官·2022-12-07 15:48

初始计算机网络——概念、组成、功能、分类

，这个计算机网络真的很重要，也很后悔当时没有好好学目录一、计算机网络的概念1.1网络与计算机网络1.2计算机网络概念二、计算机网络的功能2.1数据通信（最基本、最重要的）2.2资源共享（也重要）2.3分布式处理
我爱布朗熊·2022-12-07 14:06

kmeans python自定义初始聚类中心_机器学习-KMeans聚类 K值以及初始类簇中心点的选取...

kemaswill/archive/2013/01/26/2877434.html本文主要基于AnandRajaraman和JeffreyDavidUllman合著，王斌翻译的《大数据-互联网大规模数据挖掘与分布式处理
weixin_39719018·2022-12-05 14:15

数据仓库实践杂谈（十六）——渐变维

[目录]第一章：概述第二章：整体数据分层第三章：整体实现框架第四章：元数据第五章：ETL第六章：数据校验第七章：数据标准化第八章：去重第九章：增量/全量第十章：拉链处理第十一章：分布式处理增量第十二章：
老程序员一叶知秋·2022-11-30 19:32

Flink面试题精简

Flink基础：1简单介绍一下Flink·框架和分布式处理引擎；·对无界和有界数据流进行有状态计算；·提供了数据分布、容错机制以及资源管理等核心功能；·提供了诸多高抽象层的API以便用户编写分布式任务：
远方时光·2022-11-29 15:22

基于机器学习和深度学习，华为大神手写AIoT系统学习小册

基于MLlib和H2O.ai平台，在ApacheSpark框架上实现对IoT数据的分布式处理。基于深度学习方法对时间序列数据进行预测。从可穿戴设备和智能设备得到的数据中获取独到的洞察。
mxy_111·2022-11-27 21:59
上一页 3 4 5 6 7 8 9 10 下一页
按字母分类： ABCDEFGHIJKLMNOPQRSTUVWXYZ其他