分布式计算第24页

在阿里云ECS服务器上搭建Hadoop集群

在阿里云ECS服务器上搭建Hadoop集群简介Hadoop是一个开源的分布式计算的基础框架，其中最主要的组成部分则包括了hadoop分布式文件系统（hadoopdistributedfilesystem

AmadeusChan·2023-02-05 13:23

【青训营】分布式理论初探

本文内容总结自字节跳动青年训练营第五届后端组分布式理论初探一、概述分布式系统是计算机程序的集合，这些程序利用横跨多个独立计算节点的计算资源实现共同目标，可分为分布式计算、分布式存储、分布式数据库。

NormalConfidence_Man·2023-02-05 11:13

云计算期末考试知识点

答:Google云计算技术包括:Goge分布式文件系统GFS，分布式计算编程模型MapReduce，分布式锁服务Chubby，分布式结构化数据表Bigtable，分布式存储系统Megastore，分布式监控系统

Suzie_Xie·2023-02-04 19:10

《从0开始学大数据》的启示

从MR-Spark看产品思维模式思维大数据发展历史分布式计算的核心思想——移动计算而非移动数据大数据系统与大型网站系统设计思路的差异大型网站的思路大数据系统的思路从RAID到HDFS（存储）作为计算模型的

N-Paradigm·2023-02-04 17:50

从0开始学大数据（一）

预习01|大数据技术发展史：大数据的前世今生我们常说的大数据技术，其实起源于Google在2004年前后发表的三篇论文，也就是我们经常听到的“三驾马车”，分别是分布式文件系统GFS、大数据分布式计算框架

ziqiiii·2023-02-04 17:19

mongodb(一): 基本概念

优缺点优点：(1)高可扩展性(2)分布式计算(3)低成本(4)架构的灵活性，半结构化数据(5)没有复杂的关系缺点：(1)没有标准化(2)有限的查询功能(到目前为止)(3)程序不直观分类类型部分代表特点列存储

N8_xEnn7nA1·2023-02-04 04:05

翻译：Coprocessor Introduction

Authors:TrendMicroHadoopGroup:MingjieLai,EugeneKoontz,AndrewPurtellHBase对MapReduce集成非常友好，可用于对其表中存储的数据进行分布式计算

掩流年·2023-02-03 15:02

计算广告技术概览——计算广告读书笔记

一般的个性化系统有四个主体部分构成：用于实时响应请求，完成决策的在线投放引擎；离线的分布式计算数据处理平台；用于在线实时反馈的流计算平台；连接和运转以上三部分数据流的数据高速公路。

小小浪把_Dont_know拍·2023-02-03 14:52

区块链前世今生

关键的创新是利用分布式计算系统（

肥摩·2023-02-03 14:12

分布式调度与计算框架：OhMyScheduler

产品简介oms-logo.pngOhMyScheduler是基于Akka架构的一款分布式调度平台与分布式计算框架（对标AlibabaSchedulerX2.0），其主要功能特性如下：使用简单：提供前端Web

村口滕师傅·2023-02-03 14:33

第一节课笔记

一，1，HCIA是华为认证体级网络工程师；2，HCIP是华为认证体系下高级网络工程师；3，HCIE是华为认证体系下专家级网络工程师云技术分为云存储和云计算（例如：云存储：百度网盘；云计算：分布式计算）二

22个小辣椒·2023-02-03 12:56

4.7 ROS分布式通信

ROS入门4.7ROS分布式通信《ROS入门-理论与实践》视频教程镇楼ROS是一个分布式计算环境。一个运行中的ROS系统可以包含分布在多台计算机上多个节点。

赵虚左·2023-02-03 11:31

hadoop集群部署

1、Hadoop的介绍狭义上来说，hadoop就是单独指代hadoop这个软件，HDFS：分布式文件系统MapReduce:分布式计算系统Yarn：分布式集群资源管理广义上来说，hadoop指代大数据的一个生态圈

keeper&·2023-02-02 14:29

Hadoop简介概述

谷歌发表的关于GFS和MapReduce相关的论文给了作者启发，最终让Nutch可以在多台计算机上稳定的运行;后来雅虎对这项技术产生了很大的兴趣，并组建了团队开发，从Nutch中剥离出分布式计算模块命

Trouble-Solver·2023-02-02 14:58

hadoop介绍

目录大数据与HadoopHadoop模块：HadoopCommon：Hadoop分布式文件系统(HDFS)：HadoopYARN：HadoopMapReduce：Hadoop生态圈组件：Spark（分布式计算框架

昊昊该干饭了·2023-02-02 14:58

[笔记]机器人操作系统（ROS）浅析

1绪论ROS：RobotOperatingSystemROS是面向机器人的开源的元操作系统(open-source,meta-operatingsystem)选择ROS的理由：分布式计算软件复用快速测试

mingcheng2650·2023-02-02 04:33

00 | Go语言学习之旅

解决困难多核软件架构超大规模的分布式计算集群web模式下导致前所未有的开发规模和更新速度特性简单25个关键字内置的并发机制和垃圾回收机制高效垃圾回收指针生产

刀斧手何在·2023-02-01 15:16

Ray+GPU支持高性能计算

关于RayRay是个用c++写的，支持Python的分布式计算框架，结构简

泰克轱辘儿·2023-02-01 09:24

SOA架构概述(转)

对于面向同步和异步应用的，基于请求/响应模式的分布式计算来说，SOA是一场革命。一个应用程序的业务逻辑（businesslogic）或某些单独的功能被模块化并作为服务呈现给消费者或客户端。

hexidlee·2023-02-01 07:26

操作系统的主要功用

操作系统的演变：单用户系统，批处理系统，多程序系统，分时系统，个人计算机：每个用户一个系统，分布式计算:每个用户多个系统。操作系统的目标和作用目标：方便性，有效性，可扩充性，开放性。

鲨漠里的鱼·2023-01-31 23:14

【转载】Spark 分布式/单机执行代码认知纠正

原文：https://cloud.tencent.com/developer/article/1483011Spark是一个分布式计算系统/组件/平台，这是都知道的，其用Scala实现Spark任务也是最原生的

九筒-·2023-01-31 18:25

初识流计算框架Spark

Spark加入Apache孵化器项目后，开始获得迅猛的发展，Spark是Apache软件基金会最重要的三大分布式计算系统开源项目之一（即Hadoop、Spa

_小许_·2023-01-31 14:52

超级计算机基础配置,LVS基础配置

应用程序可以通过网络共享内存进行消息传送，实现分布式计算机。集群的工作方式类似于人们之间的协同工作。l集群就是一组计算机，它们作为一个整体向用户提供一组网络资源。

孤独患喆·2023-01-31 09:32

第十章网络与信息安全基础知识

是计算机技术与通信技术相结合的产物，它实现了远程通信、远程信息处理和资源共享计算机网络的发展阶段：具有通信功能的单机系统、具有通信功能的多机系统、以共享资源为目的的计算机网络、以局域网及因特网为支撑环境的分布式计算机系统计算机网络的功能

jolly_elf·2023-01-31 07:49

Hadoop集群安装和搭建（全面超详细的过程）

Centos系统安装四、静态网络配置五、虚拟机克隆配置六、配置hosts文件和ssh免密登录七、Hadoop集群配置八、Hadoop集群测试前言 Hadoop是一个开源的、可运行与Linux集群上的分布式计算平台

小汤TYT·2023-01-30 14:10

大数据技术发展史

2004年，整个互联网界还处于懵懂时代，Google发布了三篇论文，分别是分布式文件系统GFS，大数据分布式计算框架MapReduce，分布式存储系统bigTable。

ks宁·2023-01-30 00:17

HDFS简介

Hadoop的第一个产品是HDFS，可以说分布式文件存储是分布式计算的基础，也可见分布式文件存储的重要性。

f192469fc2d5·2023-01-29 23:06

数据倾斜问题与解决

长尾问题(数据倾斜)发生长尾问题的原因在MapReduce中，Map阶段和Reduce阶段都有可能由多个节点进行分布式计算，而如果在分布式计算时，每个节点分配的任务不均衡，比如绝大多数操作分配在极少数的节点上

眼君·2023-01-29 14:02

读论文：大数据计算环境下的隐私保护技术研究进展

一、大数据计算环境现状及隐私问题1.1大数据计算环境现状1.2隐私问题、挑战与主要研究方向1.2.1敌手模型1.2.2问题与挑战1.2.3主要研究方向二、基于数据分离的隐私保护2.1基于敏感数据标记的分布式计算

a44267113·2023-01-29 09:34

你不得不知道的大数据知识点

分布式计算：研究如何把一个需要非常巨大的计算能力才能解决的问题分成许多小的部分，然后把这些部分分配给许多计算机进行处理，最后把这些计算结果综合起来得到最终的结果。

回锅肉不回锅了·2023-01-29 07:12

安全多方计算(二)

姓名：陈宇辉；学号：17180120024;学院：网络与信息安全学院；【嵌牛导读】安全多方计算融合了密码学和分布式计算技术，是信息安全领域的一个重要研究方向，旨在解决现实中无第三方可信任机构情况非信任的多方进行计算

d7a17d9155ae·2023-01-29 05:26

NoSQL的一些常用命令

NoSQL，全名为NotOnlySQL，指的是非关系型的数据库优点：1.高可扩展性2.,分布式计算3.低成本4.架构的灵活性，半结构化数据5.没有复杂的关系缺点：1.没有标准化2.有限的查询功能（到目前为止

__晴天___·2023-01-29 02:32

2018 到 2020 ：从 Spring Cloud 到 Cloud Native，再到 Serverless

2018：SpringCloud的崛起2018年刚开始接触sprigcloud的时候，还不知道分布式计算的概念，只知道Netflix开源了一套微服务框架，里面有很多组件组成：组件名称作用eureka服务注册与发现

黄枣颖·2023-01-28 16:40

了解HDFS

HDFS可以更好的支持分布式计算。

心無旁騖丶·2023-01-28 15:21

iOS 简单实现区块链

,区块链是因比特币而诞生的一种链式数据结构.它的概念是去中心化,并以密码学方式保证不可篡改和不可伪造的分布式账本.但区块链的作用不仅仅只是作用于比特币交易而已.区块链的设计是一种保护措施,比如高容错的分布式计算

秤子_5dcc·2023-01-27 13:35

Apache Flink 详解

3、分布式运行1、Flink简介Flink核心是一个流式的数据流执行引擎，其针对数据流的分布式计算提供了数据分布、数据通信以及容错机制等功能。

000X000·2023-01-27 11:58

【分布式】浅谈CAP、BASE理论（1）

这个定理起源于加州大学柏克莱分校的计算机科学家埃里克·布鲁尔在2000年的分布式计算原理研讨会上提出的一个猜想1。

小猪猪家的大猪猪·2023-01-27 11:47

《交互的未来-物联网时代设计原则》读书笔记

物联网时代，即分布式计算时代。很多联网设备形成的网络，网络上的每一台设备都是一个潜在的信息存储节点。此时，设备的互动方式、隐私、安全、带宽及注意力等方面，对设计提出了更高要求。

Tracy_RF·2023-01-27 06:32

云计算，一个概念罢了

“云计算”归结起来，大概有一个这样三点：第一、通过分布式计算机集群计算和数据的过程；第二、可以脱离“一台本地企业电脑技术或者“一台服务器端服务器”，始终坚持认为是在上网而不是在访问控制某一台计算机。

Yun88网·2023-01-26 18:05

MapReduce

master/%E5%A4%A7%E6%95%B0%E6%8D%AE%E6%A1%86%E6%9E%B6%E5%AD%A6%E4%B9%A0/Hadoop-MapReduce.mdMapReduce概述分布式计算框架

ZzzZBbbB·2023-01-26 14:16

Haddop：Mapreduce

Hadoop的核心思想之一是mapreduce（分布式计算框架）Compute：计算层（处理层）HDFS：分治一、What?

惊不意外·2023-01-26 05:22

大数据 - 大数据开发技术课程总结（未完）

1.课程介绍大数据开发课程主要从了解大数据概念、特征开始，再介绍大数据Java开发和Hadoop的环境配置，较为全面地讲解了HDFS分布式存储，MapReduce分布式计算框架，Spark平台开发和Scala

陈杉菜·2023-01-22 19:40

并行计算随笔（一）

如果觉得本篇文章对你有所启发，请给我点个赞好吗，这对我很重要，谢谢文章目录1并行计算基础1.1什么是并行计算1.1.1对计算速度的需求1.1.2并行计算1.1.3并行计算的基本条件1.1.4平行计算和分布式计算

ArimaMisaki·2023-01-21 10:27

Hadoop集群安装和搭建

Hadoop集群安装和搭建前言 Hadoop是一个开源的、可运行与Linux集群上的分布式计算平台，用户可借助Hadoop存有基础环境的配置（虚拟机安装、Linux安装等），Hadoop集群搭建，配置和测试

王八变成汤·2023-01-20 18:39

分享帖：大数据的入门级学习

数据科学并没有一个独立的学科体系，统计学，机器学习，数据挖掘，数据库，分布式计算，云计算，信息可视化等技术或方法来对付数据。

小迪和夫人·2023-01-20 08:43

情绪因子｜XenonDB情绪因子2019-2021年单因子回测

应用自然语言分析和分布式计算技术，我们对大规模混乱的市场数据进行识别和分析，生成市场和企业各个维度的实时数据，向工业，商业，经济，金融，政务，教学和科研领域的专业人员提供高质量的结构化数据，快速的信息检索

超对称技术官方·2023-01-18 11:58

大数据技术与架构——（二）大数据处理架构Hadoop（上）

1.5ApacheHadoop版本演变1.6Hadoop各种版本（企业开发产品）2.Hadoop项目结构1.Hadoop概述1.1Hadoop简介Hadoop是Apache[ә’pætʃi]软件基金会旗下的一个开源分布式计算平台

TUTOU程序猿·2023-01-17 15:02

Google MapReduce 中文版阅读心得之什么是mapreduce

1.mapreduce主要应用在什么地方mapreduce是谷歌给出的使用分布式计算机计算超大规模数据集的一种解决方案，是一种编程模型。

时代新人0-0·2023-01-14 10:49

ROS 机器人操作系统：概述

阿基米东·2023-01-13 16:48

一文掌握 TensorFlow 基础

它的一大亮点是支持异构设备分布式计算

Alice熹爱学习·2023-01-13 11:20

推荐频道

分布式计算