IT->分布式计算

HBase在滴滴出行的应用场景和最佳实践

在滴滴之前，曾在新浪担任数据工程师，专注于分布式计算和存储。责编：郭芮（[email protected]），关注大数据领域。
ad4d39659223·2021-06-14 13:58

java基础——多线程

多线程使用场景:1.后台任务,比如游戏服务器2.定时向大量用户(100W)用户发邮件3.异步处理:发微博/记录日志等4.分布式计算...线程和进程区别：进程：是指一个内存中运行的应用程序，每个进程都有一个独立的内存空间
wbcra·2021-06-14 09:29

PAT 1083 是否存在相等的差 （20 分）

=map.end();it++)if(it->second>1)
昭明ZMing·2021-06-12 17:20

【内推】【社招/校招】字节跳动 大数据和分布式计算的同学看过来~

字节跳动内推了~~~如果是社招，邮件名请以“姓名-职位”命名，发送简历到[email protected]如果是校招，直接访问投递链接:https://job.toutiao.com/s/JRDhfEv，校招内推码:XEVN9QZ如果是希望投递大数据或者流式计算方向的同学，我可以帮看简历~顺便推荐部门~其他方向的话可能我不太了解，但是欢迎同学们咨询，我会找内部相关同事进行沟通~~~发邮
廖嘉逸·2021-06-11 12:15

并发、并行和分布式（Concurrent, Parallel, and Distributed）

概述在复杂的系统开发中，经常会遇到并发编程、高并发、并行计算、分布式系统、分布式计算、分布式存储这些词语，那么这些词背后的并发、并行、分布式到底有什么区别呢？
云之华·2021-06-11 11:28

IDC企业如何选择公有云管理平台？

而随着云计算概念的引入并发展成熟，以大规模存储和分布式计算为特色的云计算也给IDC产业带来了新的挑战和机遇。
BirdCloud·2021-06-11 09:08

Hadoop完全分布式部署

一、概述概念：是一个可靠的、可伸缩的、分布式计算的开源软件。
kaliarch·2021-06-11 04:19

NOSQL

NoSQL全名为NotOnlySQL，指的是非关系型的数据库,随着访问量的上升，网站的数据库性能出现了问题，于是nosql被设计出来NOSQL的优点：高可扩展性，分布式计算，低成本，架构的领活性，半结构化数据
那你很棒啊o·2021-06-09 16:07

区块链开发之BTC钱包APP

每个电脑上都装有一系列的软件，这些软件就构成一个分布式计算系统，用于协调这些电脑完成相互链接、相互传递消息和通信、协调各自的任务和分工。最终这些电脑彼此交互要实现一个共同的目标——维护一
zhangchunlin·2021-06-09 09:25

初始Hadoop

1.Hadoop概述是什么：Apache™Hadoop项目是可靠，可扩展，分布式计算、分布式存储的开源软件。
Aimerwhy·2021-06-08 20:45

第10章 Spark

2013年，Spark加入Apache孵化器，目前已成为三大分布式计算系统开源项目之一（Hadoop、Spark、Storm）2014年，打破Hadoop的排序记录特点（1）运行速度快：使用DAG调度机制
迪丽娜扎·2021-06-08 18:40

Hadoop之HDFS

Hadoop架构HDFS(HadoopDistributedFileSystem;):分布式文件存储YARN（YetAnotherResourceNegotiator）:分布式资源管理MapReduce:分布式计算
Ten_Minutes·2021-06-08 01:51

MapReduce既是编程模型又是计算框架

在Hadoop问世之前，其实已经有了分布式计算，只是那个时候的分布式计算都是专用的系统，只能专门处理某一类计算，比如进行大规模数据的排序。
tracy_668·2021-06-07 02:49

Java面试问题

三个特点三个容易混淆的概念多节点：服务的各节点集群：部署于多台服务器的服务，相同业务功能的节点消息通信：各节点通过发送消息来通信分布式系统：强调不同功能模块的节点不共享内存：分布式计算：2.session
Eoccc·2021-06-06 13:14

全网最全最新的大数据系统学习路径

EB级的数据，大数据是对海量数据进行存储、计算、统计、（想了解更多☞☞☞☞）分析处理的一系列处理手段，处理的数据量通常是TB级，甚至是PB或EB级的数据，这是传统数据处理手段所无法完成的，其涉及的技术有分布式计算
烽火程序猿·2021-06-06 12:07

关于分布式计算框架连接kafka不满足同一消费者组不满足只有一个消费者的情况

背景：之前在做spark实时计算的时候，无意间启动了两个sparkApplication，导致了最终的结果成倍的增加，经过排查之后，确实是因为启动了两个相同的sparkapplication，当时感觉特别疑惑，也无从下手来解决这个问题。后来再做Flink实时计算的时候，也同样遇到了这样的问题，Flink官网中的一句话猛然点醒了我：IfyouhaveaproblemwithKafkawhenusin
学木·2021-06-05 19:53

Filenet技术背景简析二：系统构成与运行机制介绍

分布式数据存储、P2P网络传输、分布式计算等底层功能由IPFS协议和Mine物理设备一起完成。在IPFS中，包含两种类
壹五叁说IPFS·2021-06-05 14:41

分布式存储和计算高可用HA集群：Hadoop + HBase + Flink

Flink：基于Hadoop的DFS系统或实时输入流，实现批量作业处理和流式数据处理的分布式计算引擎，支持实时处理。三者关系如下图所示：[图片上传失败...
飞鱼007·2021-06-05 04:44

IT-开发(banzhuan)之工具篇

 工欲善其事，必先利其器。开发工具几乎会伴随整个职业生涯，重要性不在此赘述。本文将向各位介绍一下常用的开发工具，以及相同工具之间的简单对比。一.IDE工具前端开发工具推荐Vscode，轻量美观，开源免费(免去一次次找找激活码的烦恼)。前端各系统间耦合较轻，更多的是SPA（SinglePageApplication）单页面应用。相较于WebStorm一站式解决的重量级设计方案，vscode显得更加轻
缘木求鱼的鱼·2021-06-04 21:11

学习hadoop的一些疑问

答：Hadoop1.0Hadoop1.0即第一代Hadoop，由分布式存储系统HDFS和分布式计算框架MapReduce组成，其中，HDFS由一个NameNode和多个DataNode组成，MapReduce
烽火程序猿·2021-06-04 20:40

企业级大表关联小表的Shuffle实践

分布式计算系统的精粹在于移动计算而非移动数据，但是在实际的计算过程中，总存在着移动数据的情况。
欧万翔·2021-06-04 12:44

整天跟微服务打交道，你不会连RPC都不知道吧？

RPC功能目标RPC的主要功能目标是让构建分布式计算（应用）更容易，在提供强大的远程调用能力时不损失本地调用的语义简洁性。为实现该目标，RPC框架需提供一种透明调用
Java小朔哥·2021-06-04 04:06

大并发服务器所遇问题和简单应对框架思路

服务器设计目标：高性能(HighPerformance,HP)；高可用(HighAvailability,HA)；伸缩性(Scalability)；分布式设计问题：负载均衡；分布式存储；分布式计算；大并发服务器设计和迭代更新思路
KuoGavin·2021-06-03 23:21

架构解密从分布式到微服务：对全文检索中间件的全面讲解

全文检索与消息队列中间件在前面的章节中我们学习了构建一个分布式系统所必需的各种基本知识和技能比如分布式系统的基础理论、网络编程技术、RP架构、内存计算分布式文件系统、分布式计算框架等，但仅仅掌握这些内容还是远远不够的我们还需要学习和掌握分布式系统中常用的一些中间件这些中间件主要用于分布式系统中常见的一些业务场景数据全文检索
javatiange·2021-06-03 12:36

架构解密分布式到微服务：架构实践DIY一个有难度的分布式集群

●不使用任何分布式相关的框架和中间件，不限语言,纯手工编码打造一个原生的分布式集群MyCluster,MyCluster集群主要用于实现某种简单的分布式计算功能。
javatiange·2021-06-03 11:54

小白视角的大数据基础实践(二)Hadoop环境搭建与测试

1.简介实验环境Vmware(Ubuntu18.04)Java1.8Hadoop3.1.31.1基础知识Hadoop是一个由Apache基金会所开发的开源分布式计算平台，为了让用户可以在不了解分布式底层细节的情况下开发分布式程序
小生凡一·2021-05-31 09:52

分布式计算框架MapReduce

MapReduce概述源自于Google的MapReduce论文，论文发表于2004年2月HadoopMapReduce是GoogleMapReduce的克隆版MapReduce优点：海量数据离线处理&易开发（相对于自己开发分布式框架来说的，现在的Spark和Flink要比MapReduce更简单）&易运行（可以本地开发本地测试）MapReduce缺点：实时流式计算MapReduce编程模型Map
一杯敬朝阳一杯敬月光·2021-05-26 21:27

聊一聊分布式系统中的CAP和BASE理论

CAP理论又被称作布鲁尔定理，是由加州大学伯克利分校的EricBrewer教授在分布式计算原理研讨会（PODC）上提出。CAP是指Consistency（一
阳光大男孩!·2021-05-25 14:44

Hadoop的安装

主要提供分布式存储、分布式资源调度、分布式计算。广义上讲，Hadoop是一个生态。包含了大数据领域中的几乎所有的解决方案。
一笑何方·2021-05-24 21:45

流式计算与计算抽象化------《Designing Data-Intensive Applications》读书笔记15

上篇的内容，我们探讨了分布式计算中的MapReduce与批处理。
LeeHappen·2021-05-20 22:08

安全多方计算（一）

而安全多方计算融合了密码学和分布式计算技术，是信息安全领域的一个重要研究方向，旨在解决现实中无第三方可信任机构情况非信任的多方进行计算。
d7a17d9155ae·2021-05-19 11:33

网新关键词

PageRank）；如何积累知识（维基百科）；如何科学研究（公民科学）；如何开发软件程序（开源Linux操作系统和全球用户数排名第二的Firefox火狐浏览器都是由开源社区完成的）；如何利用空余的计算能力研究（分布式计算
xlayal·2021-05-16 05:34

Just do it-工作计划

图片发自App近期都在使用思维导图软件做工作计划和相关工作总结比较方便易操作，而且生成PPT方便保存和共享弊端就是绘制过程中不是用途而是偏重文字记录，以至于自己手绘的时候都不善于用图表现和突出重点用思维导图做工作计划究竟什么更重要我个人理解梳理工作思路更重要内容简洁明了量化好检测JustdoitHaveaniceday！图片发自App图片发自App
RubyWei1314·2021-05-14 09:02

边缘计算在物联网行业的应用

不看这几篇好文，就别说自己了解物联网引言  边缘计算并不是诞生于物联网时代，AKAMAI作为一家内容分发网络CDN和云服务的提供商，并且是世界上最大的分布式计算服务商之一，早在2003年就和IBM合作过
HaaS技术社区·2021-05-13 15:54

Flink源码(一)：Actor系统创建流程1

利用碎片时间阅读了一下Flink的源码，选择Flink主要出发点还是了解一个稳定的分布式计算系统的实现，另外也是由于Flink相对更加成熟的Spark有其独到的优势，相信其在下一代分布式计算中也会占有重要的地位
zqh_zy·2021-05-13 03:00

Filenet技术背景简析二：系统构成与运行机制介绍

分布式数据存储、P2P网络传输、分布式计算等底层功能由IPFS协议和Mine物理设备一起完成。在IPFS中，包含两
my_2017·2021-05-12 11:57

大数据Hadoop之MapReduce认识

MapReduce分布式计算模型，分而自治的理念，两层含义1）.大而化小。2）.异化而同。可以
悟成·2021-05-11 13:30

单核,多核,单线程,多线程,同步,异步的理论概念

单核多核单线程多线程同步异步原子操作非原子操作并发串行分布式计算阻塞非阻塞1、首先明确一点，对于单核CPU，任意一个时刻只有一个线程在运行。那么既然这样，多线程还有什么意义呢？
iStig·2021-05-08 16:23

大数据专用名词

一、MapReduceMapReduce是当前最著名也是运用最广泛的分布式计算框架，由Google建立。
BestFei·2021-05-08 13:46

RPC学习笔记

简单：RPC概念的语义十分清晰和简单，这样建立分布式计算就更容易。高效：过程调用看起来十分简单而且高效。通用：在单机计算中过程往往是
1angxi·2021-05-08 09:45

22 | 想成为架构师，你必须知道CAP理论

CAP理论第一版解释：简单翻译为：对于一个分布式计算系统，不可能同时满足一致性（Consistence）、可用性（Availability）、分区容错性（PartitionTolerance）三个设计约束
hedgehog1112·2021-05-07 00:59

精选的Python框架，库，软件和资源的精选清单【墙裂推荐收藏】

服务器异步编程声音的验证制作工具内置类增强内容管理系统快取ChatOps工具代码分析命令行界面开发命令行工具兼容性计算机视觉并发与并行配置密码学数据分析资料验证数据可视化数据库数据库驱动程序日期和时间调试工具深度学习DevOps工具分布式计算分配文献资料下载器电子商务编辑器插件和
程序猿中的BUG·2021-05-06 15:08

Hazelcast数据分发和集群平台管理中心的下载以及和SpringBoot进行集成

基于Apachev2许可证发布，可用于实现分布式数据存储、数据缓存、消息代理器以及分布式计算平台。Hazelcast强调高速访问分布式数据（通常是分布式的缓存）、分布式计算和分布式消息。
意识流丶·2021-05-06 06:55

SpringBoot2.0 基础案例(15)：配置MongoDB数据库，实现增删改查逻辑

2、NoSQL的优点/缺点--优点:高可扩展性分布式计算低成本架构的灵活性，半结构化数据没有复杂的关系--缺点:没有标准化有限的查询功能（到目前为止）数据展
知了一笑·2021-05-04 18:56

一、Hadoop生态圈

Hadoop是一个框架，允许在集群中使用简单的编程模型对大规模数据集进程分布式计算。
路飞大大gogo·2021-05-04 09:44

Spark矩阵相乘原理

现在我们来分析一下，哪些操作是相互独立的（从而可以进行分布式计算）。很显然，C中各个元素的计算都是相互独立的。
九七学姐·2021-05-03 10:43

Hadoop概述

Hadoop简介Hadoop是由Apache所开发的分布式系统基础架构，是适合海量数据的分布式存储和分布式计算的平台，Hadoop目前有四个模块，Hadoopcommon、HadoopDistributedFileSystem
xiao_小鱼·2021-05-01 19:32

关于MaxCompute的基本了解

MaxCompute为您提供了完善的数据导入方案以及多种经典的分布式计算模型，能够更快速的解决海量数据计算问题，有效降低企业成本，并保障数据安全。
云计算小百科·2021-05-01 16:41

Onyx - 分布式计算系统

Onyx首页、文档和下载-分布式计算系统-开源中国社区http://www.oschina.net/p/onyxOnyx是什么？
葡萄喃喃呓语·2021-04-28 23:20

Kubernetes 普及系列：容器基础入门

随着云原生时代的来临，云以及分布式计算已经是时下最受欢迎的技术之一了。其中Docker作为最知名的容器平台，到底有着怎样的魅力来让其无人不知无人不晓？
CODING_devops·2021-04-28 17:46
上一页 29 30 31 32 33 34 35 36 下一页
按字母分类： ABCDEFGHIJKLMNOPQRSTUVWXYZ其他