分布式演变第57页

景阳冈之旅

景阳冈的故事从小就听说对武松的仰慕从未消失过行者的一生仗剑江湖快意恩仇那叫一个快活如今三碗不过冈已演变成一个符号为人们津津乐道赤手打猛虎亦成为一种精神深入中华民族骨髓狭路相逢强强相遇勇者胜高手过招最为忌讳胆怯与认怂武松是成功的英雄人人尊崇老虎是前行的障碍绕不开躲不过武松打虎一战成名老虎虽死影响深远越夸大老虎越突出武松想赞颂武松离不开老虎于武松处见勇气明知山有虎偏向虎山行于老虎处见对立明知人除之偏拦

梦之蓝海绿意·2024-01-30 15:20

Spark的核心RDD（Resilient Distributed Datasets弹性分布式数据集）

Spark的核心RDD（ResilientDistributedDatasets弹性分布式数据集）铺垫在hadoop中一个独立的计算，例如在一个迭代过程中，除可复制的文件系统（HDFS）外没有提供其他存储的概念

fcyh·2024-01-30 15:46

Spark RDD（弹性分布式数据集）

1.RDD1.1RDD是什么RDD（ResilientDistributedDataset）：弹性分布式数据集，是Spark对数据集的抽象，代表一个只读、不可变、可分区、其中元素可进行并行计算的集合，并且是可跨越集群节点进行并行操作的有容错机制的集合

JOEL-T99·2024-01-30 15:15

Spark RDD基础实战(弹性分布式数据集)

官网的准备的数据集合启动Spark集群bin/spark-shell\--masterspark:centoshadoop1:7077官方文档:SparkRDDSpark提供了一种对数据的核心抽象,称为弹性分布式数据

蜗牛杨哥·2024-01-30 15:14

Spark弹性分布式数据集（Resilient Distributed Dataset）

1.弹性分布式数据集RDD1.1.RDD概述1.1.1.什么是RDDRDD（ResilientDistributedDataset）叫做分布式数据集，是Spark中最基本的数据抽象，它代表一个不可变、可分区

你狗·2024-01-30 15:14

Spark——（RDD(弹性分布式数据集)，RDD的创建和操作，Transformation 算子）

文章目录RDD(弹性分布式数据集)RDD的创建和操作常见的Transformation算子RDD(弹性分布式数据集)RDD（ResilientDistributedDataset）是Spark中的核心概念

想做CTO的任同学...·2024-01-30 15:12

初识 RDD 弹性分布式数据集(Resilient Distributed Datasets)

RDD是什么RDD,全称为弹性分布式数据集(ResilientDistributedDatasets),是一个容错的,并行的数据结构,可以让用户显式地将数据存储到磁盘和内存中,并能控制数据的分区.同时,

腹黑客·2024-01-30 15:42

spark学习笔记：弹性分布式数据集RDD(Resilient Distributed Dataset)

弹性分布式数据集RDD1.RDD概述1.1什么是RDDRDD（ResilientDistributedDataset）叫做弹性分布式数据集，是Spark中最基本的数据抽象，它代表一个不可变、可分区、里面的元素可并行计算的集合

黄道婆·2024-01-30 15:39

SparkCore之RDD---弹性分布式数据集

目录：RDD的设计与运行原理一、RDD设计背景二、RDD概念1.什么是RDD？2.RDD的属性三、RDD特点1.可分区2.不可变3.依赖关系4.缓存（cache）5.检测点（CheckPoint）四、RDD的创建1.通过并行化的方式创建RDD2.读取文件生成RDD3.通过其他RDD转换五、RDD运行过程RDD的设计与运行原理Spark的核心是建立在统一的抽象RDD上的，使得Spark的各个组件可以

孤独の√ 3·2024-01-30 15:09

横扫Spark之 - RDD（Resilient Distributed Dataset）弹性分布式数据集

水善利万物而不争，处众人之所恶，故几于道文章目录一、概念二、理解1.弹性2.分布式3.数据集三、5个主要特性1.一个分区列表2.作用在每个分区上的计算函数3.一个和其他RDD的依赖列表4.一个分区器（可选

阿年、嗯啊·2024-01-30 15:07

ZK和ETCD的产品对比和差异

李姓门徒·2024-01-30 15:03

数据库管理-第140期为什么有人无脑吹分布式（20240126）

数据库管理140期2024-01-26第140期为什么有人无脑吹分布式（20240126）1环境2场景3首席补刀总结第140期为什么有人无脑吹分布式（20240126）作者：胖头鱼的鱼缸（尹海文）OracleACEAssociate

胖头鱼的鱼缸（尹海文）·2024-01-30 15:02

Redis：企业级的深入

一.Redis集群1.1集群的概念和优势Redis集群是通过分布式部署多个节点来提高性能和可用性的解决方案。

星光闪闪k·2024-01-30 15:16

2PC（两阶段提交）方案

方案2PC的传统方案是在数据库层面实现的，如Oracle、MySQL都支持2PC协议，为了统一标准减少行业内不必要的对接成本，需要制定标准化的处理模型及接口标准，国际开放标准组织OpenGroup定义了分布式事务处理模型

CodingSoldier·2024-01-30 15:45

CAP和BASE理论

它指出一个分布式计算系统不可能同时满足以下三点：•一致性（Consistency）：等同于所有节点访问同一份最新的数据副本•可用性（Availability）：每次请求都能获取到非错误的响应——但是不保证获取的数据为最新数据

CodingSoldier·2024-01-30 15:15

手把手带你Git入门，从下载到精通，常用git命令

文章目录Git概述什么是GitGit历史Git是什么为什么要使用Git什么是版本控制系统Git和SVN对比SVN集中式SVN优缺点Git分布式Git优缺点Git工作流程四个工作区域工作流程Git下载与安装下载

OldGj_·2024-01-30 14:04

京东面试官：Redis 这些我必问

京东面试官：Redis这些我必问原创·LBL-埃文斯分布式缓存缓存好处：高性能+高并发高性能（常用）数据库查询耗费了800ms，其他用户对同一个数据再次查询，假设该数据在10分钟以内没有变化过，并且10

薇薇细雨·2024-01-30 14:34

浅谈数据中台架构设计

中台这个词在互联网行业现在越来越火了，从以前对中台一词的争议，到现在演变成各种中台产品林立，加上阿里百度等中台架构的成功，可以看到中台产品在未来一段时间都会是互联网行业非常火爆的赛道，尤其是数据中台更会是很多企业采纳的数据治理方案

何处生才·2024-01-30 14:51

程序员必备！10款实用便捷的Git可视化管理工具

Git是一种分布式版本控制系统，它可以记录文件的修改

工业甲酰苯胺·2024-01-30 14:11

云原生数据库GaiaDB的核心技术演进

新的技术架构带来新的问题和挑战，GaiaDB在自研过程中采用Quorum分布式协议、高性能网络、高可靠分布式存储引擎等技术实现更高的性能和可用性。

郎岳樟·2024-01-30 14:08

云单元架构，如何赋能数字化转型呢？

从集中式架构到分布式架构传统的集中式IT系统架构如下图所示，由小型机（比如IBM的P系列等）、存储设备（EMC的VNX系列等）、硬件负载均衡设备（典型的比如F5）等基础设施构成，这些硬件设

博文视点·2024-01-30 13:46

Oracle 9i，10g/11g，12c中的i，g，c分别代表什么含义

为了迎合分布式计算而推出的版本。c是cloud，云计算的意思。

沧海拾遗qaq·2024-01-30 13:06

学习《宋词经典》

讲课的教授老师是陶然，他讲课通俗易懂，从燕乐和词的发展，到词调、词乐、词牌的演变都做了详尽的解说。燕乐在唐朝就存在，最早是从西域歌舞、还有本土词乐、以及歌伎传唱，而广泛

尊道贵德Layla·2024-01-30 13:30

解锁Web3：数字未来的大门

Web3不仅仅是一种技术升级，更是一种思维方式的演变，强调去中心化、智能合约

dingzd95·2024-01-30 13:26

ETL能实现什么流程控制方式？

一、ETLCloud特点ETLCloud作为数据处理工具，具有以下特点：高效性：采用分布式计

RestCloud·2024-01-30 13:43

分布式系统理论-CAP和BASE

分布式系统理论中的CAP定理和BASE理论是理解和设计可靠分布式服务的基础。同时，正确实施负载均衡策略和自定义负载均衡机制是维护这些系统性能和可用性的实践措施。

辞暮尔尔-烟火年年·2024-01-30 13:39

分布式事务Seata

1.分布式事务1.1简介本地事务–ACID分布式事务跨数据源跨服务1.2CAP理论-BASE理论CAP理论BASE理论–对CAP的一种解决思路BasicallyAvailable（基本可用）：分布式系统出现问题的时候

小悟空GK·2024-01-30 12:14

100Wqps短链系统，怎么设计？

这道题，看上去业务简单，其实，覆盖的知识点非常多：高并发、高性能分布式IDRedisBloomFilter高并发、低内存损耗的过滤组件知识分库、分表海量数据存储多级缓存的知识HTTP传输知识二进制、十六进制

程序一逸·2024-01-30 12:32

ZooKeeper 分布式锁-原理&简单代码实现

ZooKeeper基础-数据结构、服务端/客户端常用命令二、ZooKeeperJavaAPI基本操作-建立连接&增删改查三、ZooKeeperJavaAPI操作-CuratorWatch事件监听零、本文纲要一、分布式锁二

石头耳东·2024-01-30 12:44

[k8s系列]：kubernetes·概念入门

文章目录序言1kubernetes概述1.1kubernetes解决的问题1.1.1部署方式的演变1.1.2容器化部署——容器编排问题1.2kubernetes组件1.2.1kubernetes组件调用关系

欧尼焦·2024-01-30 12:27

高性能和多级高可用，云原生数据库 GaiaDB 架构设计解析

1云原生数据库和GaiaDB目前，云原生数据库已经被各行各业大规模投入到实际生产中，最终的目标都是「单机+分布式一体化」。但在演进路线上，当前主要有两个略有不同的路径。

百度智能云技术站·2024-01-30 12:22

Redis面试（二）

1.Redis集群了解吗前面说到了主从同步存在高可用和分布式问题，哨兵机制解决了高可用问题，而集群就是终极方案，一举解决高可用和分布式问题。

海的辽阔·2024-01-30 12:21

软件设计师-10.网络与信息安全基础知识

数据通信：在计算机之间传送各种信息资源共享：硬件资源共享、软件资源共享负荷均衡：计算机网络中可以对数据进行集中处理和分布式处理提高可靠性：计算机网络中的各台计算机可以通过网络彼此互为后备机10.1.2网络传输介质有线传输介质例子特点同轴电线传输电信号

陈建111·2024-01-30 12:46

分布式服务框架--第三章：通信框架

前言：常用的RPC通信框架：包括GRPC，Restful，Netty等。一.网络分层图深度截图_选择区域_20201108143210.png二.关键技术点分析1.长连接和短连接1）长/短:指的是多次数据交换能否复用同一条连接，而不是连接的持续时间长短。2）TCP连接本身并没有长短的区分，长或短只是上层应用或协议使用其方式。UDP没有连接说法。3）HTTP1.0作为TCP的上层协议，开始支持长连接

celusing·2024-01-30 12:36

分布式事务

分布式事务的需求来源是要在分布式中保持一组操作的事务性。

少越·2024-01-30 11:40

美德是不带有权威性的（1月16日）

毕竟美德或伦理不是可以被仿效的东西，一旦演变成机械化的模式，美德就不见了。美德如同谦虚一样，是无法培养的，你只能在每个当下活出它们来。心若是不谦虚是无法学习的。

ykxcxlm·2024-01-30 11:47

Guava EventBus详解

应用场景：进程内部通信，不能用于分布式场景，分布式场景请使用MQ。Eve

融极·2024-01-30 11:47

基于Lucene查询原理分析Elasticsearch的性能

前言Elasticsearch是一个很火的分布式搜索系统，提供了非常强大而且易用的查询和分析能力，包括全文索引、模糊查询、多条件组合查询、地理位置查询等等，而且具有一定的分析聚合能力。

云栖社区v·2024-01-30 11:45

AIGC专题：2024年金融业生成式AI应用报告

（报告出品方：度小满）前言毫无疑问，生成式人工智能是2023年全球最具影响力的创新科技，它代表着一种范式转变，从专门的技术追求演变为商业和金融领域的焦点。

人工智能学派·2024-01-30 11:38

【JS逆向实战-入门篇】某gov网站加密参数分析与Python算法还原

吴秋霖·2024-01-30 11:36

本地MinIO存储服务通过Java程序结合Cpolar内网穿透进行远程连接

Buckets和AccessKeys2.Linux安装Cpolar3.创建连接MinIO服务公网地址4.远程调用MinIO服务小结5.固定连接TCP公网地址6.固定地址连接测试前言MinIO是一款高性能、分布式的对象存储系统

小沈YO.·2024-01-30 11:01

数据库拆分

1.缓解web网站的压力2.增强数据库读写性能3.提高用户访问的速度数据库拆分架构演变过程，如下图所示：image.png数据库拆分环境规划主机名称应用环境内网地址外网地址web01ng

_不想翻身的咸鱼·2024-01-30 11:32

三六九等的人

演变至今，人人都是平等的，相对于以前的奴隶社会封建社会，我们的人格是独立的，我们的人权是受到法律保障的。那为什么还有的人感觉自己高人

识也无涯·2024-01-30 11:53

CAP理论 & Redis架构

CAP的定义Consistency(一致性)：“allnodesseethesamedataatthesametime”,即更新操作成功并返回客户端后，所有节点在同一时间的数据完全一致，这就是分布式的一致性

Lubo_41df·2024-01-30 11:12

为什么要使用 Nacos 作为配置中心？

在现代的分布式系统开发中，配置管理变得越来越重要。而Nacos（阿里巴巴开源的分布式配置中心）作为一款强大、可扩展且易于使用的配置管理工具，正逐渐成为开发者们的首选。

啄sir.·2024-01-30 10:54

第一节分布式架构设计理论与Zookeeper环境搭建

目录1.分布式架构设计理论1.分布式架构介绍1.1什么是分布式1.2分布式与集群的区别1.3分布式系统特性1.4分布式系统面临的问题2.分布式理论2.1数据一致性2.1.1什么是分布式数据一致性2.1.2

做个专注的工程师·2024-01-30 10:48

《边缘计算》施巍松——第二章读书笔记

第二章边缘计算基础2.1分布式计算分布式计算：通过互联网将许多计算机节点互联，将单台计算机无法完成的计算任务分解成多个任务分配到网络中的多台计算机中执行，将各个节点的执行结果整合成最终结果并返回挑战主要来自异构性

xiao_wyy·2024-01-30 10:00

MySQL导入excel教程（踩坑记录）

分布式数据库遇到的小问题在导入数据的时候遇到了很多小问题，记录一下（写个作业不容易啊啊啊）一、导入数据首先，excel文件转为csv格式。然后用记事本打开csv文件，另存为utf-8。

雨后雾森林·2024-01-30 09:34

快速上手Git

的常用命令Git全局配置获取Git仓库基本概念本地仓库操作远程仓库操作分支操作标签操作三、在IDEA中使用Git在IDEA中配置Git本地仓库操作远程仓库操作分支操作冲突解决一、Git概述Git是一个分布式版本控制工具

过✪·2024-01-30 09:55

2023淘宝双十一超级红包活动时间及领取方法

点击查看】双十一完整购物攻略入口【点击查看】双十一完整购物攻略入口【点击查看】双十一超级红包领取【通用】：淘宝搜索：红包到手6222京东搜索：粉丝领红包71011月11日，双十一购物节已经从平凡的节日演变为全民参与的网络购物盛宴

林哥超酷·2024-01-30 09:00

推荐频道

分布式演变