分布式架构设计

企业级业务架构（EBA）设计方法论

设计方法论引言目的和背景业务架构定义与重要性设计方法论概述企业战略与业务架构关系企业战略制定过程业务架构对企业战略支撑作用战略导向下业务架构调整策略EBA设计原则与方法设计原则设计方法关键成功因素EBA核心组件设计组织架构设计流程体系设计信息系统架构设计数据治理与管理体系设计
数字化建设方案·2024-09-06 10:49

【Spark高级应用】使用Spark进行高级数据处理与分析

ApacheSpark作为一种高效的分布式计算框架，凭借其高速、易用、通用和灵活的特点，已经成为大数据处理和分析的首选工具。
爱技术的小伙子·2024-09-06 10:47

EI会议推荐-第二届大数据与数据挖掘国际会议（BDDM 2024）

.com主办方：武汉纺织大学会议时间：2024年12月13日-12月15日会议地点：湖北武汉02征稿主题：包含（但不限于）以下领域：大数据：大数据分析、人工智能、大数据网络技术、大数据搜索算法和系统、分布式和点对点搜索
shiyuankeyan·2024-09-06 08:36

企业架构设计（业务架构、数据架构、应用架构、技术架构）方法及实例

企业架构设计方法及实例企业架构设计方法及实例企业架构设计概述定义与重要性架构设计原则架构设计流程业务架构设计业务架构定义与目标业务架构组成要素业务架构设计方法业务架构实例分析数据架构设计数据架构定义与目标数据架构组成要素数据架构设计方法数据架构实例分析应用架构设计应用架构定义与目标应用架构组成要素应用架构设计方法应用架构实例分析技术架构设计技术架构定义与目标技术架构组成要素技术架构设计方法技术架构
数字化建设方案·2024-09-06 08:06

Kafka

Kafka是一个高性能的分布式消息队列系统，最初由LinkedIn开发，后来成为Apache软件基金会的一部分。Kafka设计用于处理大规模的数据流，提供高吞吐量、低延迟的消息传递机制。
傲雪凌霜，松柏长青·2024-09-06 07:57

软考高级架构师/分析师论文【论软件系统架构评估/架构评估方法】

我作为该项目的系统架构师，主要负责架构设计、架构评估等工作。本文以该项目为例，主要论述ATAM架构评估方法在该项目中的具体应用与效果。
saikey0379·2024-09-06 06:52

2024年Python最新Python爬虫教程-新浪微博分布式爬虫分享(2)

Python编辑器：Pycharm；MongoDB管理工具：MongoBooster；Redis管理工具：RedisStudio）爬虫框架使用Scrapy，使用scrapy_redis和Redis实现分布式
2401_84584682·2024-09-06 05:45

Apache Flink 运行时架构

Flink运行时架构Flink整个系统由两个主要部分组成JobManager和TaskManager，Flink架构也遵循Master-Slave架构设计原则，JobManager为Master节点，TaskManager
生病的毛毛虫·2024-09-06 04:44

Spark MLlib模型训练—聚类算法 K-means

ApacheSpark提供了K-means聚类算法的高效实现，支持大规模数据的分布式计算。本文将详细介绍K-means聚类算法的原理，并结合Spark
不二人生·2024-09-06 04:14

Java分布式ID生成解决方案

Java分布式ID生成解决方案参考文章：（1）Java分布式ID生成解决方案（2）https://www.cnblogs.com/hxun/p/11451629.html备忘一下。
短期菜鸟·2024-09-06 04:10

Spark的Web界面

Storage-此视图展示了数据如何在RDDs（弹性分布式数据集）之间进行分层存储，以及
静听山水·2024-09-06 04:40

Java 7.1 - 理论 & 算法 & 协议

C：Consistency一致性A：Availability可用性P：Partition分区容错性对于理论计算机科学，CAP定理指出，对于一个分布式系统而言，CAP中的三个只能同时满足两个。
没有韭菜的饺子·2024-09-06 04:39

Java 7.4 - 分布式锁

什么是分布式锁？对于单机多线程，我们使用ReentrantLock这类本地锁来控制多个线程对本地共享资源的访问；而对于分布式系统，我们使用分布式锁来控制多个服务对共享资源的访问。
没有韭菜的饺子·2024-09-06 04:39

Java实战：分布式ID生成方案

在分布式系统的设计与开发过程中，如何生成全局唯一、有序且高可用的ID是一个绕不开的核心问题。尤其是在电商、社交网络、金融交易等领域，ID不仅是业务数据的重要标识，还可能直接影响系统的稳定性和扩展性。
拥抱AI·2024-09-06 04:39

java分布式ID生成组件

1、新建WorkId类packagecom.hua.common.id;importorg.apache.commons.lang3.RandomUtils;importorg.apache.commons.lang3.StringUtils;importjava.net.Inet4Address;importjava.net.UnknownHostException;/***@Deacripti
hong_myth·2024-09-06 03:08

Xline v0.2.0: 一个用于元数据管理的分布式KV存储

Xline是一个基于Curp协议的，用于管理元数据的分布式KV存储。现有的分布式KV存储大多采用Raft共识协议，需要两次RTT才能完成一次请求。
达坦科技DatenLord·2024-09-06 03:35

大厂程序员都会的分布式RPC框架，直接无私打包分享，手慢无

一.概述什么是RPC？远程服务调用官方：一种通过网络从远程计算机程序上请求服务，而不需要了解底层网络技术的思想通俗一点：客户端在不知道调用细节的情况下，调用存在于远程计算机上的某个对象，就像调用本地应用程序中的对象一样。市面上常见的rpc框架：dobbo，springCloud，gRPC...那为什么要有RPC，HTTP不好么？因为RPC和HTTP就不是一个层级的东西，所以严格意义上这两个没有可比
卡卡的Java架构笔记·2024-09-06 02:56

JuiceFS 社区版 v1.2 发布，新增企业级权限管理、平滑升级功能

JuiceFS是为云环境设计的分布式文件系统，支持超过10种元数据引擎和30种以上的数据存储引擎。
Juicedata·2024-09-06 01:24

经验笔记：RPC与高性能NIO框架

RPC与高性能NIO框架的经验笔记引言随着互联网技术的发展，分布式系统逐渐成为了现代软件架构的标准之一。
漆黑的莫莫·2024-09-06 01:21

python分布式集群ray_GitHub - Leesire-Python/jd_spider: 两只蠢萌京东的分布式爬虫.

使用scrapy,scrapy-redis,graphite实现的京东分布式爬虫，以mongodb实现底层存储。分布式实现，解决带宽和性能的瓶颈，提高爬取的效率。
weixin_39781930·2024-09-06 00:17

文章汇总 | 2018

12月RIA便签学习法10月财富最好的定义Spark分布式原理及碰到的三个坑在不断解决问题(矛盾)的过程进步9月《韭菜的自我修养》-股票交易是零和游戏吗?
学习之术·2024-09-05 22:27

Spark基础

一.基础1.RDD机制  1.rdd分布式弹性数据集，简单的理解成⼀种数据结构，是spark框架上的通⽤货币。所有算⼦都是基于rdd来执⾏的，不同的场景会有不同的rdd实现类，但是都可以进⾏互相转换。
Tom无敌宇宙猫·2024-09-05 22:26

【研发日记】Matlab/Simulink技能解锁(八)——分布式仿真

文章目录前言背景分布式仿真使用方式分析和应用总结参考资料前言见《【研发日记】Matlab/Simulink技能解锁(三)——在Stateflow编辑窗口Debug》见《【研发日记】Matlab/Simulink
Mr.Cssust·2024-09-05 21:53

[远光|天鹰]企业架构管控平台

它帮助企业实现架构内容元模型的定义、架构设计、架构治理、架构管控与架构资产管理。
我不叫喂喂喂喂喂喂喂喂喂·2024-09-05 20:19

Hadoop组件

以下是每个组件的简短介绍：HBase：一个分布式、面向列的NoSQL数据库，基于GoogleBigTable的设计理念构建。
静听山水·2024-09-05 20:14

《软件架构设计》一书目录

第一部分软件架构概念与思想篇1第1章解析软件架构概念31.1软件架构概念的分类31.1.1组成派41.1.2决策派51.2软件架构概念大观51.2.1Booch、Rumbaugh和Jacobson的定义51.2.2Woods的观点61.2.3Garlan和Shaw的定义61.2.4Perry和Wolf的定义61.2.5Boehm的定义61.2.6IEEE的定义61.2.7Bass的定义61.3软件
iteye_19129·2024-09-05 19:11

GBase 8c 分布式核心技术—CDC数据同步

作为一款分布式数据库，GBase8c可轻松实现例如两地三中心架构的集群异地灾备。GBase8c异地灾备集群间的不同节点采用各自对应的高可用部署方式，两地间采用同步或者异步复制的备份方式。
manhuai2022·2024-09-05 19:11

物联网平台的架构设计

设计一个物联网平台的系统架构需要考虑到以下几个关键方面：分层架构：物联网平台应采用分层架构，这样可以将整个系统划分为多个逻辑层次，每个层次负责不同的功能。一般来说，物联网平台可以包括以下几个层次：感知层：该层主要负责采集数据，包括温度、湿度、压力、重量、光照、声音等物理量。感知层需要支持各种传感器和数据采集设备，同时还需要支持数据转换和标准化。网络层：该层主要负责数据的传输，将感知层采集的数据传输
gehuodian2673·2024-09-05 19:10

物联网平台开发核心技术揭秘-架构设计篇

这一篇将讨论物联网平台架构设计，主要从物联网平台的概述、架构设计原则、要素以及设备层、数据处理层讨论。一、物联网平台概述物联网平台是实现物联网的核心组成
架构师修炼·2024-09-05 19:09

基于TOGAF企业架构方法论的一站式企业架构管控平台

远光天鹰企业架构管控平台帮助企业实现架构内容元模型的定义、架构设计、架构治理、架构管控与架构资产管理。
YG_JT·2024-09-05 19:08

2017年系统架构师案例分析试题一

在系统的需求分析与架构设计阶段，用户提出的需求、质量属性描述和架构特性如下：(a)系统用户分为高级管理员、数据管理员和数据维护员等三类；(b)系统应该具备完
帅次·2024-09-05 18:33

分布式架构基础-多线程

分布式架构基础-多线程基本概念进程：程序的一次执行过程线程：一个进程产生的多个线程并发：偏重于多个任务交替执行，可用于一个CPU并行：用于多个CPU同时执行任务高并发：通常考验指标为响应时间、吞吐量、每秒查询效率
猿日记·2024-09-05 18:00

“论面向服务架构设计及其应用”写作框架，软考高级论文写作，系统架构设计师

第一章项目摘要2023年，我参与了某公司汽车物流系统的研发项目，担任系统架构设计师的角色。该项目旨在构建一个高效、灵活且可扩展的汽车物流管理系统，以优化物流流程，提升业务响应速度，并降低运营成本。
ruankaohzijia.com·2024-09-05 17:54

腾讯，干掉 Redis 项目，正式开源、太牛逼啦

项目简介Tendis是腾讯互娱CROSDBA团队&腾讯云数据库团队自主设计和研发的分布式高性能KV存储数据库，兼容Redis核心数据结构与接口，可提供大容量、低成本、强持久化的数据库能力，适用于兼容Redis
六月·飞雪·2024-09-05 17:53

Apache Spark简介

Spark的核心概念包括：1.RDD（弹性分布式数据集）：RDD是Spark的基本计算单元，它代表了一个可并行操作的分布式对象集合。RDD可以通过加
不知名的小Q·2024-09-05 17:52

系统架构师考试学习笔记第三篇——架构设计高级知识（13）未来信息综合技术

本课时考点：第13课时主要学习信息物理系统技术、人工智能技术、机器人技术、边缘计算、数字孪生体技术以及云计算和大数据技术等内容。根据考试大纲，本课时知识点会涉及单项选择题（约占3~5分）和下午案例题（25分），论文也会有覆盖。本课时知识架构如图13.1所示。一、信息物理系统技术概述1.信息物理系统的概念信息物理系统（Cyber-PhysicalSystem,CPS),最早由美国国家航空航天局于19
SheldonK·2024-09-05 15:15

区块链技术

区块链技术是一种去中心化的数据库技术，透过分布式账本的方式，记录和验证数据的交易和交流。
寂然如故·2024-09-05 15:13

springboot整合kafka

Kafka是一个分布式的发布-订阅消息系统，它可以处理大量数据并提供高吞吐量。在本教程中，我们将使用SpringBoot2.7.2和Kafka2.8.1。
##明天·2024-09-05 15:42

1+X云计算运维与开发(中级)实战案例——Kafka集群部署

前言Kafka是一种开源的流处理平台和消息系统，被设计用于构建实时数据管道和流式应用程序，可以处理大规模的实时数据流，并提供高吞吐量、持久性存储和分布式处理能力。
kuuuugua·2024-09-05 15:41

深度学习的发展历程

深度学习的起源在机器学习中，我们经常使用两种方式来表示特征：局部表示（LocalRepresentation）和分布式表示（DistributedRepresentation）。
木亦汐丫·2024-09-05 13:00

Spark

1.核心概念RDD（ResilientDistributedDataset）：RDD是Spark的核心抽象，表示一个分布式的、不变的集合。它提供了对大数据集的容错机制，支持并行操作。
傲雪凌霜，松柏长青·2024-09-05 11:20

Windows系统下的Spark环境配置

一：Spark的介绍ApacheSpark是一个开源的分布式大数据处理引擎，它提供了一整套开发API，包括流计算和机器学习。
eeee~~·2024-09-05 11:19

Spring Cloud开发实战

SpringCloud是当今Java开发行业最为流行的分布式开发架构，使用其可以方便的搭建高可用、高性能、分布式的系统服务架构，本课程基于SpringCloudAlibaba的套件进行了实现架构的完整讲解
yootk·2024-09-05 11:47

GIT代码托管工具

Git是一个开源的分布式版本控制系统，用于敏捷高效地处理任何或小或大的项目。
Rebirth-LSS·2024-09-05 11:16

Hadoop-MapReduce机制原理

MapReduce特点3、MapReduce局限性4、MapTask5、Map阶段步骤：6、Reduce阶段步骤：7、MapReduce阶段图1、MapReduce概述  HadoopMapReduce是一个分布式计算框架
H.S.T不想卷·2024-09-05 11:46

Unity3D ECS架构的优缺点详解

Unity3D作为一款强大的游戏开发引擎，近年来在性能优化和架构设计上不断进化，其中ECS（Entity-Component-System）架构的引入是其重要的里程碑之一。
Clank的游戏栈·2024-09-05 11:14

软考-系统架构设计师（ESB-企业服务总线）

来源ESB的概念是从SOA发展而来，它是一种为进行连接服务提供的标准化的通信基础结构，基于开放的标准，为应用提供了一个可靠的、可度量的和高度安全的环境，并可帮助企业对业务流程进行设计和模拟，对每个业务流程实施控制和跟踪、分析并改进流程和性能。在一个复杂的企业计算环境中，如果服务提供者和服务请求者之间采用直接的端到端的交互，那么随着企业信息系统的增加和复杂度的提高，系统之间的关联会逐渐变得非常复杂，
李小斌96·2024-09-05 10:41

Git核心概念

1.概念Git就是一个典型的分布式版本控制系统，这类系统，客户端不只是提取最新版本的文件快照，而是把代码仓库完整的镜像下来，这样一来，任何一处协同工作用的服务器发生故障，事后都可以用任何一个镜像出来的本地仓库恢复
众愿·2024-09-05 09:34

Git 的基本概念和使用方式

Git是一种分布式版本控制系统，是用于跟踪文件的修改和协作工作的工具。它允许多个开发者同时对同一个代码库进行更改，并能够有效地处理并合并这些更改。
汽车软件工程师001·2024-09-05 08:52

速盾：高防 CDN 是一种有效的 DDoS 防御解决方案

在当今数字化时代，网络安全问题日益凸显，尤其是DDoS（分布式拒绝服务）攻击，给企业和个人带来了巨大的损失和困扰。
速盾cdn·2024-09-05 07:17
上一页 3 4 5 6 7 8 9 10 下一页
按字母分类： ABCDEFGHIJKLMNOPQRSTUVWXYZ其他