分布式架构相关第33页

分布式文件存储系统minio

参考Linux搭建免费开源对象存储wgethttps://dl.minio.io/server/minio/release/linux-amd64/minioyuminstall-ywgetyuminstall-ywgetwgethttps://dl.minio.io/server/minio/release/linux-amd64/miniochmod+xminiosudomvminio/usr

linux实践操作记录·2024-02-06 06:26

问题排查利器 - 分布式 trace

在分布式系统开发中，系统间的调用往往会横跨多个应用之间的接口。

J_HelloWorld·2024-02-06 06:26

【专业技术】高效并行分布式深度学习策略，助力模型训练与量化

我们是一家专注于提供高效深度学习解决方案的专业团队，为您提供并行分布式策略、高效精调策略、大模型无损量化和高性能推理服务。

路人与大师·2024-02-06 06:26

分布式光伏电站开发存在哪些问题？

光伏电站在开发过程中仍旧存在些问题，本文将对分布式光伏电站开发建设所存在的问题和困难进行探讨。

鹧鸪云光伏与储能软件开发·2024-02-06 06:26

Flink on k8s 讲解与实战操作

其针对数据流的分布式计算提供了数据分布，数据通信及容错机制等功能。

LinkSLA·2024-02-06 06:56

谈谈mybatis的理解（一）

不能很好的分离数据库语句和Java语句，造成代码不易维护代码重复度高：大量重复的代码SQL参数固定：SQL语句的参数固定，使得SQL语句不灵活，无法满足多变的场景底层技术：JDBC属于底层的技术，不支持分布式

猿究院陈安·2024-02-06 06:47

MongoDB的操作和理解

MongoDB：基于分布式文件存储的数据库由C++语言编写。旨在为WEB应用提供可扩展的高性能数据存储解决方案。

猿究院陈安·2024-02-06 06:14

开源组件Kafka Connect推荐

KafkaConnect同时支持分布式模式和单机模式，另外提供了一套完整的REST接口，用于查看和管理KafkaConnectors，还具有offset自动管理，可扩展等优点。

佛系小懒·2024-02-06 05:07

CentOS 8 安装配置 Hadoop3.3.6 伪分布式安装方式（适用于开发和调试）

1.配置服务器ssh免密登录，否则后面启动会报错：尝试通过SSH连接到主机出现认证错误的提示配置服务器ssh免密登录：1.生成SSH密钥对（如果尚未生成）：执行下面的命令生成密钥对，一直回车即可ssh-keygen-trsa出现下面的提示说明生成成功了：2.第二步，将公钥添加到~/.ssh/authorized_keys文件：cat~/.ssh/id_rsa.pub>>~/.ssh/authori

鱼大虾·2024-02-06 05:39

python 调用windows COM组件

question/49433640，大概的总结就是一种已经过时的技术，COM是OO技术的巅峰之作，COM之后的OO都是COM的子集而已COM的意图在于标准化OO组件的界面，使得跨平台跨语言跨机器跨进程的分布式对象服务可以标准化

Onsunsl·2024-02-06 05:07

HDFS入门基础

HDFS总结在现代的企业环境中，海量数据超过单台物理计算机的存储能力，分布式文件系统应运而生，对数据分区存储于若干物理主机，管理网络中跨多台计算机存储的文件系统。

nucty·2024-02-06 05:33

Apache Hadoop

ApacheHadoop_狭义上说，Hadoop指Apache一款java语言开发的开源框架，它的核心组件有：HDFS（分布式文件系统）：解决海量数据存储YARN（作业调度和集群资源管理的框架）：解决资源任务调度

VincentLeon·2024-02-06 05:28

带你学习Seata分布式事务

❤️文章目录分布式事务一、分布式事务问题1.1本地事务1.2分布式事务二、分布式理论2.1CAP定理①一致性②可用性③分区容错④矛盾2.2BASE理论2.3解决分布式事务的思路

欧克小奥·2024-02-06 05:58

随着网络的快速发展，网络安全问题也日益凸显，遇到攻击该如何处理，如何抉择合适的防护方案

其中，DDoS（分布式拒绝服务）攻击被认为是网络安全领域里最为严重的威胁之一。毫无疑问，DDoS攻击不仅可以导致网络服务中断，还可能造成企业财务损失和声誉受损。

德迅云安全_初启·2024-02-06 04:24

探讨Redis分布式锁的正确使用姿势

探讨Redis分布式锁的正确使用姿势】https://mp.weixin.qq.com/s/dnaU5x37fj2vJVXu-hxIBQ日常开发中，秒杀下单、抢红包等等业务场景，都需要用到分布式锁。

dingxutao·2024-02-06 04:52

RocketMQ和Kafka的区别，以及如何保证消息不丢失和重复消费

的区别性能（单台）语言多语言支持客户端优缺点RocketMQ十万级javajava模型简单、接口易用，在阿里有大规模应用文档少，支持的语言少Kafka百万级服务端scala，客户端java主流语言均支持天生分布式

Marciaguoguo·2024-02-06 04:38

SpringCloud和SpringCloudAlibaba的核心组件

注册中心，用于服务的注册和发现Ribbon/openFeign:负载均衡/服务调用【轻量级Restful风格的http服务客户端，用于替代已经停更的netflixfeign】Hystrix：断路器，提高分布式系统的弹性

Marciaguoguo·2024-02-06 04:37

RocketMQ：消息存储

通常来说我们对分布式队列有高可靠性的要求，所以数据要进行持久化存储。消息生产者发送消息到MQ。MQ收到消息，将消息进行持久化，即在存储系统中新增一条记录。返回ACK确认消息给生产者。

Anbang713·2024-02-06 04:24

2022-03-01 为什么混合始终在线保护是您的最佳选择

然而，问题在于，新一代更大、更复杂的分布式拒绝服务(DDoS)攻击使DDoS保护成为一项比以往更具挑战性的任务。大规模的物联网僵尸网络正在导致规模越来越大的DDoS攻击，而更复杂的应用层攻击则找

Eliza_卓云·2024-02-06 04:53

2018-05-17

Git介绍及注册git介绍git(https://github.com/)是分布式版本控制技术SVN是集中式管理版本控制技术代码托管平台：github,码云，gitlab等第一步注册github及创建仓库第二步生成公钥和密钥命令

奇妙琦·2024-02-06 04:32

PySpark（四）PySpark SQL、Catalyst优化器、Spark SQL的执行流程

DSLSQLSparkSQLShuffle分区数目DataFrame数据写出SparkUDFCatalyst优化器SparkSQL的执行流程PySparkSQL基础PySparkSQL与Hive的异同Hive和Spark均是:“分布式

独憩·2024-02-06 03:14

分布式文件系统JuiceFS测试总结

前言2021年开始，开源社区出现了一款名为JuiceFS的云原生分布式文件系统。这是一款由国内公司开源的分布式文件系统，2021年1月在GitHub上开源，支持k8s原生适配及多种应用场景。

啊码·2024-02-06 03:34

鸿蒙系统（非常详细）从零基础入门到精通，看完这一篇就够了

系统定义系统定位技术架构内核层系统服务层框架层应用层技术特性硬件互助，资源共享一次开发，多端部署统一OS，弹性部署系统安全正确的人正确的设备正确地使用数据系统定义系统定位HarmonyOS是一款面向万物互联时代的、全新的分布式操作系统

Python_chichi·2024-02-06 02:16

全新鸿蒙系统

一，开发框架基础二，官网地址文档开发：华为HarmonyOS智能终端操作系统官网|应用设备分布式开发者生态三，基础了解鸿蒙系统是基于js和ts衍生出来的一个东西要学arkts就要学习js和ts语法四，优点

阿金要当大魔王~~·2024-02-06 02:45

Docker安装部署ELK (Elasticsearch+Kibana+Logstash+Filebeat)

Elasticsearch是个开源分布式搜索引擎，它的特点有：分布式，零配置，自动发现，索引自动分片，索引副本机制，restful风格接口，多数据源，自动搜索负载等。

zhanglb12·2024-02-06 02:57

一文读懂ElasticSearch底层原理

一、ES基本概念介绍1.ES简介ES是一个分布式、可扩展的、近实时的，有数据搜索、分析与存储的引擎。支持全文搜索、结构化搜索、半结构化搜索、数据分析、地理位置和对象间关联关系搜索等功能。

数据猴赛雷·2024-02-06 02:37

O2OA RCE 远程命令执行漏洞复现(CVE-2022-22916)

2、漏洞概述O2OA是一个基于J2EE分布式架构，集成移动办公、智能办公，支持私有化部署，自适应负载能力的，能够很大程度上节约企业软件开发成本，基于AGPL协议开放源代码的企业信息化系统需求定制开发平台解决方案

OidBoy_G·2024-02-06 01:31

鸿蒙系统（HarmonyOS）之方舟框架（ArkUI）介绍

ArkUIArkUI是一套构建分布式应用界面的声明式UI开发框架。它使用极简的UI信息语法、丰富的UI组件、以

亚丁号·2024-02-06 01:21

git 三种合并方式（rebase / merge / squash）

git三种合并方式（rebase/merge/squash）问题背景三种合并初始化mergeRebaseRebaseandmergeSquashandmerge优缺点问题背景在使用Git（分布式版本控制系统

初原挽风·2024-02-06 01:49

分布式存储ceph——（4）openstack对接ceph存储后端

一、使用rbd方式提供存储如下数据：（1）image：保存glanc中的image；（2）volume存储：保存cinder的volume；保存创建虚拟机时选择创建新卷；image（3）vms的存储：保存创建虚拟机时不选择创建新卷；image二、实施步骤：（1）客户端也要有cent用户：useraddcent&&echo"123"|passwd--stdincentecho-e'Defaults:

WickJohn·2024-02-06 01:38

openGauss X ShardingSphere，分布式方案的另一种最佳实践

面对如今海量数据，超高并发等诸多场景，openGauss将目光转向于分布式解决方案，专注于解决海量数据存储、超高并发吞吐、大表瓶颈等众多难题，与ShardingSphere一起构建全栈开源分布式解决方案

胡正策·2024-02-06 00:06

ShardingSphere实现openGauss分布式架构

本文档采用openGauss结合ShardingSphere中间件的架构，实现openGauss数据库分布式OLAP场景的环境部署。

福娃筱欢·2024-02-06 00:34

Java设计模式(GOF)-23中设计模式-更新中

艾利克斯冰·2024-02-06 00:06

redis 极简分布式锁实现

写在前面工作中遇到，整理reids做简单分布式锁的思考博文适合刚接触redis的小伙伴理解不足小伙伴帮忙指正对每个人而言，真正的职责只有一个：找到自我。然后在心中坚守其一生，全心全意，永不停息。

山河已无恙·2024-02-05 23:22

《Python 网络爬虫简易速速上手小册》第8章：分布式爬虫设计（2024 最新版）

文章目录8.1分布式爬虫的架构8.1.1重点基础知识讲解8.1.2重点案例：使用Scrapy和Scrapy-Redis构建分布式爬虫8.1.3拓展案例1：使用Kafka作为消息队列8.1.4拓展案例2：

江帅帅·2024-02-05 23:47

SpringCloud微服务入门

如何实现nacos和eureka的区别负载均衡是如何实现的Ribbon的负载均衡策略有哪些如何自定义负载均衡策略什么是服务雪崩，怎么解决这个问题微服务是如何监控的项目中有没有做限流，怎么做的CAP和BASE分布式事务的解决方案分布式服务的接口幂等性如何设计

屈家全·2024-02-05 23:12

ASP.NET下MVC设计模式的实现

hzleihuan·2024-02-05 23:10

Redis入门指南

文章目录Redis概述Redis基本数据类型Redis与MySQL的区别以及使用场景如何保持双写一致性（缓存一致性）1.延迟双删2.分布式锁（强一致性时使用）3.中间件Redis持久化机制RDB（redisdatabase

屈家全·2024-02-05 23:37

2024最新版鸿蒙HarmonyOS开发工具安装使用指南

华为鸿蒙系统（HUAWEIHarmonyOS），是华为公司在2019年8月9日于东莞举行的华为开发者大会（HDC.2019）上正式发布的分布式操作系统。

Jackson@ML·2024-02-05 23:22

PyTorch 2.2 中文官方教程（十九）

使用RPC进行分布式管道并行原文：pytorch.org/tutorials/intermediate/dist_pipeline_parallel_tutorial.html译者：飞龙协议：CCBY-NC-SA4.0

绝不原创的飞龙·2024-02-05 22:18

Flume 学习之路（一）Flume 概述和基本架构

Flume是一个分布式、可靠且高可用的服务，用于有效地收集，聚合和移动大量日志数据。它具有基于流数据的简单灵活架构，良好的可靠性机制、故障转移和恢复机制，具有强大的容错性。

白白贺·2024-02-05 20:23

手写百万并发连接的RPC框架之Netty篇

前言前面我们已经介绍了，使用JDK原生自带的Socket门面模式手写了注册中心、远程客户端、远程服务端三个模块来构成一个RPC框架，但是性能不是很高，远远无法支撑起大型的分布式系统之间的调用，于是我们今天来分享下如何用

coffee_babe·2024-02-05 20:55

数据库三级模式/两级映像

这里说的数据库不局限于关系型数据库）1.如果从DBMS角度来看，数据库通常采用三级模式结构，也就是说DBMS内部的系统结构是三级模式结构2.如果从数据库最终用户角度来看，数据库系统的结构可分为：单用户结构、主从式结构、分布式结构

mayiwoaini·2024-02-05 20:43

大数据之 ZooKeeper原理及其在Hadoop和HBase中的应用

链接：https://blog.csdn.net/zhang123456456/article/details/78008626ZooKeeper是一个开源的分布式协调服务，由雅虎创建，是GoogleChubby

yangfhit·2024-02-05 20:29

设计与部署稳定的分布式系统》

英文版原名：ReleaseIt!DesignandDepolyProducation-ReadySoftware不太习惯这本书的翻译，读起来令人略感不适，：(总结：这本书比较全面的介绍了建设稳定系统的反模式与模式，涵盖了软件系统开发的方方面面，当读到一些例子时能让人联想到工作中遇到的一些故障案例。这些模式与反模式往往是我们在进行系统的设计中容易忽略的，我们可能更关注了功能性设计而忽略了一些影响系统

零一间·2024-02-05 20:36

PHP客服系统-vue客服聊天系统

系统亮点：分布式部署支持，轻松应对高并发场景；本地消息存储功能，确保数据安全可靠；自动欢迎语及常见问题分组展示，提升用户体验；知识库个人或通用回复支持，快速解决客户问题；自定义昵称、图像、按钮、图标及样式

行动之上·2024-02-05 19:49

深度神经网络的训练过程,深度神经网络如何训练

为期5周的课程学习中，你将全面了解AI深度学习的相关知识，掌握人工神经网络及卷积神经网络原理、循环神经网络原理、生成式对抗网络原理和深度学习的分布式处理，并应用于企业级项目实战。

小浣熊的技术·2024-02-05 19:39

ETO：架接社区共识，促进价值观统一

先回顾下第一阶段ETO的成果，主打分布式社区的GenesisSpace，主打跨链协议的Herdius，分别用51秒和54秒就实现2000

哈啦呼噜·2024-02-05 19:48

MongoDB 中的分布式集群架构

线上使用的MongoDB大部分的场景我们都会考虑使用分布式结构，这里我们来了解一下MongoDB中的分布式架构。

程序员老舅·2024-02-05 19:22

EOS会成为区块链3.0吗

当EOS完成系统目标之后，任何团队都可以在EOS上以比较快的速度开发出所需要的Dapp（基于区块链的分布式应用），这些应用可以让普通人无需任何手续费（gas）就可以方便地使用，甚至很难感受到在使用的是区块链应用

程序员大叔日记·2024-02-05 19:40

推荐频道

分布式架构相关