集群架构MAXSCALE

深入理解 Hadoop （二）HDFS架构演进

HDFS分布式集群架构设计实现核心设计思路：分而治之的思路，实现分散存储+冗余存储元数据管理核心问题：文件系统目录树文件和数据块的映射关系数据块和副本存储主机之间的映射关系NameNode内部两个非常重要的组件
我很ruo·2024-01-10 08:49

MongoDB高级集群架构设计

两地三中心集群架构设计容灾级别RPO&RTORPO（RecoveryPointObjective）：即数据恢复点目标，主要指的是业务系统所能容忍的数据丢失量。
Firechou·2024-01-09 13:30

Matlab实现标准化和归一化

一直使用python的sklearn库对数据进行标准化（归一化）处理，已经习惯了sklearn的一套操作（MinMaxScaler,StandardScaler）,但是最近项目需要使用Matlab，所以记录一下
Mobius8086·2024-01-09 12:56

MongoDB分片集群架构详解

分片简介分片（shard）是指在将数据进行水平切分之后，将其存储到多个不同的服务器节点上的一种扩展方式。分片在概念上非常类似于应用开发中的“水平分表”。不同的点在于，MongoDB本身就自带了分片管理的能力，对于开发者来说可以做到开箱即用。为什么要使用分片？MongoDB复制集实现了数据的多副本复制及高可用，但是一个复制集能承载的容量和负载是有限的。在你遇到下面的场景时，就需要考虑使用分片了：存储
Firechou·2024-01-09 10:40

《高性能Linux服务器构建实战》笔记

系统安全、故障排查、自动化运维、集群架构1、账号安全，安装完后可以删除的账号：adm,lp,sync,shutdown,halt,news,uucp,operator,games,gopher禁用登录功能
SkTj·2024-01-08 22:06

【云原生】初识Kubernetes的理论基础

内容预知1.k8s的由来及其技术运用1.1k8s的简介1.2传统后端部署与k8s的对比传统部署k8s的部署1.3k8s的主要功能2.k8s的集群架构与组件2.1k8s的集群机构的简单介绍2.2k8s的master
站在这别动，我去给你买橘子·2024-01-08 02:53

互联网软件架构演变——集群与分布式的区别

目录互联网软件架构演变单体架构优点缺点集群单体架构缺陷集群架构优势分布式集群与分布式的区别正常版白话版集群与分布式的联系联系1联系2集群，分布式举例集群举例：分布式举例：面向服务架构(SOA)微服务架构微服务架构优点微服务架构缺点完整的微服务架构图
Generalzy·2024-01-08 02:48

分类3：机器学习处理read-wine（红酒）数据集代码

目录1介绍2导入常用的工具箱3导入数据集4MinMaxScaler归一化5分别使用svm、knn、决策树、随机森林进行实验6使用PCA降维，然后使用随机森林进行分类7GridSearchCV调整rf的参数
王小葱鸭·2024-01-07 03:04

Redis哨兵模式相关知识

1.简介哨兵是redis集群架构中非常重要的一个组件,哨兵模式基于主从复制模式,当主从复制模式下的master主节点宕机,通过选举一个master继续提供服务;2.功能1>.集群监控:负责监控redismaster
一code当先·2024-01-06 18:48

Redis Cluster高可用(HA)集群环境搭建详细步骤以及SpringBoot连接Redis集群(带密码)

1.为什么要有集群由于Redis主从复制架构每个数据库都要保存整个集群中的所有数据,容易形成木桶效应，所以Redis3.0之后的版本添加特性就是集群(Cluster)2.Redis集群架构说明架构细节:
心多大，路多远·2024-01-06 18:17

Kubernetes（K8S）的基础概念

3、k8s的特性二、k8s集群架构与组件1、Master组件2、配置存储中心——etcd3、WorkerNode组件三、k8s核心概念==●Pod====●Pod控制器(五大控制器)====●Label
Zcien·2024-01-06 16:11

Redis集群架构解密：打造高性能分布式缓存引擎

目录1、前言2、Redis集群概述3、Redis集群架构的内部原理4、Redis集群的实现方式5、Redis集群的实现方式如何选择6、Redis集群的搭建7、结语1、前言在当今的互联网时代，随着用户数量的不断增长和业务流量的不断增加
凛鼕将至·2024-01-06 03:04

RabbitMQ 集群篇

RabbitMQ集群篇00、集群架构原理前面我们有介绍到RabbitMQ内部有各种基础构件，包括队列、交换器、绑定、虚拟主机等，他们组成了AMQP协议消息通信的基础，而这些构件以元数据的形式存在，它始终记录在
路面烧卖·2024-01-05 21:50

分布式集群架构场景化解决⽅案

致性Hash算法第⼆部分：集群时钟同步问题第三部分：分布式ID解决⽅案数据表A（ID），A的数据量很⼤的情况下，我们会进⾏分表操作，A（ID）表拆分成了A1表（ID）+A2表(ID)，需要⼀种在分布式集群架构中能够产
碎月无晴灬·2024-01-05 16:40

sklearn之load_iris数据集

fromsklearn.datasetsimportload_irisfromsklearn.preprocessingimportMinMaxScalerfromsklearn.clusterimportKMeansiris
cjz0422·2024-01-05 12:49

LVS 负载均衡详解 + NAT 集群构建

LoadBalanceCluster）(2)高可用集群（HighAvailabilityCluster）(3)高性能运算集群（HighPerformanceComputerCluster）二、负载均衡集群架构
公博义·2024-01-04 14:45

【DBA课程-笔记】第1章：MongoDB数据库入门

MongoDB的典型行业案例4.SQL与MongoDB对应术语5.MongoDB历史版本特性6.MongoDB4.0特点7.MongoDB数据库体系架构8.MongoDB主从复制架构9.MongoDB分片集群架构
ladymorgana·2024-01-02 15:00

MySQL各存储引擎区别与特点

MYSQLAB公司从SonyEricsson公司收购了NDB集群引擎结构类似于Oracle的RAC集群不过与OracleRACshareeverything架构不同的是其结构是sharenothing的集群架构
Lucifer赫神·2024-01-01 23:48

day 28

shell编程基础shell编程一小时光速入门web集群架构会用到shell编程基础1、为什么要学shell编程？Linux系统中会大量的使用shell，工作中我们也需要自动化实现业务。
个中秘密·2024-01-01 20:44

redis安装部署启动

（最多使用）分布式集群架构中的session分离。聊天室的在线好友列
Guff_hys·2023-12-31 18:18

kubeadm快速搭建k8s集群

二进制适合大集群，50台以上主机kubeadm更适合中下企业的业务集群架构master20.0.0.70dockerkubeletkubeadmkubeletflannelnode120.0.0.71dockerkubeletkubeadmkubeletflannelnode20.0.0.72dockerkubeletkubeadmkubeletflannelHarbor20.0.0.73dock
小布爱吃糖.·2023-12-30 23:28

Kubernetes 学习总结（43）—— Kubernetes 从提交 deployment 到 pod 运行的全过程

kubernetes架构简述在搞清楚从deployment提交到pod运行整个过程之前，我们有先来看看Kubernetes的集群架构：上图与下图相同：如图所示，k8s集群分为controlplane控制平面和
科技D人生·2023-12-30 16:00

Sklearn的MinMaxScaler，最简单的归一化

importnumpyasnpfromsklearn.preprocessingimportMinMaxScalera=np.array([1,2,3,4,5],dtype='float64')print
qianshishangdi·2023-12-29 13:10

数据挖掘 K-Means聚类

未格式化之前的代码：importpandasaspd#数据处理frommatplotlibimportpyplotasplt#绘图fromsklearn.preprocessingimportMinMaxScaler
亖嘁·2023-12-29 09:55

k8s---kubernets

目录一、Kurbernetes1.2、K8S的特性：1.3、docker和K8S：1.4、K8S的作用：1.5、K8S的特性：二、K8S集群架构与组件：三、K8S的核心组件：一、master组件：1、kube-apiserver
Lad1129·2023-12-29 07:56

【K8S 二进制部署】部署单Master Kurbernetes集群

目录一、基本架构和系统初始化1、集群架构：2、操作系统初始化配置：2.1、关闭防火墙和安全机制：2.2、关闭swap2.3、根据规划设置主机名2.4、三台主机全部互相映射2.5、调整内核参数3、时间同步
koeda1（粉丝冲刺一个亿）·2023-12-28 18:49

2020重新出发，NOSQL，MongoDB是什么？

MongoDB是最流行的NoSQL数据库之一，原生支持分布式集群架构，特别适合处理大数据，阿里巴巴、腾讯、头条、Twitter、Google、Facebook等一线互联网公司都在使用MongoDB数据库
夜雨流云·2023-12-28 03:54

RabbitMQ学习--Rabbit集群

集群架构集群中的队列image.png如果队列1的节点故障,队列1持久化了,用户是不允许创建该队列的,报404NOT_FOUND,必须恢复故障节点,没有持久化的可以重新创建.分布交换器交换器说到底只是一个名称和一个队列绑定列表
何何与呵呵呵·2023-12-27 17:13

Es三节点+vip集群搭建部署方案

线上环境Es三节点集群搭建部署方案1.目标Es集群架构图!
大雪冬至·2023-12-27 10:12

【K8S 基本概念】Kurbernetes的架构和核心概念

目录一、Kurbernetes1.1简介1.2、K8S的特性：1.3、docker和K8S：1.4、K8S的作用：1.5、K8S的特性：二、K8S集群架构与组件：三、K8S的核心组件：一、master组件
koeda1（粉丝冲刺一个亿）·2023-12-26 14:31

企业级大数据平台应具备的基本能力

近年来，很多企业建设内部统一的大数据平台，利用集群架构去整合资源与服务，从而发挥企业诸如资源共享、数据共享和服务共享等优势。那么，企业级大数据平台应具备什么样的基本能
皮皮杂谈·2023-12-25 09:45

Spark集群部署与架构

Spark集群架构Spark集群的核心组成部分包括Master节点、Worker节点和Driver程序。Master节点Master节点是Spark集群的控制中心，它负责协调和管理
晓之以理的喵~~·2023-12-25 08:36

DAY31课堂笔记

中小规模集群架构1、什么是集群简单地说，集群就是一堆机器做同一件事，例如www.jd.com卖衣服，可能是几千台服务器，在背后运转支撑这个网站。2、为什么企业要用集群？
Zh_bd92·2023-12-24 23:05

【Kafka集群架构设计原理】

文章目录一、Kafka的Zookeeper元数据梳理一、Kafka的Zookeeper元数据梳理1、zookeeper整体数据Kafka将状态信息保存在Zookeeper中，这些状态信息记录了每个Kafka的Broker服务与另外的Broker服务有什么不同。通过这些差异化的功能，共同体现出集群化的业务能力。这些数据，需要在集群中各个Broker之间达成共识，因此，需要存储在一个所有集群都能共同访
向前再向前·2023-12-24 07:35

Zookeeper的集群架构以及读写原理

本文来说下Zookeeper的集群架构以及读写原理文章目录总体架构SessionQuorum模式搭建3节点ZooKeeper集群本文小结总体架构应用使用ZooKeeper客户端库来使用ZooKeeper
wh柒八九·2023-12-22 09:23

Zookeeper-集群架构

Zookeeper集群架构集群角色Leader：领导者事务请求（写操作）的唯一调度者和处理者，保证集群事务处理的顺序性；集群内部各个服务器的调度者。
有梦想的年轻人6174·2023-12-22 09:50

Kafka集群架构原理(待完善)

kafka在zookeeper数据结构controller选举客户端同时往zookeeper写入,第一个写入成功(临时节点),成为leader,当leader挂掉,临时节点被移除,监听机制监听下线,重新竞争leader,客户端也能监听最新leaderleaderpartition自平衡leader不均匀时,造成某个节点压力过大,达到阈值时,会触发自平衡,均匀分配leader,默认头节点partit
kk_0910·2023-12-22 07:26

【kubernetes篇】k8s集群框架，三个核心概念，pod，controller，service

文章目录1.kubernetes集群架构1.1主控节点（Master）1.2工作节点（node）2.kubernetes核心概念2.1Pod2.2Controller2.3Service3.总结今天我们进行
傻啦猫@_@·2023-12-22 02:11

Redis集群架构所产生的问题及如何处理

本文已被收录至GitHub:https://github.com/JavaLiuTongXue/JavaCoding，想要获取更多的干货文章，可以关注公众号：不会说话的刘同学如果Redis是单节点部署的话，那如果Redis在那种高并发的环境下突然挂掉了，那基本上就玩完了，就算Redis对数据做了持久化，Redis重启之后要去恢复数据的话估计也要花费很久的时间，这样也极大的影响了项目的运行因此在那种
不会说话的刘同学·2023-12-21 21:34

redis集群架构--主从复制原理

一、主从配置主Redis配置：无需特殊配置从Redis配置：修改从服务器上的redis.conf文件:#slaveof#表示当前【从服务器】对应的【主服务器】的IP是192.168.10.135，端口是6379。replicaof127.0.0.16379二、作用与缺点1.读写分离一主多从，主从同步，主负责写，从负责读，提升Redis的性能和吞吐量；缺点：主从的数据一致性问题；2.数据容灾从机是主
jiuLives·2023-12-21 12:59

MongoDB中的分布式集群架构

MongoDB中的分布式集群架构前言前面我们了解了MongoDB中的索引，事务，锁等知识点。
液态不合群·2023-12-21 06:49

LVS负载均衡群集

目录群集的含义根据群集所针对的目标差异，可分为三种类型负载均衡群集高可用群集高性能运算群集负载均衡集群架构负载均衡的结构LVS负载均衡群集工作模式分析LVS负载均衡群集的负载调度技术有三种工作模式NAT
Fabletown gegewu·2023-12-20 12:50

基于“Galera+MariaDB”搭建多主数据库集群的实例

1、什么是多主数据库集群多主数据库集群是一种数据库集群架构，每个节点都可以接收写入操作和读取操作，并且通过心跳机制同步数据，保证数据一致性和高可用性。
木下-俱欢颜·2023-12-20 09:06

Mysql集群架构（主从模式、双主模式、分库分表）

本文主要对mysql集群架构的基本概念和作用进行描述，后续会有更详细的原理介绍。一、MySql集群架构设计在集群架构设计时，主要遵从下面三个维度:可用性、扩展性和一致性。
jiuLives·2023-12-19 18:45

MySql集群架构--双主模式原理

双主模式是指两台服务器互为主从，任何一台服务器数据变更，都会通过复制应用到另外一方的数据库中。高可用架构如下图所示，其中一个Master提供线上服务，另一个Master作为备胎供高可用切换，Master下游挂载Slave承担读请求。一、双主双写存在问题1.id冲突在A主库写入，当A数据未同步到B主库时，对B主库写入，如果采用自动递增容易发生ID主键的冲突。可以采用MySQL自身的自动增长步长来解决
jiuLives·2023-12-19 18:45

mysql集群架构--分库分表

一、拆分方式1.垂直拆分1.垂直分库应用时有垂直分库和垂直分表两种方式，一般谈到的垂直拆分主要指的是垂直分库。2.垂直分表垂直分表就是将一张表中不常用的字段拆分到另一张表中，从而保证第一张表中的字段较少，避免出现数据库跨页存储的问题，从而提升查询效率。解决:一个表中字段过多，还有有些字段经常使用，有些字段不经常使用，或者还有text等字段信息。可以考虑使用垂直分表方案。按列进行垂直拆分，即把一条记
jiuLives·2023-12-19 18:45

redis集群架构--哨兵模式原理

哨兵(sentinel)是Redis的高可用性(HighAvailability)的解决方案:由一个或多个sentinel实例组成sentinel集群可以监视一个或多个主服务器和多个从服务器。当主服务器进入下线状态时，sentinel可以将该主服务器下的某一从服务器升级为主服务器继续提供服务，从而保证redis的高可用性。一、部署方案二、搭建配置在一台机器上采用伪分布式的方式部署。(生产环境应该是
jiuLives·2023-12-19 18:14

云原生之深入解析Thanos在EKS多集群架构上存储多个集群Prometheus

一、前言随着HiredScore的产品和客户群越来越大，已经开始向Kubernetes过渡并迅速采用它，它是我们重要的障碍之一，也可能是最大的监控基础设施。我们在使用Prometheus/Grafana堆栈进行监控方面有一些经验，了解到希望创建一个更好、高可用性和弹性的基础架构，具有可行且具有成本效益的数据保留，此外，它还允许HiredScore的高速增长做好准备。CNCF推广了多种基础设施，可以
╰つ栺尖篴夢ゞ·2023-12-19 10:52

MySQL读写分离

提高系统性能提高数据可用性提高系统的容错能力降低系统成本如何配置mysql读写分离部署mysql一主一从架构主从架构的搭建创建代理服务器的授权用户部署MySQL代理服务器部署maxscale服务启动服务测试配置查看监控信息客户测试配置主服务器添加数据验证读写分离在从服务器插入数据为什么要进行读写分离
update_now1·2023-12-18 17:35

报错：AttributeError: ‘DataFrame‘ object has no attribute ‘reshape‘

试图标准化的代码：scaler=MinMaxScaler(featu
Top Secret·2023-12-18 16:08
上一页 1 2 3 4 5 6 7 8 下一页
按字母分类： ABCDEFGHIJKLMNOPQRSTUVWXYZ其他