E-COM-NET
首页
在线工具
Layui镜像站
SUI文档
联系我们
推荐频道
Java
PHP
C++
C
C#
Python
Ruby
go语言
Scala
Servlet
Vue
MySQL
NoSQL
Redis
CSS
Oracle
SQL Server
DB2
HBase
Http
HTML5
Spring
Ajax
Jquery
JavaScript
Json
XML
NodeJs
mybatis
Hibernate
算法
设计模式
shell
数据结构
大数据
JS
消息中间件
正则表达式
Tomcat
SQL
Nginx
Shiro
Maven
Linux
Postgresql主从集群
PingCAP TiDB数据库专员PCTA认证笔记
三层架构:PD(PlacementDriver)负责
集群
元信息管理和调度,TiDB负责sql计算,TiKV负责存储存储引擎1、基于LSM-Tree的RocksDB引擎,比B-Tree写入更快,用空间置换写入延迟
handsomestWei
·
2025-01-26 18:51
数据库
tidb
数据库
xgboost在spark
集群
使用指南
简介XGBoost是一个优化的分布式梯度增强库,具有高效、灵活和可移植性。在梯度增强框架下实现了机器学习算法。XGBoost提供了一种并行树增强(也称为GBDT、GBM),可以快速、准确地解决许多数据科学问题。相同的代码在主要的分布式环境(Hadoop、SGE、MPI)上运行,可以解决数十亿个示例的训练问题。xgb相对于gbt所做的改进:1.2.3.XGBoost可以使用R、python、java
一颗小草333
·
2025-01-26 17:49
算法
mapreduce
spark
数据挖掘
PostgreSQL
介绍
PostgreSQL
是一个免费的对象-关系数据库服务器(ORDBMS),在灵活的BSD许可证下发行。
PostgreSQL
开发者把它念作post-gress-Q-L。
candy662
·
2025-01-26 17:44
postgresql
第21篇:python编程进阶:python数据库基础详解
本篇文章将介绍关系型数据库与非关系型数据库的基本概念和区别,深入探讨SQL的基础知识,并展示如何使用Python连接和操作常见的数据库系统,如MySQL和
PostgreSQL
。
猿享天开
·
2025-01-26 12:11
python从入门到精通
python
数据库
开发语言
PostgreSQL
TRUNCATE TABLE 操作详解
PostgreSQL
TRUNCATETABLE操作详解引言在数据库管理中,经常需要对表进行操作以保持数据的有效性和一致性。
lsx202406
·
2025-01-26 12:10
开发语言
使用GitLab CI/CD部署应用到Kubernetes
集群
的方案
最近业余时间调研了一下在GitLabCI/CD中部署应用到Kubernetes的方案。这是一个老生常谈的话题,很多粉丝和读者问我如何部署应用到K8s中。其实思路是很清晰的,只是其中又很多点大家可能无法串起来。那么本篇文章就带领大家实践一下如何做CD的方案。本方案的好处就是,读者不需要了解太多关K8s相关知识也可以实现该方案。Kubernets的命令行工具是kubectl。就像我们使用docker命
拿我格子衫来
·
2025-01-26 12:39
GitLab
CI/CD
教程
ci/cd
kubernetes
devops
轻松搞定应用产品上架,全面提升部署质量与一致性!
汉得鲲苍基础架构管理平台的核心目标是为企业的异构系统提供简单高效的一站式统一闭环管理能力,包括统一资源(
集群
、主机、存储等)管理、统一应用及部署管理、统一监控管理、统一服务治理,帮助企业实现更快、更好、
·
2025-01-26 12:58
前端paas
MongoDB的读写分离技术方案
MongoDB的读写分离是一种优化性能和可扩展性的方法,通常通过
主从
复制(ReplicaSet)实现。
yuanpan
·
2025-01-26 11:03
mongodb
数据库
k8s-实战——ES
集群
部署
文章目录yaml文件es-pvc.yamles-svc.yamles-cluster-sts.yaml创建elasticsearch
集群
yaml文件es-pvc.yaml通过nfs服务进行新增pv并通过
北城 半夏
·
2025-01-26 06:21
k8s-实战
kubernetes
elasticsearch
java
快速入门使用Redis缓存
高并发MySQL的连接数存在瓶颈,连接过大可能导致MySQL宕机解决方法:部署多个MySQL服务,
主从
复制部署缓存,承担一部分的并发高性能基于内存,内存IO效率远远高于磁盘Redis的特点:性能高(读的速度是
阳光宅男dh
·
2025-01-26 05:43
进阶学习
redis
缓存
数据库
用 Docker 搭建 Spark
集群
简介Spark是Berkeley开发的分布式计算的框架,相对于Hadoop来说,Spark可以缓存中间结果到内存而提高某些需要迭代的计算场景的效率,目前收到广泛关注。熟悉Hadoop的同学也不必担心,Spark很多设计理念和用法都跟Hadoop保持一致和相似,并且在使用上完全兼容HDFS。但是Spark的安装并不容易,依赖包括Java、Scala、HDFS等。通过使用Docker,可以快速的在本地
yeasy
·
2025-01-26 00:22
Bigdata
Docker
spark
Docker
云计算
集群
分布式计算
rockylinux9.4单master节点k8s1.28
集群
部署
kubernetes
集群
部署常见的k8s部署方式包括:二进制包、kubeadm工具、云服务提供商、或通过一些开源的工具搭建,例如:sealos、kuboard、Runcher、kubeSphere。
大白菜和MySQL
·
2025-01-25 23:48
k8s
集群
kubernetes
容器
云原生
华为云云原生王者之路集训营(黄金-第五章)
在Kubernetes中,Pod代表的是
集群
上处于运行状态的一组容器。四种负载:无状态工作负载:管理的Pod集合是相互等价的,需要的时候可
※网络笨猪※
·
2025-01-25 23:16
云厂商-公有云
华为云
云原生
Redis
集群
的高可用架构及维护
Redis
集群
作为一款开源内存键值存储数据库,在高性能、易用性等方面都给予了开发者更高的满意度。
AI天才研究院
·
2025-01-25 22:40
Python实战
自然语言处理
人工智能
语言模型
编程实践
开发语言
架构设计
PostgreSQL
体系结构
https://www.enmotech.com/web/detail/1/764/1.html导读:本文主要从日志文件、参数文件、控制文件、数据文件、redo日志(WAL)、后台进程这六个方面来讨论
PostgreSQL
eygle
·
2025-01-25 17:02
mha mysql 两台机器_MySQL
主从
复制(8)MHA实现
主从
高可用
一、MHA介绍1、MHA的作用MHA是实现MySQL高可用的一种成熟解决方案,可以在
主从
故障时自动完成
主从
切换,切换速度在30-60秒,并且可以最大程度的去保持数据一致性。
日签君AIUX
·
2025-01-25 16:24
mha
mysql
两台机器
基于MySQL8.0安装部署MHA
集群
(一主两从)
写在前面之前搭建过MySQL5.7版本的MHA
集群
,因为一些需要,现进行MySQL8.0版本的MHA
集群
搭建,搭建步骤基本与5.7版本相似,所以某些测试部分、问题解决、安装包、mha的IP漂移配置文件可以参照我之前写的博文
收买神的欢心
·
2025-01-25 16:53
mysql
数据库
大数据
MHA架构部署
一、**简介MHA(MasterHA)是一款开源的MySQL的高可用程序,它为MySQL
主从
复制架构提供了automatingmasterfailover功能。
凰玥
·
2025-01-25 15:52
MySQL
mysql
mysql8 MHA
集群
部署
服务器环境系统主机名IPcentos7.9mha-master192.168.200.41、192.168.200.45(vip)centos7.9mha-slave01192.168.200.42centos7.9mha-slave02192.168.200.43centos7.9mha-monitor192.168.200.40SSH互信mha-master、mha-slave01、mha-s
L白眸
·
2025-01-25 15:52
数据库
mysql
数据库
redis原理
文章目录redis客户端-认识RESP持久化持久化具体实现1.RDB(RedisDataBase)2.AOF(AppendOnlyFile)事务相关命令
主从
复制拓扑结构同步过程部分复制实时复制哨兵(Sentinel
小哲会嘿魔法
·
2025-01-25 15:47
redis
数据库
缓存
浅谈 redis
可以
集群
部署,数据在各个机器上都有备份,挂了一台机器,可以从其他机器上找到数据。
集群
带来
主从
节点机制,一般至少需要3个节点来选举出主节点,也可以指定主节点。
主从
同步问题,会导致数据不一致。
BigDeng_2014
·
2025-01-25 13:06
工作
redis
数据库
java
kafka内部工作机制
集群
中成员关系kafka使用zookeeper来维护成员信息。
一只叫狗的猫
·
2025-01-25 13:03
#
kafka
python做并行计算_python做并行计算可以吗
python可以做并行计算,下面是相关介绍:一、概览ParallelPython是一个python模块,提供在SMP(具有多个处理器或多核的系统)和
集群
(通过网络连接的计算机)上并行执行python代码的机制
角动量不守恒
·
2025-01-25 13:31
python做并行计算
python并行计算
系统可以直观地与本地或网络的计算节点
集群
进行交互,而不管
集群
的实现方式如何。这种易于交互使用帮助IPython和Python
weixin_30894389
·
2025-01-25 12:00
Zookeeper(26)Zookeeper的ZAB协议是什么?
它的设计目标是确保在任何时候,
集群
中的所有节点都能看到相同的事务更新顺序,从而保证数据的一致性。
辞暮尔尔-烟火年年
·
2025-01-25 12:58
微服务
zookeeper
分布式
云原生
【Kafka:概念、架构与应用】
2.2消费者(Consumer)2.3主题(Topic)2.4分区(Partition)2.5消息偏移量(Offset)2.6消费组(ConsumerGroup)Kafka的架构设计3.1Broker与
集群
三日看尽长安花
·
2025-01-25 12:28
系统架构师
kafka
架构
分布式
Kafka:架构与核心机制
1.Kafka的架构1.1组件概述Kafka的架构由多个组件构成,主要包括以下部分:Broker:Kafka
集群
中的服务器,每个Broker存储一部分消息。
J老熊
·
2025-01-25 11:49
kafka
架构
分布式
面试
系统架构
后端
【
postgresql
初级使用】在表的多个频繁使用列上创建一个索引,多条件查询优化,多场景案例揭示索引失效
多列索引专栏内容:
postgresql
使用入门基础手写数据库toadb并发编程个人主页:我的主页管理社区:开源数据库座右铭:天行健,君子以自强不息;地势坤,君子以厚德载物.文章目录多列索引概述多列索引创建创建语法创建说明案例分析创建数据创建索引带首列查询不带首列查询总结结尾概述
韩楚风
·
2025-01-25 11:18
postgresql
数据库
sql
database
DigitalOcean Kubernetes现已支持VPC natvie
集群
DigitalOceanKubernetes(DOKS)的VPCnatvie
集群
功能现已正式上线!
DO_Community
·
2025-01-25 09:37
kubernetes
利用Kubespray安装生产环境的k8s
集群
-排错篇
利用Kubespray安装生产环境的k8s
集群
-排错Ansible排错Ansible安装后需要加入到PATH,以便能够直接运行。
超级阿飞
·
2025-01-25 08:30
k8s
cluster
kubernetes
docker
容器
Oracle、
PostgreSQL
该学哪一个?
从事数据库运维一线工作的老鸟,经常会有人来问我:“Oracle和
PostgreSQL
,我该学哪个?哪个更有职业发展前景?”今天就来和大家好好唠唠。先说说Oracle。
leegong23111
·
2025-01-25 08:54
oracle
postgresql
数据库
不同hive
集群
中基于表的数据一致性比对
前阵子博主遇到一个需求,因对hadoop
集群
进行数据迁移,数据迁移完毕后进行两个hive库的数据一致性的比对,不仅对源表数据进行比对,而且要同时使用两个
集群
加工相同数据,对加工后的数据进行数据一致性比对
AA赵师傅
·
2025-01-25 07:19
hadoop数据管理
hive
数据验证
数据迁移
hadoop
Hadoop、Hive、Hbase
集群
间的数据迁移
一、hadoop
集群
间拷贝数据:迁移之前需要把两个
集群
的所有节点都互通/etc/hosts文件(重要,包括各个数据节点)两个
集群
版本不相同hadoopdistcphftp://192.168.57.73
这个操蛋的人生!!!
·
2025-01-25 07:18
mysql
主从
数据一致性怎么校验_mysql
主从
数据一致性校验及纠错工具
目录1、概述2、percona-tooldit工具的安装3、新建用户4、pt-table-checksum使用5、pt-table-sync使用6、个人总结1、概述假如你是一位运维人员,假如你生产环境上目录1、概述2、percona-tooldit工具的安装3、新建用户4、pt-table-checksum使用5、pt-table-sync使用6、个人总结1、概述假如你是一位运维人员,假如你生产环
Oliverzzzhang
·
2025-01-25 07:47
MySQL
主从
同步一致性详解
MySQL
主从
同步是一种数据复制技术,它允许数据从一个数据库服务器(主服务器)自动同步到一个或多个数据库服务器(从服务器)。
Java之路行者
·
2025-01-25 06:42
JAVA后端
SpringBoot
MySql
mysql
android
数据库
Hive之数据迁移方案(实测)
文章目录Hive的迁移涉及两个技术点:1.仅迁移元数据2.元数据及Hive数据全量迁移2.1全表迁移2.1.1旧
集群
2.1.2新
集群
2.2仅部分分区迁移(主要步骤)2.1.1旧
集群
2.1.2新
集群
2.3beeline
南风知我意丿
·
2025-01-25 06:11
Hive
hive
hadoop
hdfs
如何控制
主从
架构的数据一致性?
胡弦,视频号2023年度优秀创作者,互联网大厂P8技术专家,SpringCloudAlibaba微服务架构实战派(上下册)和RocketMQ消息中间件实战派(上下册)的作者,资深架构师,技术负责人,极客时间训练营讲师,四维口袋KVP最具价值技术专家,技术领域专家团成员,2021电子工业出版社年度优秀作者,获得2023电子工业出版技术成长领路人称号,荣获2024年电子工业出版社博文视点20周年荣誉专
架构随笔录
·
2025-01-25 06:39
分布式存储
大数据
架构
数据库
java
后端
中间件
16 分布式session和无状态的会话
如果以
集群
的方式部署,用户登录的session存储在该次登录的服务器节点上,如果下次访问服务端的请求落到其他节点上就需要重新生成session,这样用户需要频繁的登录。
40岁的系统架构师
·
2025-01-25 06:09
分布式
系统架构
openresty+lua+kafka 日志采集
根据业务把不同的日志发送到不同主题中数据实时性高性能保证方案一自己写个接收程序转发到kafka方案二采用nginx+lua方案采用方案二,原因是nginx高性能,编写代码少,维护少,满足业务场景实施步骤线上请求到nginx后,使用lua组装json格式日志,异步发送到kafka
集群
根据不同业务日志
CHENYANG123
·
2025-01-25 03:50
大数据
lua
kafka
nginx
redis+spring面试题
redis使用场景缓存热点数据分布式锁存储token存储短信验证码计数器全局唯一数排行榜限流购物车关注粉丝缓存失效缓存穿透缓存空结果布龙过滤器缓存击穿全局锁设置永不过期缓存雪崩设置高可用
集群
设置不同的过期时间本地二级缓存
·
2025-01-25 01:51
javaspringredis
MySQL、
PostgreSQL
和 Microsoft SQL Server:谁是王者?
MySQL、
PostgreSQL
和MicrosoftSQLServer是目前市场上最受欢迎的三种关系型数据库管理系统(RDBMS)。
cda2024
·
2025-01-24 21:03
mysql
postgresql
microsoft
Redis-
主从
同步原理
我是半夏之沫一名金融科技领域的JAVA系统研发我希望将自己工作和学习中的经验以最朴实,最严谨的方式分享给大家,共同进步写作不易,期待大家的关注和点赞关注微信公众号【技术探界】前言Redis为了保证服务高可用,其中一种实现就是
主从
模式
·
2025-01-24 20:43
redis主从复制
“选择最佳数据库解决方案:MySQL、SQL Server 和
PostgreSQL
的比较与实际应用指南“
目录典型中高端数据库服务器硬件配置CPU内存存储网络操作系统不同数据库系统在上述硬件上的性能表现MySQL
PostgreSQL
SQLServer具体硬件配置示例示例配置1:中小型Web应用示例配置2:复杂查询和事务处理示例配置
AMIOKATT
·
2025-01-24 20:29
数据库
mysql
postgresql
2024 年最新基于 Spring Cloud 的微服务架构分析
如果Eureka以
集群
模式部署,当
集群
中有分片出现故障时,那
2401_83916326
·
2025-01-24 17:02
程序员
架构
spring
cloud
微服务
如何部署 Flask 应用程序到生产环境?
部署方式适用场景说明Gunicorn+Nginx适合中小型项目轻量级,性能稳定uWSGI+Nginx高性能并发、生产环境推荐生产级别,支持异步工作Docker+Kubernetes容器化部署,微服务架构适合大规模微服务
集群
Channing Lewis
·
2025-01-24 15:15
Python
flask
python
后端
CDH日志清理
备注:CDH版本:6.3.1背景CDH
集群
运行了2个多月了,根目录磁盘使用率接近80%了,需要清理CDH日志。一.查看问题CDH的日志文件一般在如下几个目录,可以通过如下代码进行查看。
只是甲
·
2025-01-24 14:13
#
CDH大数据平台
大数据和数据仓库
Cloudera
日志清理
hadoop
Spark运行模式及Spark on Yarn两种运行模式的区别
Spark运行模式1.Standalone模式描述:Standalone模式是Spark的独立
集群
模式,Spark自己管理资源和调度任务。适合小型
集群
或个人开发环境。特点:简单易用,适合开发和测试。
DataCrafter
·
2025-01-24 13:03
Spark
大数据
计算框架
spark
大数据
Kubernetes入门
Kubernetes的工作原理Kubernetes通过将应用打包到容器中,并在
集群
中运行这些容器来实现应用的部署和管理。容器是轻量级的、可移植的、自包含的软
I~Lucky
·
2025-01-24 13:01
kubernetes
容器
云原生
【大数据入门核心技术-Hive】(十六)hive表加载csv格式数据或者json格式数据
一、环境准备hive安装部署参考:【大数据入门核心技术-Hive】(三)Hive3.1.2非高可用
集群
搭建【大数据入门核心技术-Hive】(四)Hive3.1.2高可用
集群
搭建二、hive加载Json格式数据
forest_long
·
2025-01-24 12:27
大数据技术入门到21天通关
大数据
hive
hadoop
开发语言
后端
数据仓库
Kubernetes网络
Kubernetes网络Kubernetes网络模型相关概念链接Kubernetes网络模型Kubernetes网络模型由多个关键部分构建而成:在Kubernetes
集群
中,每个Pod都会被分配一个独一无二的
qichengzong_right
·
2025-01-24 10:43
linux
kubernetes
云原生
linux
云原生
kubernetes
上一页
15
16
17
18
19
20
21
22
下一页
按字母分类:
A
B
C
D
E
F
G
H
I
J
K
L
M
N
O
P
Q
R
S
T
U
V
W
X
Y
Z
其他