E-COM-NET
首页
在线工具
Layui镜像站
SUI文档
联系我们
推荐频道
Java
PHP
C++
C
C#
Python
Ruby
go语言
Scala
Servlet
Vue
MySQL
NoSQL
Redis
CSS
Oracle
SQL Server
DB2
HBase
Http
HTML5
Spring
Ajax
Jquery
JavaScript
Json
XML
NodeJs
mybatis
Hibernate
算法
设计模式
shell
数据结构
大数据
JS
消息中间件
正则表达式
Tomcat
SQL
Nginx
Shiro
Maven
Linux
Kubernets集群
CentOS7部署ceph
CEPH简介不管你是想为云平台提供Ceph对象存储和/或Ceph块设备,还是想部署一个Ceph文件系统或者把Ceph作为他用,所有Ceph存储
集群
的部署都始于部署一个个Ceph节点、网络和Ceph存储
集群
假面生
·
2025-02-03 04:07
存储
linux
Centos 7下 ceph的安装
文章目录ceph安装环境准备工作1、安装ceph-deploy2、配置时间同步3、配置节点间ssh无密码登录4、防火墙配置5、安装包管理器部署ceph
集群
1、创建ceph操作目录(node-1)2、创建
集群
村口树下
·
2025-02-03 04:06
《技术人生》系列
ceph
【TiDB系列文章】PD(Placement Driver)
PD概述PD是TiDB分布式数据库中的元信息管理组件,负责存储
集群
的元信息和调度数据。它相当于分布式数据库的“大脑”,负责整个
集群
的数据分布和负载均衡。
学弟Craze
·
2025-02-03 03:27
TiDB
tidb
数据库
Kafka 单机和
集群
环境部署教程
目录一、Kafka单机环境部署1.环境准备2.安装Java3.安装ZooKeeper3.1下载并解压ZooKeeper3.2配置ZooKeeper3.3启动ZooKeeper3.4验证ZooKeeper是否正常运行4.安装Kafka4.1下载并解压Kafka4.2配置Kafka4.3创建日志目录4.4启动KafkaBroker4.5验证Kafka是否正常运行5.Kafka单机部署的注意事项二、Ka
闲人编程
·
2025-02-03 03:54
大数据集群部署教程
kafka
分布式
集群
部署
单机
zookeeper
docker-compose部署MongoDB&MySQL&RabbitMQ
集群
在三个节点:172.29.154.8、172.29.154.9、172.29.154.10部署MongoDB1主2从副本集、RabbitMQ主-主、MySQL主-从复制。这些节点是在同一个内网环境下的,节点间互通,各节点部署的服务器关系如下表,其中,MySQL的主节点是172.29.154.9,与其他的服务反过来了,目的是减轻单节点的压力。本文采用docker-compose同时启动多台服务,如果
靖子甘
·
2025-02-02 23:24
docker
docker
mysql
rabbitmq
mongodb
云服务
Mysql的“三高”
集群
架构
今天老顾来讲讲Mysql的三高
集群
架构,所谓三高,就是**“高可用”、“高负载”、“高性能”的架构**方案。
2401_87252417
·
2025-02-02 19:59
mysql
架构
数据库
Redis 热 key 的终极解决方案?京东、得物、b 站都是如何解决的?
从数据层角度看,Redis
集群
某个分片的数据缺失,导致缓存雪崩。从应用层角度看,用户请求将大量超时和不可访问出现Redis热key的场景有很多,比如:爆款商品、刷子用户、秒杀商品等。不过我们很多
·
2025-02-02 18:11
后端redisjava
【技海登峰】Kafka漫谈系列(一)Kafka服务
集群
的核心组件
【技海登峰】Kafka漫谈系列(一)Kafka服务端的核心组件一.Broker完整的Kafka服务是
集群
Cluster结构,其由多个Kafka服务节点组成,每个物理节点即称为Broker,在实际部署中,
阿阿阿安
·
2025-02-02 13:49
【独家专栏】知识星球同步
专享优质好文
kafka
分布式
java
Redis | 跳跃表
Redis只在两个地方用到了跳跃表,一个是实现有序集合键,另一个是在
集群
节点中用作内部数据结构,除此之外,跳跃表在Redis里面没有其他用途。
瘦弱的皮卡丘
·
2025-02-02 11:01
Redis
redis
跳跃表
什么是跳跃表
redis跳跃表
群晖web文件服务器docker,群晖docker搭建数据库服务器
外部服务器是存储OBS服务器信息或其他同构
集群
信息的载体。
Kuchiki Touko
·
2025-02-02 08:03
Keepalived高可用
集群
企业应用实例二
virtualserver(虚拟服务器)的定义格式virtual_serveripport定义虚拟主机ip地址及其端口virtual_serverfwmarkintipvs的防火墙打标,实现基于防火墙的负载均衡
集群
DawnEillen
·
2025-02-02 06:22
服务器
linux
网络
【kubernetes系列】Kubernetes之master和node
在学习k8s之前,必须先了解Kubernetes中的重要概念,它们是组成Kubernetes
集群
的基石。
margu_168
·
2025-02-02 05:46
Kubernetes
kubernetes
容器
docker
k8s service管理之WEB管理工具Dashboard
-Dashboard同时展示了Kubernetes
集群
中的资源状态信息和所有报错信息。-可以使用Dashboard将应用部署到
集群
中,也可以对容器应用排错,还能管理
集群
资源。
烤鸡翅^_^我最爱吃
·
2025-02-02 05:16
kubernetes
容器
云原生
集群
部署时的分布式 Session 如何实现?
面试题
集群
部署时的分布式Session如何实现?
码农小旋风
·
2025-02-02 02:29
后端
flume系列之:消费Kafka
集群
Topic报错java.io.IOException: Can‘t resolve address: data03:9092
flume系列之:消费Kafka
集群
Topic报错java.io.IOException:Can'tresolveaddress:data03:9092Causedby:java.nio.channels.UnresolvedAddressException
快乐骑行^_^
·
2025-02-02 01:25
flume
flume系列
消费Kafka集群Topic
OException
resolve
address
Kubernetes监控,查看日志
Kubernetes监控与日志1、查看
集群
资源状态在Kubernetes
集群
中,查看
集群
资源状态和组件状态是非常重要的操作。以下是一些常用的命令和解释,帮助你更好地管理和监控Kubernetes
集群
。
稚辉君.MCA_P8_Java
·
2025-02-02 01:51
Kubernetes
Cluster
kubernetes
云原生
运维
容器
ElasticSearch view
节点(Node):elasticsearch
集群
中一个服务器实例,负责存储数据、处理请求等,
稚辉君.MCA_P8_Java
·
2025-02-02 01:51
CentOS7.6
Kubernetes
Cluster
高可用Kubernetes集群
elasticsearch
linux
全文检索
搜索引擎
大数据
GBase 8a Mpp Cluster
集群
产品性能优化篇之减少嵌套-查询改写
将group部分移到内部,嵌套查询改成了一个查询原SQL:SELECTAAE003对应费款所属期,AAE002费款所属期,AAA041个人缴费比例,AAA043单位缴费划入个人账户比例,AAA115明细类型,AAE011经办人,AAE036经办时间,BAE181数据来源,AAB191到账日期,NVL(SUM(NVL(AAE180,0)),0)缴费基数,NVL(SUM(个人缴费金额),0)个人缴费金
zhu1981hui
·
2025-02-01 23:12
GBase
性能优化
dba
sql
数据仓库
大数据
spark和python的区别_Spark入门(Python)
Spark使用内存缓存来提升性能,因此进行交互式分析也足够快速(就如同使用Python解释器,与
集群
进行交互一样)。缓存同时提升了迭代算法的性能,这使得Spark非常适合数据理
weixin_39934257
·
2025-02-01 23:42
spark和python的区别
Spark 学习-1 (python)
每个Spark应用由一个驱动器程序(driverprogram)发起
集群
上的并行操作,驱动器程序一般要管理多个执行器(executor)节点。
一二三四0123
·
2025-02-01 23:40
spark
学习
python
openeuler 22.03 lts sp4 使用 kubeadm 部署 k8s-v1.28.2 高可用
集群
文章目录@[toc]废话篇这篇文章什么时候写的为什么是openeuler为什么是22.03ltssp4高可用架构题外话干活篇环境介绍系统初始化相关关闭防火墙关闭selinux关闭swap开启内核模块开启模块自动加载服务sysctl内核参数调整清空iptables规则安装各种依赖和工具修改.bashrc文件安装kubeadm和kubelet简化kubectl命令启动kubelet安装containe
月巴左耳东
·
2025-02-01 21:24
openeuler
Kubernetes
kubernetes
centos7搭建flink1.18并以 standalone模式启动
版本组件版本scala2.12.20java1.8.0_181flink1.18.1关于scala和Java的安装参考:scala和java安装flink下载地址:flink下载链接
集群
规划bigdata01bigdata02bigdata03masterworkerworkerworker
咸鱼c君
·
2025-02-01 20:50
flink
大数据
大数据
集群
部署时的分布式 session 如何实现?
面试题
集群
部署时的分布式session如何实现?
打不死的喜羊羊
·
2025-02-01 20:20
JAVA
分布式会话
Flink整合Hudi及使用
jar包即可完成整合#1、将hudi-flink1.15-bundle-0.15.0.jar包上传到flink的lib目录下/usr/local/soft/flink-1.15.3/lib--如果没有启动
集群
我的K8409
·
2025-02-01 17:23
Flink
flink
服务器
linux
dubbo 负载均衡策略和
集群
容错策略都有哪些?动态代理策略呢?
面试题dubbo负载均衡策略和
集群
容错策略都有哪些?动态代理策略呢?
码农小旋风
·
2025-02-01 17:20
后端
Neo4j 单机和
集群
部署教程
目录Neo4j单机和
集群
部署教程第一部分:Neo4j概述1.1Neo4j的特点1.2Neo4j的应用场景第二部分:Neo4j单机部署教程2.1安装Neo4j2.1.1下载和安装Neo4j2.1.2启动Neo4j2.1.3
闲人编程
·
2025-02-01 17:19
大数据集群部署教程
neo4j
大数据
集群
单机
部署
图形数据库
ACID
Kubernetes 中 LimitRange 与 ResourceQuota 的深度剖析
摘要:Kubernetes(简称k8s)作为容器编排领域的事实标准,提供了丰富的资源管理机制来确保
集群
的高效、稳定运行。
大大宝的博客
·
2025-02-01 15:59
k8s
kubernetes
贪心算法
容器
SDK级的kubectl,client-go的深度封装:kom使用指南
目录什么是kom特点示例程序安装使用示例1.多
集群
管理注册多
集群
显示已注册
集群
选择默认
集群
选择指定
集群
2.内置资源对象的增删改查以及Watch示例创建某个资源Get查询某个资源List查询资源列表通过Label
大大宝的博客
·
2025-02-01 15:59
k8s
golang
开发语言
后端
云原生
kubernetes
智能化Kubernetes管理:AI与ChatGPT提升运维效率的创新实践
然而,Kubernetes
集群
的管理在复杂度、规模和资源优化等方面仍然面临巨大挑战。传统的Kubernetes运维方式往往依赖手动操作,导致效率低下,且容易产生人为错误。
大大宝的博客
·
2025-02-01 15:59
k8s
kubernetes
人工智能
chatgpt
Hadoop--HA架构详解
一、HA架构工作背景HDFS
集群
中的nameNode存在单点故障因素。
娘子,出来看上帝
·
2025-02-01 10:20
Hadoop
Hadoop
大数据
HA
Hadoop HA 架构
为什么要用
集群
?
weixin_30569033
·
2025-02-01 09:49
shell
大数据
redis从安装到三主三从
集群
文章目录一、为什么要使用Redis1、读写的二八原则2、信息的统一管理二、常见缓存方案的对比三、安装redis1、下载redis安装包、上传linux服务器2、安装依赖3、解压安装包4、进入文件夹、编译并安装5、修改redis的核心配置文件6、修改redis的启动脚本7、配置开机启动8、运行reids四、redis各数据类型的基本命令1、通用的命令2、String的命令3、hash的命令4、lis
敲代码的旺财
·
2025-02-01 08:10
架构进阶
分布式
redis
集群
redis主从
redis哨兵
基于深度学习的大规模模型训练
以下是关于基于深度学习的大规模模型训练的详细介绍:1.背景和动机数据和模型规模增长:随着数据量和模型复杂度的增加,传统的单机或小规模
集群
训练难以满足需求。
SEU-WYL
·
2025-02-01 07:56
深度学习dnn
深度学习
人工智能
dnn
PyDeequ库在AWS EMR启动
集群
中数据质量检查功能的配置方法和实现代码
PyDeequ是一个基于ApacheSpark的PythonAPI,专门用于定义和执行“数据单元测试”,从而在大规模数据集中测量数据质量。PyDeequ框架在PySpark代码中提供了全面的数据质量检查功能,能够帮助用户&有效地监控和提升大规模数据集的数据质量。它在PySpark代码中的数据质量检查功能主要包括以下几个方面:核心组件指标计算(MetricsComputation):利用分析器(An
weixin_30777913
·
2025-02-01 04:59
python
spark
大数据
云计算
aws
StarRocks常用命令
目录1、StarRocks
集群
管理&配置命令2、StarRocks常用操作命令3、StarRocks数据导入和导出1、StarRocks
集群
管理&配置命令查询FE节点信息SHOWfrontends;SHOWPROC
sunny05296
·
2025-02-01 03:59
数据库
数据库
本地Apache Hive的Linux服务器
集群
复制数据到SQL Server数据库的分步流程
我们已经有安装ApacheHive的Linux服务器
集群
,它可以连接到一个SQLServerRDS数据库,需要在该Linux服务器上安装配置sqoop,然后将Hive中所有的表数据复制到SQLServerRDS
weixin_30777913
·
2025-02-01 03:54
数据库
数据仓库
hive
sqlserver
Kafka 如何实现高性能
1.高吞吐量的设计分布式架构:Kafka通过分布式的
集群
架构设计来横向扩展,提高吞吐量。多个生产者、消费者和节点可以同时并行工作,分担流量负载。
言之。
·
2025-02-01 02:49
架构
面试
kafka
分布式
互联网大厂的微服务架构系统应对超大流量解决方案
RateLimiter、Nginx的limit_req模块)限制远程接口的调用速率、限制消息系统的消费速率1.1接入层限流抗疫项目中,一般ISV会把Nginx作为业务的接入层,通过Nginx将请求分发到后端的应用
集群
上
欧子说Java
·
2025-02-01 00:03
架构
微服务
java
Linux上快速压缩与解压缩(zip, tag.gz)
在
集群
上,我们通常会与很大的model或者data压缩文件打交道。此文整理了在linux
集群
上实现快速解压缩的技法。
Dinsanity
·
2025-02-01 00:31
linux
笔记本
linux
运维
服务器
Zookeeper的性能优化与调优
然而,随着
集群
规模的扩大和业务量的增长,Zookeeper的性能瓶颈也逐渐显现出来。为了确保Zookeeper能够稳定高效
AI天才研究院
·
2025-02-01 00:30
AI大模型企业级应用开发实战
大数据AI人工智能
计算
计算科学
神经计算
深度学习
神经网络
大数据
人工智能
大型语言模型
AI
AGI
LLM
Java
Python
架构设计
Agent
RPA
【zookeeper】zookeeper 性能优化与配置详解 一些踩坑建议
通过前面对ZooKeeper的配置可以看出,对ZooKeeper
集群
进行配置的时候,它的配置文档是完全相同的(对于
集群
伪分布模式来说,只有很
九师兄
·
2025-01-31 23:58
不体系
zookeeper
性能优化
服务器
中间件 | RocketMq - [broker 配置]
INDEXbroker.confbroker.conf干货见注释###
集群
名brokerClusterName=DefaultCluster###nameserver#nameserver地址namesrvAddr
问仙长何方蓬莱
·
2025-01-31 23:56
中间件
rocketmq
架构 | 基于 crontab 进程监控增强
集群
可用性
INDEX§0前言§1思路§2实现§0前言
集群
的高可用性可以直接简明的使用SLA来衡量,无所谓其他指标。
问仙长何方蓬莱
·
2025-01-31 23:25
架构
RocketMQ的
集群
架构是怎样的
RocketMQ的
集群
架构包括四个主要角色:NameServer
集群
、Broker主从
集群
、Producer和Consumer客户端。
还能在学一小时
·
2025-01-31 22:46
十七
Rocketmq
java-rocketmq
rocketmq
架构
ambari-server页面错位问题解决
背景:项目新安装的ambari
集群
页面错位如下解决办法(临时):修改ambari-server的前端文件:/usr/lib/ambari-server/web/javascripts/app.js原代码
王木头
·
2025-01-31 20:59
ambari
hadoop
大数据
OpenShift 4 -
集群
节点日志和API审计日志策略
《OpenShift/RHEL/DevSecOps汇总目录》说明:本文已经在OpenShift4.8环境中验证文章目录
集群
节点日志
集群
节点日志类型收集
集群
节点日志OpenShiftAPI的审计日志OpenShiftAPI
dawnsky.liu
·
2025-01-31 18:39
Ops
OpenShift
4
安全
kubernetes
openshift
日志
kubenetes配置vip的一些问题处理
按照kubeadm部署k8s高可用
集群
,执行kubeadminit--configkubeadm-config.yaml--v=5,初始化失败,添加--v=5是为了看更详细的日志信息kubernetes
warrah
·
2025-01-31 18:38
岁月云——运维
kubernetes
kubeadmin
vip
【Elasticsearch 】悬挂索引(Dangling Indices)
Elasticsearch悬挂索引(DanglingIndices)解析与管理1.悬挂索引的定义悬挂索引(DanglingIndices)是指存在于节点上但未被
集群
元数据识别的索引分片。
risc123456
·
2025-01-31 17:31
Elasticsearch
elasticsearch
大数据
搜索引擎
Keepalived高可用
集群
企业应用实例一
一、实现master/slave的keepalived单主架构1.master配置global_defs{notification_email{2676401238@qq.com}notification_email_fromkeepalived@KA1.xiao.orgsmtp_server127.0.0.1smtp_connect_timeout30router_idka1.xiao.orgv
DawnEillen
·
2025-01-31 17:29
服务器
运维
在AWS上使用KMS客户端密钥加密S3文件,同时支持PySpark读写和Snowflake导入
现有AWSEMR
集群
上运行PySpark代码,可以读写S3上的数据文件,Snowflake数据仓库也需要导入S3上的文件到表。
weixin_30777913
·
2025-01-31 16:27
python
spark
大数据
云计算
数据仓库
上一页
1
2
3
4
5
6
7
8
下一页
按字母分类:
A
B
C
D
E
F
G
H
I
J
K
L
M
N
O
P
Q
R
S
T
U
V
W
X
Y
Z
其他