E-COM-NET
首页
在线工具
Layui镜像站
SUI文档
联系我们
推荐频道
Java
PHP
C++
C
C#
Python
Ruby
go语言
Scala
Servlet
Vue
MySQL
NoSQL
Redis
CSS
Oracle
SQL Server
DB2
HBase
Http
HTML5
Spring
Ajax
Jquery
JavaScript
Json
XML
NodeJs
mybatis
Hibernate
算法
设计模式
shell
数据结构
大数据
JS
消息中间件
正则表达式
Tomcat
SQL
Nginx
Shiro
Maven
Linux
Swarm集群
深入解读Flink on Yarn高可用、组件集成与资源调度优化
深入解读FlinkonYarn高可用、组件集成与资源调度优化FlinkonYarn作为企业级实时计算平台的主流部署模式,除了具备弹性资源管理和作业隔离能力,还可通过高可用配置保障
集群
稳定运行,通过与Kafka
北漂老男人
·
2025-05-24 19:42
Flink
flink
大数据
Flink初始及搭建
集群
环境(技术选型与实战详解)
Flink初始及搭建
集群
环境(技术选型与实战详解)一、Flink简介Flink(ApacheFlink)是一个分布式、高性能、始于流计算的通用数据处理引擎。
北漂老男人
·
2025-05-24 18:07
Flink
flink
大数据
Hadoop中HDFS、Hive 和 HBase三者之间的关系
它把数据分成很多小块,分布在
集群
中的许多服务器上,这样即使数据量非常大,也能快速访问和
[听得时光枕水眠]
·
2025-05-24 17:02
hadoop
hdfs
hive
Kafka原理深度剖析
Broker
集群
:LeaderBroker接收消息并写入本地日志(Log),然后将消息复制到Follower副本,根据配置返回ACK。
LiRuiJie
·
2025-05-24 17:01
kafka
分布式
java
k3s 一键脚本
集群
部署,懒人福音,国内友好
这类论文大概可以分成两类,一类是使用仿真脚本模拟
集群
,实现优化算法;另一类是基于真实平台部署。
hanbaoaaa
·
2025-05-24 12:58
分布式
云原生
kafka
集群
sasl认证
kafka加密配置1.增加用户密码配置kafka_server_jaas.conf路径:/data/kafka/config/jaas/kafka_server_jaas.confKafkaServer{org.apache.kafka.common.security.plain.PlainLoginModulerequiredusername="admin"password="admin123"
Mlxg的小号
·
2025-05-24 10:17
中间件
kafka
分布式
【赵渝强老师】OceanBase数据库从零开始:MySQL模式
aid=114482370059...下面详细介绍一下每一章的主要内容:第01章-OceanBase的体系架构本章主要介绍OceanBase分布式数据库
集群
的体系架构,包括:OBServer节点
·
2025-05-24 10:40
Kafka配置SASL_SSL JKS鉴权验证方式
为了保护Kafka
集群
的安全性,可以使用SASL_SSL和JKS(JavaKeyStore)鉴权验证方式。本文将详细介绍如何配置Kafka以使用SASL_SSL和JKS进行身份验证。
YazIdris
·
2025-05-24 10:14
kafka
ssl
分布式
Kafka部署指南:基于SSL的SASL_SCRAM安全认证实现
在生产环境中,确保Kafka
集群
的安全性至关重要。本文将详细介绍如何使用SSL和SASL_SCRAM机制来保护Kafka
集群
的安全,并提供相应的源代码示例。
WdzDevops
·
2025-05-24 10:44
kafka
ssl
安全
分布式协调服务 ZooKeeper 深度解析与实战指南
一、ZooKeeper概述ZooKeeper是Apache开源的分布式协调服务,旨在为分布式系统提供高可靠的配置管理、分布式同步、
集群
管理等功能。
线条1
·
2025-05-24 08:02
分布式
zookeeper
云原生
Flink概述
Flink的核心是一个分布式流数据流引擎,能够在
集群
上运行,支持多种数据源和数据接收器。Flink的主要特点Flink提供了强大的流处理能力,支持事件时间处理、状态管理、窗口操作等。
多多洛码代码
·
2025-05-24 08:29
Flink
flink
大数据
一文看懂ingress nginx实现灰度发布和蓝绿发布过程
本文将介绍在K8S
集群
中如何通过NginxIngr
小杨同学THY
·
2025-05-24 07:25
nginx
kubernetes
运维
FluxCD入门操作文档
**1.6什么是**Kustomization****与kustomize工具的区别**1.7什么是**Bootstrap(引导)**1.8安装FluxCLI1.9配置fluxbash补全1.10检查
集群
是
小杨同学THY
·
2025-05-24 07:55
云原生CI/CD实战
kubernetes
容器
云原生
rabbitmq 单机部署以及
集群
部署(多机单节点,单机多节点)
在win下cmd(Windows向centos7(lunix)发送文件):sftp用户名@ip;cd和pwd是centos7操作打开文件lcd,lpwd是windows操作打开文件通过put文件名地址centos7下文件夹名(put后加上-r发送整个文件夹)Centos7:给用户或用户组分配文件夹权限:1.将/opt目录的所有者更改为username:sudochownusername/opt2.
a_12321321
·
2025-05-24 07:51
rabbitmq
java-rabbitmq
Python爬虫(35)Python爬虫高阶:基于Docker
集群
的动态页面自动化采集系统实战
目录一、技术演进与行业痛点二、核心技术栈深度解析2.1动态渲染三件套2.2Docker
集群
架构设计2.3自动化调度系统三、进阶实战案例3.1电商价格监控系统1.技术指标对比2.实现细节3.2新闻聚合平台
一个天蝎座 白勺 程序猿
·
2025-05-24 06:45
Python爬虫入门到高阶实战
python
爬虫
docker
Linux(CentOS 7)安装和配置RocketMq
集群
RocketMq
集群
1.安装RocketMq1.解压RocketMqunziprocketmq45.zip/usr/local/rocketmq根据实际情况修改内存配置(默认值太大)vimbin/runserver.shJAVA_OPT
一颗红心丶
·
2025-05-24 04:58
linux
centos
rocketmq
分布式系统与
集群
:区别与联系
文章目录一、分布式和
集群
1.1分布式和
集群
的区别1.2分布式和
集群
的联系1.3总结二、细节补充2.1为什么内容分发网络CDN被归类为分布式系统而不是
集群
?
idealzouhu
·
2025-05-24 00:04
分布式
分布式
集群
【分布式与
集群
】
分布式与
集群
文章目录分布式与
集群
一、分布式二、
集群
三、分布式与
集群
的关系一、分布式什么是分布式服务?
Lin_zi.
·
2025-05-24 00:34
分布式
java
分布式与
集群
的区别
通俗表达:分布式是把一个任务拆分为多个子任务去执行
集群
是把一个任务同时给多台机器去执行一、单机单机就是把做的系统部署到一台服务器上,,所有的请求业务都由这台服务器处理。
nccxyxzq
·
2025-05-24 00:33
其它
docker
分布式
java
使用Rancher在CentOS 环境上部署和管理多Kubernetes
集群
然而,随着企业应用规模的扩大,多
集群
管理逐渐成为企业IT架构中的重要需求。
庸子
·
2025-05-23 23:26
云原生
rancher
centos
kubernetes
深入探究AKS Workload Identity
AzureKubernetes服务(AKS)提供了一项名为WorkloadIdentity的强大功能,它可以增强安全性并简化在Kubernetes
集群
中运行的应用程序的身份验证。
云攀登者-望正茂
·
2025-05-23 19:01
azure
kubernetes
Docker 与 Kubernetes 部署 RabbitMQ
集群
(二)
四、Kubernetes部署RabbitMQ
集群
实战(一)Kubernetes
集群
准备搭建Kubernetes
集群
可以采用多种方式,例如使用kubeadm工具进行搭建。
计算机毕设定制辅导-无忧学长
·
2025-05-23 19:29
#
RabbitMQ
docker
kubernetes
rabbitmq
【Docker】常见概念|技术架构演进之路|八大架构|单机架构|应用数据分离架构|应用服务
集群
架构
目录一、常见概念应用(Application)/系统(System)模块(Module)/组件(Component)分布式(Distributed)
集群
(Cluster)主(Master)/从(Slave
深鱼~
·
2025-05-23 13:20
架构
Hadoop系列二
写在前面生产上,
集群
的机器,总内存的75%,25%留给系统、Linux机制、以及防止OOM-killer。
qiyong7578
·
2025-05-23 12:38
hadoop
hadoop
深入理解 Hadoop 核心组件 Yarn:架构、配置与实战
Yarn(资源管理器):作为Hadoop的“操作系统”,负责
集群
资源(内存
线条1
·
2025-05-23 11:36
hadoop
架构
大数据
K8s 中 /etc/resolv.conf 断链引发 connect: connection refused 错误排查记录
文章目录问题现场查因过程根因解决方案方法一:恢复/etc/resolv.conf到标准格式方法二:重新启用systemd-resolved(如需要)验证总结在一次Kubernetes单节点
集群
部署中,我遇到一个令人困惑的问题
中年如酒
·
2025-05-23 11:04
K8S&Docker
kubernetes
容器
云原生
天文数据处理:基于CUDA的射电望远镜图像实时去噪算法(开源FAST望远镜数据处理代码解析)
传统CPU处理方案面临三大核心挑战:实时性瓶颈:单次观测需处理PB级数据,CPU
集群
处理延迟达小时级,无法满足快速射电暴(FRB)等瞬变事件的实时响应
学术猿之吻
·
2025-05-23 05:22
算法
开源
去中心化
智能合约
架构
risc-v
gpu算力
GPU
集群
的“碳中和”策略:从DVFS调频到液冷散热系统的能效模型
引言在超算中心年均能耗突破百万度电的背景下(典型规模的1000节点GPU
集群
年耗电约2.5亿度,≈CNY1.8亿元),实现能耗优化已成为各国超算中心的核心任务。
学术猿之吻
·
2025-05-23 05:22
架构
pytorch
人工智能
python
开发语言
Redis的哨兵与
集群
模式
Redis的哨兵模式RedisSentinel是Redis的一种高可用方案监控、通知、自动故障转移、服务发现假设有一个master节点和两个Slave节点,当发现有master宕机之后,只要有两个哨兵达成一致,就可以去做一个master的故障迁移,我们可以通过哨兵节点来获得我的一个master。在jedis中,是通jedissentinelpool处理jedis的哨兵。Sentinel架构的主要作
L# S@
·
2025-05-23 05:47
linux kafka常用命令
常用命令bin目录下sh命令介绍kafka-acls.sh:用于配置和查看Kafka
集群
的鉴权信息。kafka-configs.sh:用于查看和修改Kafka配置。
厄尔尼诺的夏天
·
2025-05-23 04:45
linux
kafka
运维
Elasticsearch常用命令
以下是Elasticsearch查看
集群
状态配置和索引完整操作流程的详细命令:一、查看
集群
状态与配置1.
集群
健康状态curl-XGET"localhost:9200/_cluster/health?
安审若无
·
2025-05-23 02:32
elasticsearch
搜索引擎
全文检索
k8s-NetworkPolicy
通过使用NetworkPolicy,可以实现更细粒度的网络访问控制,增强
集群
的安全性。
安顾里
·
2025-05-23 01:59
kubernetes
kubernetes
容器
云原生
k8s面试题-ingress
在Kubernetes中,Ingress是一种API对象,用于管理外部访问到
集群
内服务的HTTP和HTTPS路由。
安顾里
·
2025-05-23 01:58
kubernetes
kubernetes
容器
云原生
轻松搭建 Redis
集群
:Docker 实战指南 (含脚本和避坑技巧)
本文已收录在Github,关注我,紧跟本系列专栏文章,咱们下篇再续!魔都架构师|全网30W技术追随者大厂分布式系统/数据中台实战专家主导交易系统百万级流量调优&车联网平台架构AIGC应用开发先行者|区块链落地实践者以技术驱动创新,我们的征途是改变世界!实战干货:编程严选网1拉取Redis镜像$docker--versionDockerversion28.0.4,buildb8034c0$docke
·
2025-05-22 21:43
人工智能
深度剖析ZooKeeper
一、ZooKeeper主从
集群
ZooKeeper采用主从架构(Leader-Follower),通过ZAB协议(ZooKeeperAtomicBroadcast)实现数据一致
LiRuiJie
·
2025-05-22 17:10
zookeeper
分布式
java
hadoop
别让低效仓储拖累利润 试试联核无人叉车 今天升级明天领先
而联核科技推出的自动化AGV无人叉车机器人系列,正以技术革新重塑仓储物流生态,为企业提供从单机到
集群
的智能化解决方案,助力企业实现“今天升级,明天领先”的跨越式发展。
2501_91948061
·
2025-05-22 17:08
人工智能
无人叉车厂家
智能工厂
美团三面:消息中间件实现高可用架构,你会怎么设计?
V-xin:ruyuanhadeng获得600+页原创精品文章汇总PDF目录一、背景引入二、先来思考一下消息中间件的可用性问题三、
集群
化部署+数据多副本冗余四、多副本同步复制强制要求五、多机器承载多副本强制要求六
石杉的架构笔记
·
2025-05-22 15:31
面试求职
MQ
Java
架构
java
中间件
82: Zookeeper高可用
集群
、 分布式消息队列Kafka 、 搭建高可用Hadoop
集群
、总结和答疑
TopNSDARCHITECTUREDAY05案例1:组建zookeeper
集群
案例2:测试
集群
的远程管理和高可用案例3:在node节点上搭建3台kafka案例4:准备实验环境案例5:配置namenode
河北王承志
·
2025-05-22 12:10
达内云计算培训笔记
linux
Hadoop高可用 ------ 介绍及部署搭建
NameNode高可用NameNode是HDFS的核心配置,HDFS又是Hadoop的核心组件,NameNode在Hadoop
集群
中至关重要namenode机器宕机,将导致
集群
不可用,如果namenode
受益于开源 回馈于开源
·
2025-05-22 12:39
hadoop
Hadoop-HA高可用
集群
启动nameNode莫名挂掉,排错解决
Hadoop-HA高可用
集群
启动nameNode莫名挂掉,排错解决nameNode错误日志2025-05-2116:14:12,218INFOorg.apache.hadoop.ipc.Client:Retryingconnecttoserver
岁月的眸
·
2025-05-22 12:36
大数据
#
hadoop
hadoop
大数据
分布式
AWS EKS:解锁企业级Kubernetes管理的终极实践
然而,企业自建K8s
集群
常面临运维复杂、成本高昂、安全加固困难等痛点。
AWS官方合作商
·
2025-05-22 11:00
aws
kubernetes
云计算
一种针对
集群
单车运输的模块化装置结构设计(任务书)
毕业论文(设计)任务书题目一种针对
集群
单车运输的模块化装置结构设计姓名专业机械设计制造及其自动化班级学号题目来源□科研项目□社会实践自拟题目□其它选题类型□理论研究□应用研究设计开发□其它选题背景及目的
集群
单车运输的模块化装置结构设计结合了物流运输
shejizuopin
·
2025-05-22 10:55
一种针对集群
单车运输的
模块化
装置结构设计
机械毕业设计
cad图纸
sw三维图
HDFS NameNode 联邦机制与高可用方案解析
HDFS将所有元数据存储在内存中,单个NameNode的内存容量直接决定了
集群
可管理的文件数量。当
集群
规模扩大到亿级文件量时,单节点
线条1
·
2025-05-22 07:03
hdfs
hadoop
大数据
MySQL高可用
数据复制(Replication)2.2故障检测与自动切换(Failover)三、主流高可用方案对比与选型3.1主从复制(Master-Slave)3.2主主复制(Master-Master)3.3多节点
集群
2501_91112123
·
2025-05-22 07:33
adb
【AI论文】PRIMA.CPP:在低资源日常家用
集群
上加速700亿参数级大型语言模型推理
虽然消费类硬件越来越强大,模型量化也在不断改进,但现有的端侧解决方案仍然需要GPU
集群
、大RAM/VRAM和高带宽,远远超出了普通家庭
集群
的处理能力。
东临碣石82
·
2025-05-22 04:15
人工智能
语言模型
自然语言处理
Spark----SparkContext解析
SparkContext解析SparkContext是用户通往Spark
集群
的唯一入口,任何需要使用Spark的地方都需要先创建SparkContext,那么SparkContext做了什么?
XiaodunLP
·
2025-05-22 03:05
Spark
Spark
集群
搭建:Standalone 模式详解
搭建一个稳定、高效的Spark
集群
是充分发挥其性能的关键。本文将详细讲解如何搭建SparkStandalone
集群
。一、环境准备硬件要求至少准备三台服务器(一台作为主节点,两台作为从节点)。
麻芝汤圆
·
2025-05-22 03:34
spark大数据分析
spark
大数据
分布式
hadoop
mapreduce
开发语言
SparkContext介绍
目录1.
集群
管理接口2.RDD操作中枢3.任务分发引擎4.执行环境配置5.性能监控枢纽SparkContext是ApacheSpark的核心组件,其作用可概括为以下五个关键维度:1.
集群
管理接口作为与
集群
管理器
大数据知识搬运工
·
2025-05-22 03:03
spark学习
hadoop
spark
sparkcontext
k8s1.27版本
集群
部署minio分布式
需求:1.创建4个pv,一个pv一个minio-pod。使用sts动态分配pvc(根据存储类找到pv)。----持久化2.暴露minio的9001端口。(nodeport)----管理界面镜像:minio/minio:RELEASE.2023-03-20T20-16-18Z--->换国内源说明:本环境仅测试,两个minio的pod放在master节点,在master加了污点容忍,其他两个minio
Hfc.
·
2025-05-22 02:58
kubernetes
容器
云原生
mongodb
集群
shard_MongoDB分片
集群
部署详解
一、环境说明1、我们prod环境MongoDB的
集群
架构是做的分片
集群
的部署,但是目前我们没有分片,即所有数据都在一个分片上,后期如果数量大,需要分配,
集群
随时可以分片,对业务方透明2、各个角色的部署情况角色
weixin_39970369
·
2025-05-22 01:21
mongodb
集群shard
上一页
14
15
16
17
18
19
20
21
下一页
按字母分类:
A
B
C
D
E
F
G
H
I
J
K
L
M
N
O
P
Q
R
S
T
U
V
W
X
Y
Z
其他