E-COM-NET
首页
在线工具
Layui镜像站
SUI文档
联系我们
推荐频道
Java
PHP
C++
C
C#
Python
Ruby
go语言
Scala
Servlet
Vue
MySQL
NoSQL
Redis
CSS
Oracle
SQL Server
DB2
HBase
Http
HTML5
Spring
Ajax
Jquery
JavaScript
Json
XML
NodeJs
mybatis
Hibernate
算法
设计模式
shell
数据结构
大数据
JS
消息中间件
正则表达式
Tomcat
SQL
Nginx
Shiro
Maven
Linux
ceph集群
时间同步服务器
时间同步服务时间同步:多主机协作工作时,各个主机的时间同步很重要,时间不一致会造成很多重要应用的故障,如:加密协议,日志,
集群
等,利用NTP(NetworkTimeProtocol)协议使网络中的各个计算机时间达到同步
寒克1
·
2025-05-19 11:08
RHCE
服务器
运维
网络
后端使用 Spring Data Redis 的性能调优案例分析
后端使用SpringDataRedis的性能调优案例分析关键词:SpringDataRedis、性能调优、缓存策略、连接池配置、序列化优化、Redis
集群
、监控指标摘要:本文深入探讨了在企业级应用中如何对
后端开发笔记
·
2025-05-19 11:07
Spring
Boot
开发实战
spring
redis
java
ai
系统架构设计(九):分布式架构与微服务
核心区别与联系维度微服务架构分布式架构架构本质构建在分布式基础上的一种架构风格更广义,包含微服务、
集群
、负载均衡拆分粒度服务级别(一个服务一个职责)模块或系统级别部署方式各服务独立
却道天凉_好个秋
·
2025-05-19 10:30
#
软件架构设计
架构
系统架构
分布式
Flink运维要点
一、Flink运维核心策略1.
集群
部署与监控资源规划按业务优先级分配资源:核心作业优先保障内存和CPU,避免资源竞争。
杰克逊的日记
·
2025-05-19 05:59
flink
运维
大数据
Flink 作业提交流程
ApacheFlink的作业提交流程(JobSubmissionProcess)是指从用户编写完Flink应用程序,到最终在Flink
集群
上运行并执行任务的整个过程。
maozexijr
·
2025-05-19 05:26
flink
sql
大数据
【Spark】使用Spark
集群
搭建-Standalone
以下是使用SparkStandalone模式搭建
集群
的详细步骤:环境准备
集群
规划假设有3台服务器:主节点(Master):spark-master(192.168.1.100)工作节点(Worker):
元633
·
2025-05-19 03:43
spark
大数据
Docker-K8s-DevOps-Master: 掌握现代云原生开发运维的艺术
Docker-K8s-DevOps-Master:掌握现代云原生开发运维的艺术去发现同类优质开源项目:https://gitcode.com/在快速发展的云计算领域,Docker和Kubernetes(K8s)已经成为了容器化和
集群
管理的金标准
温宝沫Morgan
·
2025-05-19 02:36
Docker和K8S(Kubernetes)
集群
容器化部署
下面是将Docker和K8s结合使用进行
集群
容器化部署:1安装并配置Docker【Linux系统--CenterOS虚拟镜像】在每个
集群
节点上安装Docker并进行必要的配置,包括设置镜像加速器和配置Docker
IT_WEH_coder
·
2025-05-19 02:36
开发工具
docker
kubernetes
容器
K8S
集群
安装Pod网络附加组件
参考:
集群
网络系统|Kubernetes通过官方文档发现,CNI插件有很多,这里记录下Calico的安装(参考:AboutCalico)参考:InstallCaliconetworkingandnetworkpolicyforon-premisesdeployments
super_1301
·
2025-05-19 01:34
k8s
kubernetes
网络
docker
【MapReduce】一个完整MR程序案例教你如何用IDEA打包及运行
本文通过一个统计”通讯录“文件内容的MapReduce程序案例来教大家如何使用IDEA打包MR程序并在
集群
里执行。我们假设已经安装配置好了Hadoop。
大数据技术部落
·
2025-05-18 21:09
HDFS全方位实战
计算引擎
HBase全方位实战
mapreduce
Standalone模式介绍
SparkStandalone是ApacheSpark自带的
集群
管理器,无需依赖外部系统(如HadoopYARN或Kubernetes),可直接部署Spark
集群
。
姬激薄
·
2025-05-18 21:36
spark
mapreduce
MapReduce核心功能是将用户编写的业务逻辑代码和自带默认组件整合成一个完整的分布式运算程序(例如:jar包),并发运行在一个Hadoop
集群
上。
懒羊羊大王-O
·
2025-05-18 21:06
前端
Python爬虫(28)Python爬虫高阶:Selenium+Splash双引擎渲染实战与性能优化
目录一、背景:动态渲染技术的演进与挑战二、核心技术对比与选型三、环境搭建与工具链配置1.Docker部署Splash
集群
2.Selenium环境配置四、双引擎渲染核心实现1.智能路由中间件2.Splash
一个天蝎座 白勺 程序猿
·
2025-05-18 15:50
Python爬虫入门到高阶实战
python
爬虫
selenium
splash
Nginx与Tomcat负载均衡
集群
配置指南
目录一、资源清单二、基础环境三、安装配置Tomcat四、安装配置Nginx一、资源清单主机操作系统IP地址tomcat1OpenEuler24.03192.168.16.142tomcat2OpenEuler24.03192.168.16.143NginxOpenEuler24.03192.168.16.144二、基础环境hostnamectlset-hostnametomcat1hostname
YJQ9967
·
2025-05-18 15:19
LVS负载均衡群集
nginx
tomcat
负载均衡
最新Kafka单机安装无需zookeeper
在Kafka2.8及以前的版本,ZooKeeper是Kafka运行必不可少的组件,它主要负责管理和协调Kafka
集群
中的各种元数据,比如主题、分区、副本的状态信息等。
Hanging_Spot
·
2025-05-18 14:17
kafka
HBASE默认端口
节点端口号协议使用说明zookeeper2181zkCli.sh-serverzookeeper1:2181客户端接入2888,3888N/A
集群
内部通讯HDFSNamenode9000HDFShdfsdfs-lshdfs
lansye
·
2025-05-18 14:46
技术类
hadoop
hdfs
hbase
Elasticsearch
集群
管理秘籍 [特殊字符]
Elasticsearch
集群
管理秘籍掌握
集群
管理,从此不再担心半夜被叫醒目录主节点选举机制
集群
节点配置⚙️综合设计️总结主节点选举机制面试题1:主节点选举流程题目:描述Elasticsearch的主节点选举流程
真实的菜
·
2025-05-18 13:12
elasticsearch
搜索引擎
安全版4.5.8开启审计后,hac+读写分离主备切换异常
BUG/漏洞编码症状触发条件解决方案环境系统平台:UOS(飞腾)版本:4.5.8BUG/漏洞编码3043症状BUG安装包:hgdb-see-4.5.8-db43858.aarch64.rpm异常:hac
集群
一主两备环境
瀚高PG实验室
·
2025-05-18 11:26
安全
oracle
数据库
Elasticsearch-Kibana 8.3.2
集群
安装搭建-Linux
搭建ElasticSearch
集群
:安装elasticsearch数据存储器。用于数据存储,可以分布式部署。如果有需求可以根据需求,增加更多的机器用于存储数据,增加elasticsearch的节点。
zhangdawei838
·
2025-05-18 08:34
elasticsearch
大数据
【Redis】Redis特性及其应用场景
目录Redis特性在内存中存储数据可编程性可扩展性持久化
集群
高可用补充特性Redis的应用场景数据库缓存会话存储消息队列中间件Redis特性Redis是一个在内存中存储数据的中间件,用于作为数据库、数据缓存
DoKern
·
2025-05-18 07:55
Redis
redis
C++ Kafka客户端(cppkafka)安装与问题解决指南
C++应用cppkafkalibrdkafkaKafka
集群
二、环境准备2.1系统要求librdkafka>=0.9.4CMake>=3.9.2C++11兼容的编译器(gcc>=4.8)Boost库(用于
ALex_zry
·
2025-05-18 06:17
cmake
kafka
c++
kafka
开发语言
Kubernetes 1.28 无 Docker 运行时环境下的容器化构建实践:Kaniko + Jenkins 全链路详解
背景说明随着Kubernetes1.28正式弃用Docker作为默认容器运行时(CRI规范演进),传统的dockerbuild方式已无法直接在
集群
内运行。
gnufre
·
2025-05-18 05:07
kubernetes
jenkins
kaniko
Spark大数据分析案例
目录案例概述环境搭建1.Spark单机环境2.Spark
集群
环境数据集数据预处理Spark作业编写提交Spark作业数据可视化可能遇到的问题及解决方法1.数据导入失败2.内存不足3.
集群
节点失效4.数据倾斜问题
闲人编程
·
2025-05-18 04:30
大数据集群部署教程
spark
数据分析
大数据
单机
集群
当 PyIceberg 和 DuckDB 遇见 AWS S3 Tables:打造 Serverless 数据湖“开源梦幻组合”
传统方法依赖Spark/Presto
集群
或Redshift查询S3上的Parquet/ORC文件,这对于需要快速迭代、按需执行的分析来说,成本高、运维复杂且响应不够敏捷。
一个没有感情的程序猿
·
2025-05-17 22:54
aws
serverless
开源
高可用k8s
集群
搭建-1.31.1
k8s高可用
集群
搭建参考官方文档:Kubernetes文档支持的版本|Kubernetes注:本文章搭建的k8s
集群
版本为1.31.1,系统版本:CentOS8(stream)一、概述创建高可用
集群
有两种方法
zybox运维
·
2025-05-17 21:44
kubernetes
容器
云原生
K8S的各组件如何实现高可用?
高可用策略:通过多个节点上部署多个API服务器实例,并使用负载均衡器(如云服务器商提供的负载均衡或自建的负载均衡解决方案如HAProxy、Nginx等)对外提供统一入口数据持久化:所有状态变更都写入etcd
集群
Dusk_橙子
·
2025-05-17 21:12
K8S
kubernetes
容器
云原生
Keepalived+HAProxy实现K8S高可用
集群
-20240927
optiontcplogtcp-requestinspect-delay5sdefault_backendk8s-masterbackendk8s-mastermodetcpoptiontcplogoptiontcp-checkbalanceroundrobindefault-serverinter10sdowninter5srise2fall2slowstart60smaxconn250maxq
2401_84411097
·
2025-05-17 20:09
程序员
kubernetes
java
容器
NVIDIA® GPU的TCC模式与WDDM模式
1、NVIDIATesla/Quadro系列高端GPU在Windows环境下可以配置两种模式:1)Tesla计算
集群
(TeslaComputeCluster,简称TCC)模式2)Windows显示驱动模型
有段时光
·
2025-05-17 19:31
CUDA
MongoDB分片
集群
将数据水平拆分到不同的服务器上2.为什么要使用分片
集群
数据量突破单机瓶颈,数据量大,恢复很慢,不利于数据管理并发量突破单机性能瓶颈MongoDB分片
集群
由一下几部分组成分片
集群
角色:路由节点:mongos
好吃的肘子
·
2025-05-17 19:28
mongodb
数据库
Spark目前支持的部署模式。
一、本地模式(LocalMode)特点:在单台机器上运行,无需
集群
。主要用于开发、测试和调试。所有组件(Driver、Executor)在同一个JVM中运行。
依年南台
·
2025-05-17 18:25
spark
大数据
5 Celery多节点部署
一、多节点部署架构设计1.1典型生产环境拓扑负载均衡Broker
集群
Worker节点1Worker节点2Worker节点N结果存储1.2节点类型说明节点类型配置建议典型数量Broker节点4核8G+SSD
安迪小宝
·
2025-05-17 17:19
python
Celery
python
Celery
快速部署Hadoop+MySQL+Hive+Spark的
集群
这里我们在克隆后的克隆机上需要重新修改成对应的主机名)(3)、使用setup命令配置网络环境(这里我们在克隆后的克隆机上需要重新修改成对应的主机ip)(4)、关闭防火墙二、配置hosts文件列表三、安装JDK四、Hadoop
集群
配置
会飞的胖猪胖
·
2025-05-17 16:41
hadoop
spark
mysql
hive
什么是SparkONYarn模式
SparkonYARN是ApacheSpark的一种部署模式,允许Spark应用程序在HadoopYARN
集群
上运行,充分利用YARN的资源管理和调度能力。
姬激薄
·
2025-05-17 14:20
spark
配置Hadoop
集群
-配置历史和日志服务
完成Hadoop
集群
配置后,需要进行全面测试以验证其功能和性能。
姬激薄
·
2025-05-17 14:50
hadoop
大数据
分布式
顶层架构 - 消息
集群
推送方案
一、推送基础概念简述在即时通讯(IM)系统中,最基础的一件事就是“如何把消息推送给用户”。为了实现这个过程,我们要先了解两种常见的网络通信方式:HTTP和WebSocket。1.HTTP是什么?HTTP就像一次性对话:客户端发起请求,服务端回复一次后,这条连接就断了。它是“无状态”的,也就是说服务器不会记得你上一次说了什么。它的好处是使用简单,适合访问网页、发评论这种“说一次就好”的请求。2.We
ktkiko11
·
2025-05-17 11:03
IM项目记录
架构
java
开发语言
【spark床头书系列】spark-shell 任务提交任务参数选项说明示例源码权威详解
spark-shell任务提交任务参数选项说明示例源码详解点击这里看全文文章目录参数说明常规选项:仅在
集群
模式下生效:仅适用于YARN:仅适用于SparkStandalone或者Mesos的
集群
模式:仅适用于
BigDataMLApplication
·
2025-05-17 10:54
大数据
spark
数据挖掘
spark
大数据
零基础开发AI智能体教程(3)|创建两个Deepseek-v3智能体并相互调用
一、课前准备:搭建智能体舞台1.1先认识我们的演员Agent(智能体):就像公司里的员工,每个都有特定技能Swarm(
集群
):我们
叾屾自学大模型
·
2025-05-17 09:43
人工智能
spark-submit详解
通常会采用以下两种方式:1)spark-shell:一般调试用;2)spark-submit:正式提交任务;简而言之:spark-submit的使用与spark
集群
部署模式(standalone,yarn
oynl
·
2025-05-17 09:43
Spark
PCIe-6314 四口USB 3.2工业级主控卡技术白皮书
适用于工业相机阵列、高速外设
集群
、精密检测设备等对数据吞吐量和系统稳定性要求极高的应用场景。二、核
qq_52609913
·
2025-05-17 07:36
数码相机
JuiceFS CSI:Mount Pod 的平滑升级及其实现原理
当
集群
中需要升级MountPod时,目前推荐的方式是更新配置后重新挂载应用Pod进行滚动升级,但这种升级方式的问题在于需要业务重启。
Juicedata
·
2025-05-17 04:15
云原生
容器
产业
集群
效应显著:双流芯谷元宇宙产业园创新发展
产业
集群
效应显著促创新发展!双流芯谷元宇宙产业园的创新发展,显著的产业
集群
效应是其核心驱动力与鲜明特征。
双流元宇宙产业园
·
2025-05-17 03:38
大数据
Nginx Upstream了解一下
文章目录1核心功能与基础配置1.1定义服务器
集群
1.2负载均衡策略1.2.1轮询(RoundRobin)1.2.2加权轮询(WeightedRoundRobin)1.2.3IP哈希(IPHash)1.2.4
村头的猫
·
2025-05-17 03:35
nginx
前端
运维
K8S Gateway AB测试、蓝绿发布、金丝雀(灰度)发布
假设有如下三个节点的K8S
集群
:k8s31master是控制节点k8s31node1、k8s31node2是工作节点容器运行时是containerd一、场景分析阅读本文,默认您已经安装了K8SGateway
matrixlzp
·
2025-05-16 23:11
K8S
kubernetes
gateway
ab测试
20.Elasticsearch生产
集群
部署之jvm和服务器内存分配的最佳实践以及原理分析
除了之前讲解的一些配置,根据你的
集群
环境特殊的配置,我们这一讲来讲解最重要的内存的分配,提出一些问题,生产环境部署es,不可避免要回答一个问题,比如我的机器上有64G的内存,或者32G的内存,那么一般来说我应该分配多少个
远处的海亲吻着天
·
2025-05-16 22:07
elasticsearch
进阶
doris节点数量规划
对于生产
集群
,一般建议部署至少3个节点的FE以实现高可用环境。
jiedaodezhuti
·
2025-05-16 22:07
doris
大数据
为什么doris是实时的?
作为实时分析型数据库的核心竞争力源于其技术架构与功能设计的深度融合,以下从关键特性解析其实时能力的技术实现:一、MPP架构驱动分布式并行计算基于大规模并行处理(MPP)架构,Doris能将查询任务动态拆解为子任务,在多个节点上并行执行,充分利用
集群
计算资源加速数据处理
jiedaodezhuti
·
2025-05-16 22:06
doris
大数据
elasticsearch-7.3.1
集群
搭建
1、es介绍ElasticSearch是一个基于Lucene的搜索服务器。提供了分布式多用户的全文搜索引擎,用Java语言开发的,Apache许可条款下的开放源码发布,是一种流行的企业级搜索引擎。包含如下特性:分布式高可用搜索引擎:每个索引都可以配置分片的数量。每个分片都有一个或多个副本且分片都支持读写多租户:支持多个索引以及索引级配置,如碎片数、索引存储等。提供各种API:包括HTTPRestf
jiedaodezhuti
·
2025-05-16 22:36
elasticsearch
elasticsearch
全面指南:Xinference大模型推理框架的部署与使用
本文将详细介绍Xinference的核心特性、版本演进,并提供多种部署方式的详细指南,包括本地部署、Docker-Compose部署以及分布式
集群
部署,同时涵盖GPU和CPU环境下的配置差异。
黄宝良
·
2025-05-16 15:41
人工智能
大模型
python
人工智能
微服务概述
每个服务可以发布多个实例,所有的服务组建成一个网状的服务
集群
。微服务带来的问题即微服务的代价将
Ramble_Naylor
·
2025-05-16 14:03
极简教程
微服务
SpringBoot
微服务
架构
云原生
Kubernetes
集群
中对应的 Secret 对象如何修改
要更改valueFrom.secretKeyRef的值,您需要更新Kubernetes
集群
中对应的Secret对象。
北冥SP
·
2025-05-16 13:31
kubernetes
容器
云原生
上一页
16
17
18
19
20
21
22
23
下一页
按字母分类:
A
B
C
D
E
F
G
H
I
J
K
L
M
N
O
P
Q
R
S
T
U
V
W
X
Y
Z
其他