E-COM-NET
首页
在线工具
Layui镜像站
SUI文档
联系我们
推荐频道
Java
PHP
C++
C
C#
Python
Ruby
go语言
Scala
Servlet
Vue
MySQL
NoSQL
Redis
CSS
Oracle
SQL Server
DB2
HBase
Http
HTML5
Spring
Ajax
Jquery
JavaScript
Json
XML
NodeJs
mybatis
Hibernate
算法
设计模式
shell
数据结构
大数据
JS
消息中间件
正则表达式
Tomcat
SQL
Nginx
Shiro
Maven
Linux
Cassandra集群
spark的任务提交方式及流程
本地模式local测试用,不多赘述分布式模式standalonestandalone
集群
是spark自带的一个资源调度
集群
,分为两个角色,master/worker,master负责接收任务请求、资源调度
qzWsong
·
2024-01-05 19:29
spark
spark
大数据
yarn
常见问题(六)Cluster 下的带宽消耗
官方建议
集群
的节点数不要超过1000个,当节点数多起来的时候,节点间的消息交互量会提升;带宽消耗表现的3个方面消息发送频率:当节点发现与其他节点最后通信时间超过cluster-node-timeout的
乌鲁木齐001号程序员
·
2024-01-05 18:04
基于docker的mysq高可用
集群
方案
基于docker的mysqlmgr高可用
集群
方案,具体结构如下:20200713103738.png软件版本MySQL5.7.30ProxySQL2.0.12准备工作3*centos(ubuntu)服务器服务器安装好最新的
哦呵呵_3579
·
2024-01-05 18:16
Nginx 负载均衡
集群
节点健康检查
前言正常情况下,nginx做反向代理负载均衡的话,如果后端节点服务器宕掉的话,nginx默认是不能把这台服务器踢出upstream负载
集群
的,所以还会有请求转发到后端的这台服务器上面,这样势必造成网站访问故障注
ReturnTmp
·
2024-01-05 18:00
运维笔记
Nginx
负载均衡
健康检查
集群
Actuator
Tengine
linux设置page cache大小,Linux Page Cache调优在Kafka中的应用
在读写数据方面,Kafka
集群
的压力将变得巨大,而磁盘IO成为了Kaf
刑律小陈
·
2024-01-05 17:39
linux设置page
cache大小
分布式
集群
架构场景化解决⽅案
第⼀部分:⼀致性Hash算法第⼆部分:
集群
时钟同步问题第三部分:分布式ID解决⽅案数据表A(ID),A的数据量很⼤的情况下,我们会进⾏分表操作,A(ID)表拆分成了A1表(ID)+A2表(ID),需要⼀
碎月无晴灬
·
2024-01-05 16:40
Pentaho Kettle 6.1连接CDH5.4.0
集群
最近把之前写的HadoopMapReduce程序又总结了下,发现很多逻辑基本都是大致相同的,于是想到能不能利用ETL工具来进行配置相关逻辑来实现MapReduce代码自动生成并执行,这样可以简化现有以及之后的一部分工作.于是选取了上手容易并对Hadoop支持的比较成熟的PentahoKettle来测试,把一些配置过程和遇到的坑记录下来.Kettle可以在官网下载到,但是官网会让你注册才能下载而且速
香山上的麻雀
·
2024-01-05 16:43
集群
部署篇--Redis
集群
动态伸缩
1.2redis节点添加:1.3槽位分配:1.4添加从节点:二、redis节点的减少2.1移除主节点2.1.1迁移槽位2.1.1删除节点:三、redis删除节点的重新加入3.1加入节点:四、redis
集群
的故障转移
拽着尾巴的鱼儿
·
2024-01-05 16:31
java工具篇
db数据库
redis
数据库
缓存
Kubernetes in Action 笔记 —— 部署第一个应用
Minikube&kubectlMinikube是一个能够在本地环境搭建Kubernetes
集群
的工具,支持Windows、Linux和MacOS等平台,由Kubernetes社区进行维护。
rollingstarky
·
2024-01-05 16:57
liveweb国标GB28181视频融合监控汇聚云平台的方案及应用场景
GB28181/RTSP/Onvif/海康SDK/Ehome/大华SDK/RTMP推流等)、多类型设备接入(IPC/NVR/监控平台),在视频能力上,可实现视频直播、录像、回放、检索、云存储、告警上报、语音对讲、
集群
p2p音视频开发
·
2024-01-05 16:56
liveweb流媒体平台
监控汇聚系统
GB28181协议方案
安防视频监控平台
音视频
国标GB28181视频平台liveweb流媒体平台的应用场景以及方案实现
GB28181/RTSP/Onvif/海康SDK/Ehome/大华SDK/RTMP推流等)、多类型设备接入(IPC/NVR/监控平台),在视频能力上,可实现视频直播、录像、回放、检索、云存储、告警上报、语音对讲、
集群
p2p音视频开发
·
2024-01-05 16:24
音视频
监控视频汇聚平台
liveweb流媒体平台
web无插件播放监控平台
GB28181
企业级大数据安全架构(二)安全方案
作者:楼高1Knox访问控制ApacheKnox是一个为ApacheHadoop部署提供交互的应用网关,通过其RESTAPI和用户友好的UI,为所有与Hadoop
集群
的REST和HTTP交互提供了统一的访问点
云掣YUNCHE
·
2024-01-05 15:33
企业级大数据安全架构
安全
大数据
安全架构
记一个
集群
环境部署不完整导致的BUG
一背景产品有三个环境:开发测试环境、验收环境、生产环境。开发测试环境,保持最新的更新;验收环境,阶段待发布内容;生产环境,部署稳定内容。产品为BS架构,后端采用微服务,不同环境指向对应的微服务。二现象有阶段完成内容在测试环境上完成,更新到验收环境,等待验收。更新的同事在操作完成后,抽验了内容,没问题,然后通知验收人员。验收人员进行验收时,发现部分用户在使用某功能时功能失效,有的用户使用正常。三分析
zljun8210
·
2024-01-05 15:21
测试范围
运维
bug
【Kubernetes 】Kubernetes 安全审计实战指南
Kubernetes审计是一项重要的安全措施,它可以帮助您监控和审计
集群
中的各种活动,以保障
集群
的安全性和合规性。本指南将带您逐步实现Kubernetes安全审计的配置和实战应用。
奔向理想的星辰大海
·
2024-01-05 15:09
云原生
大数据
Kubernetes
kubernetes
安全
容器
缓存服务——Redis
集群
简介
文章目录缓存服务——Redis
集群
一、Redis简介1.Redis软件获取和帮助2.Redis特性3.企业缓存数据库解决方案对比4.Redis应用场景二、Redis基本部署1.编译安装最新版本redis2
单纯的一比
·
2024-01-05 15:38
数据库
redis
数据库
sql
nosql
分布式缓存-Redis分片
集群
一、分片
集群
结构主从和哨兵可以解决高可用、高并发读的问题,但是依然有两个问题没有解决:海量数据存储问题高并发写的问题使用分片
集群
可以解决上述问题,分片
集群
特征:
集群
中有多个master,每个master
喵先森爱吃鱼
·
2024-01-05 15:06
Redis
redis
缓存
Redis
集群
介绍
什么是
集群
能够对外提供相同服务的多台服务器组成的集合。为什么要建立
集群
1.从可用性角度考虑,如果只有一台机器提供服务,一旦出现故障,那么整个服务不可用。
黑木爷
·
2024-01-05 15:06
分布式
redis
数据库
缓存
03Redis缓存高可用
集群
1、Redis
集群
方案比较哨兵模式在redis3.0以前的版本要实现
集群
一般是借助哨兵sentinel工具来监控master节点的状态,如果master节点异常,则会做主从切换,将某一台slave作为master
Joanna_or_zhouzhou
·
2024-01-05 15:33
java分布式
缓存
redis
java
Mycat分库分表实时同步到GreatSQL
近来接到客户需求,需要将MyCat
集群
迁移到GreatSQL中,并且在一段时间内需要实时从MyCat中同步数据到GreatSQL中,全量同步数据比较容易操作,增量同步有如下两个棘手的问题:多个server
GreatSQL社区
·
2024-01-05 15:32
GreatSQL
MySQL
Redis缓存高可用
集群
Redis缓存高可用
集群
一、Redis
集群
方案比较1、哨兵模式2、高可用
集群
模式二、Redis高可用
集群
搭建1、在第一台服务器建立两个节点2、第一个节点的redis.conf配置3、启动6个redis实例
编程小菜吉
·
2024-01-05 15:32
Redis
redis
缓存
用redis广播消息更新
集群
环境下本地缓存
如果单节点时不存在问题,但如果是在
集群
环境下,就需要同步更新中所有节点的本地缓存。
shandongwill
·
2024-01-05 15:31
Java
缓存
redis
数据库
Redis7--基础篇8(
集群
cluster)
1.
集群
(cluster)介绍由于数据量过大,单个Master复制集难以承担,因此需要对多个复制集进行
集群
,形成水平扩展每个复制集只负责存储整个数据集的一部分,这就是Redis的
集群
,其作用是提供在多个
UntifA
·
2024-01-05 14:37
#
redis
redis
Redis面试题4
Redis是基于内存的,需要注意机器内存的使用情况,避免出现内存溢出等问题,特别是在
集群
模式下。
CrazyMax_zh
·
2024-01-05 14:56
redis
数据库
缓存
Redis面试题2
此外,可以通过设置合适的数据备份策略和高可用机制,如主从复制、哨兵模式或
集群
模式,以确保数据的持久性和可用性。Redis的数据类型如何选择?Redis提供了不同的数据类型,如字符串、列
CrazyMax_zh
·
2024-01-05 14:54
redis
数据库
缓存
英飞凌TC3xx之一起认识GTM(九)GTM相关知识简述(CMU,CCM,TBU,MON)
英飞凌TC3xx之一起认识GTM(九)GTM相关知识简述(CMU,CCM,TBU,MON)1时钟管理单元(CMU)2
集群
配置模块(CCM)3时基单元(TBU)4监控单元(MON)5总结由前文的各篇内容,
elsa_balabala
·
2024-01-05 13:34
手把手教你学英飞凌AURIX™
TC3xx系列芯片各模块配置
英飞凌
TC3xx
GTM
CMU
CCU
TBU
MON
docker部署es
集群
https://blog.csdn.net/frrree/article/details/120453668
一梦无痕bzy
·
2024-01-05 13:55
elk
docker
elasticsearch
容器
Kubernetes 100个常用命令!
列出了100个Kubectl命令,这些命令对于诊断Kubernetes
集群
中的问题非常有用。
Linux技术社区
·
2024-01-05 13:48
Linux
kubernetes
容器
云原生
.NetCore部署微服务(一)
目录前言什么是微服务微服务的优势微服务的原则创建项目在Docker中运行服务客户端调用简单的
集群
服务前言写这篇文章旨在用最简单的代码阐述一下微服务什么是微服务微服务描述了从单独可部署的服务构建分布式应用程序的体系结构流程
菜鸟进阶成大神
·
2024-01-05 13:03
.netcore
微服务
多架构容器镜像构建
最近在一个国产化项目中遇到了这样一个场景,在同一个Kubernetes
集群
中的节点是混合架构的,也就是说,其中某些节点的CPU架构是x86的,而另一些节点是ARM的。
C lover
·
2024-01-05 12:18
架构
容器
linux
运维
docker
云原生
redis总结
但Redis的其他功能,比如持久化、异步删除、
集群
数据同步等,其实是由额外的线程执行的。
82瓜
·
2024-01-05 12:18
redis
数据库
缓存
在IDEA启动多个Spring Boot工程实例
SpringBoot工程实例在IDEA上点击Application右边的下三角,弹出选项后,点击EditConfiguration每次需要修改端口号,以不同的端口号启动,服务名称一致,端口号不同,eureka会识别为
集群
锅巴编程
·
2024-01-05 12:12
intellij-idea
spring
boot
java
eureka
分布式(9)
基于上面Java任务演化出分布式Job方案:quartzJDBCJobStore支持
集群
所有触发和Job都存储在数据库中无论服务器停止和重启都可以恢复任务同时支持事务处理elasticjobelas
龙贝子
·
2024-01-05 12:41
分布式
面试题
分布式
【大数据】分布式协调系统 Zookeeper
分布式协调系统Zookeeper1.Zookeeper的特点2.Zookeeper的数据结构3.Zookeeper的应用场景3.1统一命名服务3.2统一配置管理3.3统一
集群
管理3.4服务器动态上下线3.5
G皮T
·
2024-01-05 12:36
大数据
分布式
大数据
zookeeper
hadoop
<redis
集群
>二.哨兵模式
所以整个运行哨兵的
集群
的数量不得少于3个节点。
我真的学不会救救我吧
·
2024-01-05 11:25
数据库
redis
linux
运维
缓存
<redis
集群
>三.redis
集群
配置和故障恢复
1.redis
集群
概述Redis3.0版本以上开始支持cluster,采用的是hashslot(hash槽),可以将多个Redis实例整合在一起,形成一个群集,也就是将数据分散到群集的多台机器上。
我真的学不会救救我吧
·
2024-01-05 11:25
redis
运维
服务器
系统架构
搭建Nginx负载均衡
Nginx+Tomcat搭建高性能负载均衡
集群
一、工具nginx-1.8.0apache-tomcat-6.0.33二、目标实现高性能负载均衡的Tomcat
集群
:三、步骤1、首先下载Nginx,要下载稳定版
lichongxyz
·
2024-01-05 11:14
负载均衡
Spark内核解析-部署模式解析8(六)
standalone模式,即独立模式,自带完整的服务,可单独部署到一个
集群
中,无需依赖任何其他资源管理系统。
有语忆语
·
2024-01-05 10:06
大数据之Spark
spark
大数据
分布式
Spark内核解析-内存管理7(六)
在执行Spark的应用程序时,Spark
集群
会启动Driver和Executor两种JVM进程,前者为主控进程,负责创建Spark上下文,提交Spark作业(J
有语忆语
·
2024-01-05 10:36
大数据之Spark
spark
ajax
javascript
Spark内核解析-整体概述1(六)
1、Spark整体概述1.1整体概念ApacheSpark是一个开源的通用
集群
计算系统,它提供了High-level编程API,支持Scala、Java和Python三种编程语言。
有语忆语
·
2024-01-05 10:35
大数据之Spark
spark
大数据
分布式
黑马程序员Dubbo快速入门,Java分布式框架dubbo教程
分布式系统中的相关概念(一)互联网项目架构目标-特点(二)互联网项目架构目标-目标(三)
集群
和分布式(四)架构演进Dubbo概述(一)dubbo概述1、dubbo概念2、dubbo架构Dubbo快速入门
5pace
·
2024-01-05 10:19
dubbo
java
分布式
【Spark精讲】Spark on Hive性能优化
目录第一章1.1
集群
配置概述1.2
集群
规划概述第二章Yarn配置2.1Yarn配置说明yarn.nodemanager.resource.memory-mbyarn.nodemanager.resource.cpu-vcoresyarn.scheduler.maximum-allocation-mbyarn.scheduler.minimum-allocation-mb
话数Science
·
2024-01-05 10:10
Spark精讲
Spark
大数据
spark
大数据
面试
K8s & K3s
集群
中 Hlem 化部署 Gitlab
Gitlab简介GitLab是一个用于仓库管理系统的开源项目,使用Git作为代码管理工具,并在此基础上搭建起来的web服务。GitLab由乌克兰程序员DmitriyZaporozhets和ValerySizov开发,它由Ruby写成。后来,一些部分用Go语言重写,现今并在国内外大中型互联网公司广泛使用。git、gitlab、GitHub的简单区别git是一种基于命令的版本控制系统,全命令操作,没有
流雨声
·
2024-01-05 10:02
k8s-master增加和删除污点
使用kubeadm部署的kubernetes
集群
,其中master节点上默认拒绝pod调度运行在此上面。
qq_14910065
·
2024-01-05 09:12
kubernetes
kubernetes
容器
云原生
Hadoop(04) HDFS编程实践操作
学习本指南需要在Linux系统安装好Hadoop.如果机器上没有安装Linux和Hadoop,请返回Hadoop(02)Hadoop-3.3.6
集群
的配置教程_Eufeo的博客-CSDN博客,根据教程安装
Eufeo
·
2024-01-05 09:25
Hadoop
hadoop
hdfs
大数据
Hadoop
集群
环境下HDFS实践编程过滤出所有后缀名不为“.abc”的文件时运行报错:Path is not a file: /user/hadoop/input
一、问题描述搭建完Hadoop
集群
后,在Hadoop
集群
环境下运行HDFS实践编程使用Eclipse开发调试HDFSJava程序(文末有源码):假设在目录“hdfs://localhost:9000/user
哇咔咔哇咔
·
2024-01-05 09:25
Hadoop
分布式
hadoop
hdfs
eclipse
java
大数据
HBase伪分布式配置下,报错:org.apache.hadoop.hbase.PleaseHoldException: Master is initializing的解决方案
一、问题描述今天在使用HBaseJavaAPI编程实践时发现出现报错,同样在创建表和查看HBase
集群
状态信息时也出现报错,以下是错误截图:这是由于HBase的主节点正在初始化过程中,无法处理请求。
哇咔咔哇咔
·
2024-01-05 09:54
Hadoop
分布式
hbase
apache
1024程序员节
hadoop
配置Hadoop
集群
后启动Hadoop时出错:Master: ssh: connect to host master port 22: No route to host
一、问题描述在配置完成Hadoop
集群
后,在启动Hadoop时出现报错:Master:ssh:connecttohostmasterport22:Noroutetohost错误截图如下(其中YKBMaster
哇咔咔哇咔
·
2024-01-05 09:54
Hadoop
分布式
hadoop
ssh
linux
大数据
大数据 - Doris系列《二》- Doris安装(亲测成功版)
安装前准备1.设置系统最大文件打开句柄数==>启动一个程序的时候,打开文件的数量就是句柄数3.时钟同步4.关闭交换分区(swap)2.2安装FE2.3安装BE2.4BE向FE注册2.5扩容和缩容(搭建
集群
王哪跑nn
·
2024-01-05 09:49
大数据
Doris
大数据
Hadoop
集群
环境下HDFS实践编程过滤出所有后缀名不为“.abc”的文件时运行报错:java.net.ConnectException: 拒绝连接;
一、问题描述搭建完Hadoop
集群
后,在Hadoop
集群
环境下运行HDFS实践编程使用Eclipse开发调试HDFSJava程序(文末有源码):假设在目录“hdfs://localhost:9000/user
哇咔咔哇咔
·
2024-01-05 09:19
Hadoop
分布式
hdfs
hadoop
eclipse
java
大数据
分布式【zookeeper面试题23连问】
ZooKeeper是一个分布式的,开放源码的分布式应用程序协调服务,是Google的Chubby一个开源的实现,它是
集群
的管理者,监视着
集群
中各个节点的状态根据节点提交的反馈进行下一步合理操作。
sober_me
·
2024-01-05 09:32
分布式
分布式
zookeeper
云原生
上一页
77
78
79
80
81
82
83
84
下一页
按字母分类:
A
B
C
D
E
F
G
H
I
J
K
L
M
N
O
P
Q
R
S
T
U
V
W
X
Y
Z
其他