E-COM-NET
首页
在线工具
Layui镜像站
SUI文档
联系我们
推荐频道
Java
PHP
C++
C
C#
Python
Ruby
go语言
Scala
Servlet
Vue
MySQL
NoSQL
Redis
CSS
Oracle
SQL Server
DB2
HBase
Http
HTML5
Spring
Ajax
Jquery
JavaScript
Json
XML
NodeJs
mybatis
Hibernate
算法
设计模式
shell
数据结构
大数据
JS
消息中间件
正则表达式
Tomcat
SQL
Nginx
Shiro
Maven
Linux
集群虚拟化
Apache Kafka 在生产环境中的管理与优化:从理论到实践
那么,如何管理并优化Kafka
集群
,提升其在复杂生产环境下的表现呢?接下来,我将通过经验总结和代码示例,带你逐步了解生产环境下Kafka的管理与优化。一
Echo_Wish
·
2025-03-09 22:07
运维探秘
让你快速入坑运维
apache
kafka
分布式
Hadoop:全面深入解析
Hadoop是一个用于大规模数据处理的开源框架,其设计旨在通过
集群
的方式进行分布式存储和计算。
CloudJourney
·
2025-03-09 21:29
hadoop
大数据
分布式
MySQL
集群
:高可用架构的利与弊
MySQL
集群
作为一种常见的解决方案,被广泛用于解决单点故障和性能瓶颈的问题。但它是否适合所有场景?本文将从实际应用的角度,分析MySQL
集群
的核心特点、优势与不足。1.什么是MySQL
集群
?
异常驯兽师
·
2025-03-09 18:00
mysql
架构
数据库
hbase 默认目录_[HBase] HBase数据存储目录解析
RegionServer,都会对应1~n个子目录/hbase/oldWALs当/hbase/WALs中的HLog文件被持久化到存储文件时,它们就会被移动到/hbase/oldWALs/hbase/hbase.id
集群
的唯一
weixin_39577422
·
2025-03-09 13:21
hbase
默认目录
hbase
集群
archive目录过大问题处理
1.问题现象现场反馈hbase
集群
/hbase/archive目录过大,大小约为1.52PB现场
集群
已经清理掉2个月以前的snapshot文件,当前archive目录文件仍不能释放现场发现1T以上的archive
spring208208
·
2025-03-09 12:15
大数据组件线上问题分析
hbase
数据库
大数据
K8s 1.27.1 实战系列(二)安装
集群
并初始化
一、安装kubeadm、kubelet和kubectl(所有节点)1、配置k8s的yum源地址cat<
白昼ron
·
2025-03-09 12:44
K8s
kubernetes
容器
K8s
部署
containerd
kubeadm
kubelet
搭建测试用的redis
集群
访问失败小记
首先在ubuntu下启动redis
集群
下载redis源码,编译成功后,进入utils/create-cluster目录,运行./create-clusterstart.
yinhezhanshen
·
2025-03-09 09:42
redis
golang
HDFS的设计架构
1.HDFS的设计思想HDFS的设计目标是解决大规模数据存储和处理的问题,其核心设计思想包括:(1)分布式存储-数据被分割成多个块(Block),并分布存储在
集群
中的多个节点上。
F_0125
·
2025-03-09 05:21
Hadoop
hdfs
hbase
hadoop
无人机+自组网:中继通信增强技术详解
在无人机
集群
中,每个无人机都可以作为终端节点、中继节点或中心节点,实
无人机技术圈
·
2025-03-09 04:00
无人机技术
无人机
一致性哈希HashRing
一致性哈希HashRing一致性哈希算法是一种高效的分布式存储和负载均衡技术,广泛应用于分布式系统中,如缓存
集群
、分布式数据库等。
留白1108
·
2025-03-09 04:12
哈希算法
算法
一致性哈希
ElasticSearch学习笔记 --- 调研笔记知识点
4.安装Marvel(ES的管理和监控)5.特点:分布式的实时文件存储,每个字段都被索引并可被搜索分布式的实时分析搜引擎可以扩展到上百台服务器,处理PB级机构化或非结构化数据6.
集群
是一组具有相同cl
杨鑫newlfe
·
2025-03-09 03:00
大数据挖掘与大数据应用案例
搜索引擎
ES03 - ES其他知识点
ES其他知识点文章目录ES其他知识点一:分布式
集群
和路由计算1:单节点
集群
2:故障转移3:水平扩容4:宕机故障5:路由计算二:分片控制流程1:协调节点2:写流程3:读流程4:更新流程5:多文档操作流程5.1
是小崔啊
·
2025-03-09 03:42
#
elasticSearch
elasticsearch
大数据
搜索引擎
K8S
集群
节点扩容
k8s231192.168.99.2312C4Gmaster1.23.1720.10.24k8s232192.168.99.2322C4Gwoker1.23.1720.10.24k8s233(需上线)192.168.99.2332C4Gwoker1.23.1720.10.24当现有
集群
中的节点资源不够用
小小大胖子3
·
2025-03-09 02:38
kubernetes
java
容器
当Citus添加工作节点时报错---citus_add_node(‘database-2‘, 5433)
不得不说,毕业设计push我学习了很多新鲜的知识具体报错由于硬件条件不允许,我在两台虚拟机上部署了三个postgresql以组成一个协调节点和两个工作节点的
集群
,其中database-1节点上部署了一个工作节点
学软件的小铃铛
·
2025-03-09 02:30
数据库
大数据运维实战指南:零基础入门与核心技术解析(第一篇)
大数据运维实战指南:零基础入门与核心技术解析(第一篇)系列文章目录第一篇:大数据运维概述与核心技能体系第二篇:Hadoop生态体系与
集群
部署实战第三篇:分布式存储系统运维与优化第四篇:资源调度框架YARN
emmm形成中
·
2025-03-09 01:19
大数据
运维
【K8S问题系列 | 10】在K8S
集群
怎么查看各个pod占用的资源大小?【已解决】
要查看Kubernetes
集群
中各个Pod占用的资源大小(包括CPU和内存),可以使用以下几种方法:1.使用kubectltop命令kubectltop命令可以快速查看当前Pod的CPU和内存使用情况。
颜淡慕潇
·
2025-03-09 01:34
kubernetes
容器
云原生
后端
问题解决
K8s(八):如何进行 Kubernetes
集群
健康检查?
K8s(八):如何进行Kubernetes
集群
健康检查?
Seal^_^
·
2025-03-09 01:00
#
Kubernetes
【云原生】容器化与编排技术
持续集成
kubernetes
容器
云原生
K8s
集群健康检查
hadoop框架与核心组件刨析(四)MapReduce
MapReduce的核心思想分而治之:将大规模数据集分割成多个小块,分布到
集群
中的多个节点上并行处理。Map阶段:将输入数据转换为键值对(Key-ValuePair)
小刘爱喇石( ˝ᗢ̈˝ )
·
2025-03-09 00:42
hadoop
mapreduce
大数据
如何收集 Kubernetes
集群
的日志
一、Kubernetes日志收集核心方案1.EFKStack(Elasticsearch+Fluentd+Kibana)•适用场景:企业级日志分析、复杂查询需求、长期日志存储。•组件作用:•Fluentd:日志收集器(部署为DaemonSet,每个Node运行一个实例)。•Elasticsearch:日志存储与索引(支持分布式、高并发)。•Kibana:可视化仪表盘(日志搜索、图表展示)。2.Lo
沉默的八哥
·
2025-03-09 00:42
运维
kubernetes
运维
Windows下安装VMware Workstation 17并设置支持MacOS(成功安装MacOS Big Sur 11版本)
VMwareWorkstation17介绍VMwareWorkstation17是VMware公司推出的一款强大的桌面
虚拟化
软件,适用于Windows、Linux和FreeBSD等操作系统。
skywalk8163
·
2025-03-08 20:59
操作系统
软硬件调试
macos
VMware
玩转Linux网络命名空间:手把手实现跨命名空间通信
Linux内核提供的一种网络隔离机制,它允许不同命名空间拥有独立的:网络设备接口IP地址和路由表防火墙规则(iptables/nftables)端口号范围这种技术被广泛应用于容器化(Docker/K8s)、
虚拟化
等场景
冯·诺依曼的
·
2025-03-08 19:09
操作系统
➔
Linux
linux
网络
运维
容器
【AntDB数据库 问答日日新】8.24(5)AntDB分布式架构
集群
节点不包括下面哪一项
17.AntDB分布式架构
集群
节点不包括下面哪一项?A、GTMCOORDB、CoordinatorC、DatanodeD、Proxy答案:D解析:无难度:普通18.部署AntDB分布式,
数据库爱好者一枚呀
·
2025-03-08 18:55
AntDB数据库
运维
分布式
数据库
微信群二维码采集,帮助企业或个人获客
前几天准备找人换群来着却发现采
集群
二维码接口,自己动手写了个免费微信群二维码采集工具下载好,直接打开使用即可使用软件下载地址:微群多多.zip-蓝奏云
e4ert
·
2025-03-08 16:44
软件
软件需求
spark
集群
,kafka
集群
和zookeeper的docker
集群
快速搭建
准备操作安装docker(宿主机)yuminstalldocker(宿主机时centos用yum管理包)systemctldaemon-reload(重加载deamon服务,是docker的核心)systemctlrestartdocker.service(重启docker服务)docker常用命令dockerps-a查看所有容器dockersearchUbuntu寻找Ubuntu的镜像docke
醉与浮
·
2025-03-08 15:05
tools
docker
spark
kafka
ZooKeeper的初识(Zookeeper基本知识,ZooKeeper shell,ZooKeeper数据模型 ,ZooKeeper Watcher 监听机制,ZooKeeper选举机制)
Zookeeper基本知识Zookeeper
集群
搭建Zookeeper
集群
搭建指的是ZooKeeper分布式模式安装。通常由2n+1台servers组成。
kismetG
·
2025-03-08 15:33
Azkaban
Zookeeper基本知识
ZooKeeper
shell
ZooKeeper数据模型
ZooKeeper
Watcher
监听机制
ZooKeeper选举机制
Ubuntu快速安装kafka
集群
搭建
集群
做少需要三台服务器一个centos和两个ubuntu每台都按照下面做:安装JDKsudoapt-getinstalldefault-jrejava-versionapt-getinstalldefault-jdkjava-version
拥抱世界的精彩
·
2025-03-08 15:32
kafka集群
ubuntu搭建kafka集群
kafka集群
Kafka 在 Linux 下的
集群
配置和安装
Kafka在Linux下的
集群
配置和安装ApacheKafka是一个流行的分布式流处理平台,广泛用于实时数据管道和流处理应用。
J老熊
·
2025-03-08 15:31
kafka
linux
java
面试
系统架构
运维
docker
算力
集群
+Pycharm+SSH连接经验(自用)
创建实例(ssh)->Xshell8(公私密钥)->远程服务器(添加公钥匙,获取公私密钥的内容)->j将私钥内容保存为与公钥一样文件名、文件格式不同、保存路径相同(帮助在pycharm上进行ssh连接)->然后就可以在Xshell8中输入sshn1,然后就可以创建自己的虚拟环境,这个是对Xshell8来使用的如果要使用pycharm来使用,直接可以跳过最后一步,直接在pycharm中进行设置即可。
代码的建筑师
·
2025-03-08 10:17
学习记录
笔记
服务器
pycharm
ssh
算力集群
量化企业间合作关系、竞争关系和资源流动
公式被用来量化企业间合作关系、竞争关系和资源流动的程度,并通过分析网络结构来识别产业链中的关键企业和
集群
合作权重(W_cooperation)公式:Wcooperation(i,j)=α⋅max(freq
Atlas Shepherd
·
2025-03-08 09:26
python
算法
人工智能
大数据Hadoop
集群
运行程序
目录1运行自带的MapReduce程序2常见错误1运行自带的MapReduce程序下面我们在Hadoop
集群
上运行一个MapReduce程序,以帮助读者对分布式计算有个基本印象。
赵广陆
·
2025-03-08 08:37
hadoop
hadoop
big
data
mapreduce
容器技术概要及docker容器部署和常用命令
容器技术是一种轻量级的
虚拟化
技术,它允许开发者将应用程序及其依赖项打包在一个独立的、可移植的容器中。与传统的虚拟机不同,容器共享宿主机的操作系统内核,因此它们更加轻量级、启动更快,并且资源占用更少。
此方konata
·
2025-03-08 07:57
docker
容器
运维
Pod 一直处于Pending状态,可能的原因有哪些?
3.调度策略限制•节点亲和性/反亲和性:Pod需要特定节点标签,但
集群
无匹配节点。•污点(Taints)与容忍(Tolerations
沉默的八哥
·
2025-03-08 07:18
运维
kubernetes
运维
K8s 1.27.1 实战系列(五)Namespace
Kubernetes1.27.1中的Namespace(命名空间)是
集群
中实现多租户资源隔离的核心机制。
白昼ron
·
2025-03-08 05:15
K8s
kubernetes
容器
K8s
Namespace
命名空间
yaml
ns
K8S常见的面试题
答:和大多数分布式系统一样,K8S
集群
至少需要一个主节点(Master)和多个计算
水月清辉
·
2025-03-08 04:21
k8s
Kafka
2.核心原理2.1架构组成Broker:Kafka
集群
中的单个节点,负责消息存储和传递。Producer:向KafkaTopic发布消息的客户端。Consumer:从Topic订阅并消费消息的客户端。
茶本无香
·
2025-03-08 04:19
kafka
分布式
Oracel DG安装指南
以便实施人员能根据当前业务特点,规划、建设符合高可用、高可靠的数据库
集群
系统。具体由OracleDG环境拓扑、Oracle单机数据库规划部分构成!
一直在路上的码农
·
2025-03-08 03:58
运维
数据库
#
Oracle
oracle
数据库
运维
【DevOps】Jenkins+Kubernetes:K8S
集群
外部署的Jenkins,设置动态Jenkins-slave工作节点到K8S
集群
中
spm=1003.2001.3001.4143Jenkins部署,设置动态agent到K8S
集群
中centosdockerjenkinskubernets7.920.102.28919.10通常情况下jenkins
运维归一
·
2025-03-08 02:15
DevOps
jenkins
docker
kubernetes
rabbitmq 学习 之 mirror queue cluster 搭建(26)
官网:https://www.rabbitmq.com/ha.html高可用(镜像)队列默认情况下,queues存放在RabbitMQ
集群
的单个节点之上。
xiaoliuliu2050
·
2025-03-08 02:15
rabbitmq
k8s service type_RabbitMQ(k8s)-随手笔记
比如说支付、订单功能,服务后移,长时间操作的功能,同步数据我们通过监听数据变化实现功能联动特点分布式各节点互相冗余元数据(erlang.cookie,队列、交换机、绑定元数据、vhost元数据)实现分布式
集群
weixin_39873325
·
2025-03-08 02:42
k8s
service
type
基于k8s安装jenkins
集群
k8s
集群
:master:192.168.0.200node1:192.168.0.201node2:192.168.0.202思路:通过在manager的namespace中,创建jenkins服务,
水上冰石
·
2025-03-08 01:08
云原生-运维架构
jenkins
k8s
kafka+zk三台
集群
问题排查
问题描述:项目中人大金仓同步工具同步数据增量到kafka
集群
,无法自动创建topic,以及出现同步到topic时连接失败的问题,经过排查修改配置参数最终解决。
未竟
·
2025-03-07 23:44
大数据组件
消息队列
kafka
zookeeper
big
data
Canal+MySQL+Kafka+Zookeeper
canal.properties(2)conf/example/instance.propertiesⅢ、开启canal二、MySQLⅠ、搭建与基础使用Ⅱ、开启二进制日志三、Kafka+Zookeeper
集群
正大光明瑞士卷
·
2025-03-07 22:06
mysql
kafka
java-zookeeper
YashanDB更换服务器IP
本文内容来自YashanDB官网,原文内容请见https://doc.yashandb.com/yashandb/23.3/zh/%E5%AE%89%E8%A3%85%...本文主要介绍当一个单机部署的数据库
集群
中
·
2025-03-07 21:05
数据库
YashanDB更换服务器IP
本文内容来自YashanDB官网,原文内容请见https://doc.yashandb.com/yashandb/23.3/zh/%E5%AE%89%E8%A3%85%...本文主要介绍当一个单机部署的数据库
集群
中
·
2025-03-07 21:57
数据库
docker-compose部署mongodb 5.0.5
集群
一、服务器10.1.1.16510.1.1.16410.1.1.169二、生成mongodb.keyroot@mongodb:/data#opensslrand-base64756>mongodb.keyu2aDJG+yz9uLwdWSavN/yh7noG0wfnTvOalKO5xNuTMQ85daIqkWnOh1YgKzbosrqTvU1Np2PU4QpLJIHtwU1XfHgvkCQRR7ox
inventecsh
·
2025-03-07 19:00
docker
mongodb
容器
常见分布式ID生成方案
常见分布式ID生成方案文章目录一、为什么要用分布式ID1、什么是分布式ID2、那么分布式ID需要满足哪些条件二、分布式ID有哪些生成方式1、基于UUID2、基于数据库自增ID3、基于数据库
集群
模式4、基于数据库的号段模式
amo的代码园_毕设
·
2025-03-07 15:16
Java基础
分布式
java
vue.js
spring
boot
java-ee
maven
tomcat
美国AI圈破防了。。。
微软、Meta和谷歌等巨头正在将资源投入到庞大的10万GPU
集群
中进行人
强化学习曾小健
·
2025-03-07 13:43
LLM大语言模型
人工智能
【ASeeker】Android 源码捞针,服务接口扫描神器
说明ASeeker项目是我们在做
虚拟化
分身产品(『空壳』)过程中的内部开发工具,目的是为了提升Android系统各版本适配效率。
·
2025-03-07 12:33
android程序员安全
sysbench手动测试OceanBase v4.2.4
集群
环境:1、ocp(sysbench节点)192.192.103.1282、ob
集群
1-1-1observer192.192.103.125、192.192.103.126、192.192.103.127
king_harry
·
2025-03-07 10:24
oceanbase
sysbench
数据库
Redis
除此之外,redis支持事务、持久化、LUA脚本、LRU驱动事件、多种
集群
方案。2.我们为什么要用redis/为什么要用缓存呢?主要从“高性能”和“
任璐
·
2025-03-07 10:52
redis
数据库
缓存
上一页
1
2
3
4
5
6
7
8
下一页
按字母分类:
A
B
C
D
E
F
G
H
I
J
K
L
M
N
O
P
Q
R
S
T
U
V
W
X
Y
Z
其他