E-COM-NET
首页
在线工具
Layui镜像站
SUI文档
联系我们
推荐频道
Java
PHP
C++
C
C#
Python
Ruby
go语言
Scala
Servlet
Vue
MySQL
NoSQL
Redis
CSS
Oracle
SQL Server
DB2
HBase
Http
HTML5
Spring
Ajax
Jquery
JavaScript
Json
XML
NodeJs
mybatis
Hibernate
算法
设计模式
shell
数据结构
大数据
JS
消息中间件
正则表达式
Tomcat
SQL
Nginx
Shiro
Maven
Linux
Elasticsearch集群
Redis分布式存储案例面试题
:1、哈希取余分区(小厂回答)2、一致性哈希算法分区(中厂回答)3、哈希槽分区(大厂回答,推荐回答)1、哈希取余分区2亿条记录就是2亿个(k,v),我们单机不行必须要分布式多机,假设有3台机器构成一个
集群
哎呀哎呀诶
·
2025-02-28 02:10
Redis
redis
分布式
数据库
技术分享| 分布式系统中服务注册发现组件的原理及比较
随着容器技术的兴起,服务
集群
部署在系统各处,服务之间的远程调用都需要通过服务发现来实现。
anyRTC
·
2025-02-28 00:27
音视频
分布式系统
音视频
分布式系统
Consul
Zookeeper
etcd
用Docker搭建Redis主从复制的
集群
同样再到redis-slave1容器的命令窗口里,通过dockerexec-itredis-slave1/bin/bash命令进入容器的命令行窗口,也通过redis-cli命令进入客户端命令行,也再通过inforeplication命令查看该Redis服务器的主从模式的状态,部分结果如下所示。1c:\work>dockerexec-itredis-slave1/bin/bash2root@2e32
2401_84046635
·
2025-02-27 20:45
程序员
docker
redis
eureka
深入理解 Kubernetes 命名空间:高效管理与隔离资源的关键
命名空间的作用1.资源隔离2.多租户支持3.资源管理和策略控制4.简化管理创建和使用命名空间命名空间与
集群
中的其他资源结语在Kubernetes(k8s)中,命名空间(Namespace)是资源隔离和组织管理的核心概念之一
简单简单小白
·
2025-02-27 16:21
kubernetes
贪心算法
java
【YashanDB 知识库】yasboot
集群
状态命令登录失败问题
【标题】yasboot
集群
状态命令登录失败问题【问题分类】功能使用【关键字】yasboot、
集群
状态、无效用户名/密码、sys用户、null密码【问题描述】用户在执行yasbootclusterstatus-cyashan-d
·
2025-02-27 13:57
数据库程序员
minio多主机分布式部署
Minio多主机分布式docker-compose
集群
部署_miniodocker-compose-CSDN博客
一剑丶飘香
·
2025-02-27 12:14
云计算
Cassini_Network-Aware Job Schedulingin Machine Learning Clusters
这篇论文介绍了CASSINI,一种用于机器学习(ML)
集群
的网络感知作业调度器。研究背景背景介绍:这篇文章的研究背景是深度学习数据集和模型规模的不断增长,对高效GPU
集群
的需求日益增加。
一只积极向上的小咸鱼
·
2025-02-27 07:37
机器学习
人工智能
华为MRS产品组件
MRS:MRS是一个在华为云上部署和管理Hadoop系统的服务,一键即可部署Hadoop
集群
。
QianJin_zixuan
·
2025-02-27 06:59
hadoop
hive
大数据
数据库架构
gaussdb
elasticsearch
添加kerberos认证完整操作流程
文章目录一、
elasticsearch
升级白金版1.下载对应版本源码,修改相关类2.编译后替换jar包中的class文件3.更新license二、搭建kerberos服务1.安装kerberos服务端2
鸡蛋可好吃了
·
2025-02-27 05:28
elasticsearch
jenkins
大数据
java
深入解析Zookeeper脑裂问题与CAP取舍:从原理到实战
“脑裂”(Split-brain)现象是指在一个分布式
集群
中,由于网络分区等原因,导致
集群
中的节点被分割成两个或多个独立的部分,每个部分都认为自己是唯一活跃的服务提供者。
guihong004
·
2025-02-27 05:26
java面试题
zookeeper
分布式
云原生
集群
部署
Elasticsearch
+Logstash+Kibana+Filebeat+Kafka+Zookeeper
目录引言一、安装Zookeeper步骤1、准备阶段(全部节点操作,以node1为例)(1)关闭防火墙和系统安全机制(全部节点操作,以node1为例)(2)同步时钟源(全部节点操作,以node1为例)(3)JDK的安装(全部节点操作,以node1为例)(4)配置hosts(全部节点操作,以node1为例)2、安装Zookeeper软件包(全部节点操作,以node1为例)3、修改配置文件(全部节点操作
YH746
·
2025-02-27 05:25
日志分析系统
linux
Java | 基于Kerberos认证对接华为云
Elasticsearch
可以通过华为官方提供的Java客户端,来实现基于Kerberos认证访问和操作华为云
Elasticsearch
;亦可以使用更加通用的开源
Elasticsearch
Java客户端bboss,来实现基于Kerberos
yinbp
·
2025-02-27 05:54
bboss
elastic
java
华为云
elasticsearch
bboss
elfk+zookeeper+kafka数据流
zookeeper+kafka数据流:filebeat(每台app)------>【logstash(2)+kafka(3)】------->logstash(1)------->【
elasticsearch
AustinCien
·
2025-02-27 05:53
zookeeper
kafka
elk
深入探讨K8s资源管理和性能优化
#作者:曹付江文章目录前言:1.监控Kubernetes
集群
的资源利用率1.1Prometheus1.2Kubernetes度量服务器1.3Grafana1.4自定义指标2.识别资源瓶颈2.1.监控工具
磐基Stack专业服务团队
·
2025-02-27 04:50
Kubernetes
kubernetes
性能优化
容器
【
Elasticsearch
】动态计算字段的几种方式
在
Elasticsearch
中,动态计算字段可以通过以下几种方法实现:1.动态映射(DynamicMapping)动态映射允许
Elasticsearch
在索引文档时自动检测并添加新字段及其数据类型。
risc123456
·
2025-02-27 00:17
Elasticsearch
elasticsearch
Elasticsearch
——动态映射
)Customizingdetecteddateformats(自定义检测到的日期格式)Numericdetection(数字检测)Dynamictemplates验证动态模板在动态模板映射运行时字段
Elasticsearch
java编程小帅
·
2025-02-27 00:46
Elasticsearch
elasticsearch
大数据
es
java
搜索引擎
Elasticsearch
:使用 runtime fields 探索你的数据
考虑要提取字段的大量日志数据。为数据建立索引非常耗时,并且会占用大量磁盘空间,而你只想探索数据结构而无需预先提交schema。你知道你的日志数据包含你要提取的特定字段。在这种情况下,我们要关注@timestamp和消息字段。通过使用运行时字段(runtimefields),你可以定义脚本来计算这些字段在搜索时的值。定义索引字段作为起点你可以从一个简单的示例开始,将@timestamp和messag
小贤编程手记
·
2025-02-27 00:13
elasticsearch
大数据
Elasticsearch
:深入理解 Runtime Fields 和 Elastic 的 Schema on Read 实现
Elasticsearch
:深入理解RuntimeFields和Elastic的SchemaonRead实现在本文中,我们将探讨
Elasticsearch
中的RuntimeFields和Elastic的
代码指四方
·
2025-02-27 00:42
elasticsearch
jenkins
大数据
【
Elasticsearch
】script_fields 和 runtime_fields的区别
`script_fields`和`runtime_fields`都是
Elasticsearch
中用于动态计算字段值的功能,但它们在实现方式、应用场景和性能表现上存在显著区别。
risc123456
·
2025-02-27 00:41
Elasticsearch
elasticsearch
运维案例之记一次Kubernetes
集群
证书过期或延期操作处理实践指南
欢迎关注「WeiyiGeek」公众号点击下方卡片即可关注我哟!设为「星标⭐」每天带你基础入门到进阶实践再到放弃学习!涉及网络安全运维、应用开发、物联网IOT、学习路径、个人感悟等知识“花开堪折直须折,莫待无花空折枝。”作者主页:[https://www.weiyigeek.top]作者博客:[https://blog.weiyigeek.top]作者答疑学习交流群:
全栈工程师修炼指南
·
2025-02-26 21:48
云原生落地实用指南
kubernetes
运维
docker
容器
云原生
Elasticsearch
补充(3) --Linux
集群
安装ES
1安装
Elasticsearch
1.1创建普通用户ES不能使用root用户来启动,必须使用普通用户来安装启动。这里我们创建一个普通用户以及定义一些常规目录用于存放我们的数据文件以及安装包等。
erainm
·
2025-02-26 20:44
大数据学习
elasticsearch
2.部署kafka:9092
官方文档:http://kafka.apache.org/documentation.html(虽然kafka中集成了zookeeper,但还是建议使用独立的zk
集群
)Kafka3台
集群
搭建环境:操作系统
AustinCien
·
2025-02-26 20:43
kafka
zookeeper
elk
1.部署zookeeper
集群
:2181
官网:ApacheZooKeeperZookeeper
集群
的工作是超过半数才能对外提供服务,成员数量一般为奇数台环境:操作系统:centos7软件版本:zookeeper-3.4.12.tar.gz防火墙
AustinCien
·
2025-02-26 20:12
zookeeper
kafka
elk
分布式
云原生
deepseek部署:ELK + Filebeat + Zookeeper + Kafka
##1.概述本文档旨在指导如何在7台机器上部署ELK(
Elasticsearch
,Logstash,Kibana)堆栈、Filebeat、Zookeeper和Kafka。
AustinCien
·
2025-02-26 20:12
deepseek
elk
zookeeper
kafka
Elasticsearch
性能优化实战指南_index
curl-XPUT"localhost:9200/twitter"-H'Content-Type:application/json'-d'{"settings":{"index":{"sort.field":"date","sort.order":"desc"}},"mappings":{"properties":{"date":{"type":"date"}}}}目的:indexsorting是
2401_87378872
·
2025-02-26 20:41
elasticsearch
性能优化
jenkins
【无人
集群
系列---大疆无人
集群
技术进展、技术路线与未来发展方向】
大疆无人
集群
技术进展、技术路线与未来发展方向一、技术进展1.核心技术创新(1)
集群
协同控制技术(2)感知与能源系统升级2.行业应用落地(1)智慧城市与安防(2)应急救援(3)物流与测绘二、技术路线解析1
Dymc
·
2025-02-26 19:32
无人集群
低空经济
无人集群
无人机
低空经济
通信
实战探秘Nginx的六大应用场景与配置指南,让网络服务如虎添翼
一、负载均衡应用场景:当面对大量用户访问时,通过Nginx实现后端服务器
集群
间的负载均衡,可有效分散请求压力,保障服务稳定性和响应速度。配置示例:http
IT运维先森
·
2025-02-26 17:25
nginx
nginx
运维
Kubernetes (K8S) 高效使用技巧与实践指南
一、kubectl高效操作技巧1.自动补全与上下文切换kubectl是操作K8S的核心命令行工具,通过以下配置可大幅提升操作效率:#Bash自动补全source快速切换目标
集群
。2.YAML模板生成与
挣扎与觉醒中的技术人
·
2025-02-26 17:23
kubernetes
容器
云原生
网络
Kubernetes 1.29升级至1.31版本笔记
本次计划将该
集群
升级为1.31版本。Kubernetes版本表示方式:Kubernetes版本表示为x.y.z,其中x是主版本,y是次版本,z是补丁版本。
zkyqss
·
2025-02-26 17:51
云计算
笔记
kubernetes
云原生
k8s
集群
3主5从高可用架构(kubeadm方式安装k8s)
关键步骤说明环境准备阶段系统更新:所有节点执行yum/aptupdate确保软件包最新时间同步:通过ntpdatetime.windows.com或部署NTP服务器网络规划:明确划分Service网段(默认10.96.0.0/12)和Pod网段(如Flannel使用10.244.0.0/16)节点初始化细节关闭Swap分区:临时swapoff-a并永久注释/etc/fstab中的swap条目主机名
罗sir 99
·
2025-02-26 16:19
devops
kubernetes
架构
容器
ElasticSearch
数据老化清理之Curator
前言随着接入ELK日志分析平台的系统增加,每日海量的日志数据使得磁盘空间越发紧张,从而ES的日志清理也成了一个常规操作。而ES官方也提供了一个很好用的工具——curator来实现这个事情。抽空也部署了一个,以供阅知。Curator简介据官方介绍,curator最早被称为clearESindices.py的python脚本,它的唯一功能就是删除索引清理数据,而后重命名为logstash_index_
思快奇
·
2025-02-26 16:43
java
elasticsearch
linux
大数据
分布式
高版本k8s文件无法识别镜像
集群
管理员需要迁移至其他兼容的容器运行时,如containerd或CRI-O。高版本k8s不在支持docker运行容器运行服务,而使用ctr命令来识别pod文件的镜像。
虚魍
·
2025-02-26 15:39
kubernetes
容器
运维
linux
云计算
docker-compose -volumes 两种不同定义方式
学习docker-compose部署hadoop
集群
、看到docker-compose一种不同volumes定义方式version:"3"services:namenode:image:bde2020/
胖胖胖胖胖虎
·
2025-02-26 14:34
Docker
docker
hadoop
big
data
【ES一】SpringBoot2.x+ES8.11.1(windows环境)整合
一、两种整合方式目前有两种最常用的整合方式,一种是
ElasticSearch
官方提供的JavaHighLevelRestClient,一种是Spring提供的spring-boot-starter-data-
elasticsearch
zcccc_
·
2025-02-26 14:56
elasticsearch
搜索引擎
spring
boot
mysql案例 ~ 监控以及如何避免从库延迟问题
一简介:今天咱们来汇总下如何避免主从延迟二方案:1
集群
硬件配置统一,磁盘组更好(SSD最佳),更大的内存2linux系统+mysql的配置参数已经优化3mysql从库没有任何慢语句进行IO的消耗4mysql
weixin_33910434
·
2025-02-26 13:24
数据库
Oracle 高可用性与数据保护
这些技术包括
集群
与实时应用
集群
(RAC)、数据卫士(DataGuard)和闪回技术。
鱼弦
·
2025-02-26 13:19
人工智能时代
oracle
数据库
Elasticsearch
相关面试题
1.
Elasticsearch
基础
Elasticsearch
是什么?
Elasticsearch
是一个分布式搜索引擎,基于Lucene实现。Mapping是什么?ES中有哪些数据类型?
一切顺势而行
·
2025-02-26 12:47
elasticsearch
MySQL 和
Elasticsearch
之间的数据同步
MySQL和
Elasticsearch
之间的数据同步是常见的需求,通常用于将结构化数据从关系型数据库同步到
Elasticsearch
以实现高效的全文搜索、聚合分析和实时查询。
解决方案工程师
·
2025-02-26 12:15
mysql
elasticsearch
android
初识hadoop
客户端在存入的数据的时候先经过nn,查要存入的数据是否存在(通过元数据查询),如果存在就返回拒绝写入,若不存在,就开始返回可以往
集群
里面写入,而且还分配存入那些dn。
西门吹水之城
·
2025-02-26 12:45
hadoop
hadoop
HDFS是如何存储和管理大数据
以下是HDFS存储和管理大数据的详细机制:一、HDFS架构HDFS采用主从架构,主要包括以下组件:NameNode(主节点):作为
集群
的“大脑”,NameNode负责管理文件系统的命名空间,维护文件和目录的元
python资深爱好者
·
2025-02-26 11:38
大数据
hdfs
hadoop
Hadoop 基础原理
Hadoop基础原理基本介绍Hadoop的必要性Hadoop核心组件Hadoop生态系统中的附加组件HDFSHDFS
集群
架构HDFS读写流程HDFS写流程HDFS读流程NameNode持久化机制MapReduce
disgare
·
2025-02-26 11:38
数据库
hadoop
大数据
分布式
Flink-02-flink技术架构及工作原理
Flink组件栈自下而上,分别针对每一层进行解释说明:Deployment该层主要涉及了Flink的部署模式,Flink支持多种部署模式:本地、
集群
(Standalone/YARN)、云(GCE/EC2
TRX1024
·
2025-02-26 10:35
Flink
本地Oracle数据库复制数据到Apache Hive的Linux服务器
集群
的分步流程
我们已经有安装ApacheHive的Linux服务器
集群
,它可以连接到一个OracleRDS数据库,需要在该Linux服务器上安装配置sqoop,然后将OracleRDS数据库中所有的表数据复制到Hive
weixin_30777913
·
2025-02-26 10:34
数据库
大数据
hive
Flink
集群
架构
从本章节开始,我们对flink从它的一个
集群
的一个架构以及它的一个部署模式着手,去了解flink如何去部署在不同的这样的一个
集群
的一些资源管理器上面,以及相应的一些原理的一些解析。
流量留
·
2025-02-26 06:32
Apache
Flink
FLINK
java
运维
数据库
GaussDB 数据库迁移方案设计与实践
GaussDB(华为云分布式关系型数据库)凭借其高吞吐、强一致性、弹性扩展等特性,成为政企客户替换传统数据库(如MySQL、Oracle)或升级原有GaussDB
集群
的首选目标。
如清风一般
·
2025-02-26 05:56
gaussdb
数据库
K8S
集群
搭建(kubeadm+calico)
准备阶段环境显卡:4060ti系统:ubuntu22.041.安装docker官网安装步骤:#AddDocker'sofficialGPGkey:sudoapt-getupdatesudoapt-getinstallca-certificatescurlsudoinstall-m0755-d/etc/apt/keyringssudocurl-fsSLhttps://download.docker.
·
2025-02-26 05:02
kubernetes
什么容错性以及Spark Streaming如何保证容错性
容错系统的关键特性包括负载平衡、
集群
、冗余、复制和故障转移等。
python资深爱好者
·
2025-02-26 04:48
spark
大数据
分布式
Nginx +
ElasticSearch
+ Kibana结合
Nginx+
ElasticSearch
+Kibana结合操作系统软件下载安装编译工具及库文件安装PCRE安装Nginx
ElasticSearch
配置Kibana配置Nginx配置启动Nginx对人工智能感兴趣点下面链接现在人工智能非常火爆
周天祥
·
2025-02-26 01:31
ElasticSearch
大数据
nginx 反向代理
ElasticSearch
es
本文讲述如何使用nginx代理kibana1、更改kibana.yml文件添加前缀2、nginx添加配置location/kibana/{proxy_passhttp://127.0.0.1:5601/;rewrite^/elk/(.*)$/$1break;proxy_set_headerX-Real-IP$remote_addr;proxy_set_headerHost$host:$server
布丁萨玛
·
2025-02-26 01:29
nginx
elasticsearch
运维
ElasticSearch
-head 谷歌浏览器安装插件
1.windows解压安装包
elasticsearch
-head-master.zip2.移动解压后的文件夹到你需要的目录3.crx目录下的文件es-head.crx改为es-head.zip然后解压到当前目录
夜古诚
·
2025-02-26 01:56
ELK
elasticsearch
上一页
3
4
5
6
7
8
9
10
下一页
按字母分类:
A
B
C
D
E
F
G
H
I
J
K
L
M
N
O
P
Q
R
S
T
U
V
W
X
Y
Z
其他