E-COM-NET
首页
在线工具
Layui镜像站
SUI文档
联系我们
推荐频道
Java
PHP
C++
C
C#
Python
Ruby
go语言
Scala
Servlet
Vue
MySQL
NoSQL
Redis
CSS
Oracle
SQL Server
DB2
HBase
Http
HTML5
Spring
Ajax
Jquery
JavaScript
Json
XML
NodeJs
mybatis
Hibernate
算法
设计模式
shell
数据结构
大数据
JS
消息中间件
正则表达式
Tomcat
SQL
Nginx
Shiro
Maven
Linux
Elasticsearch集群
k8s service type_RabbitMQ(k8s)-随手笔记
比如说支付、订单功能,服务后移,长时间操作的功能,同步数据我们通过监听数据变化实现功能联动特点分布式各节点互相冗余元数据(erlang.cookie,队列、交换机、绑定元数据、vhost元数据)实现分布式
集群
weixin_39873325
·
2025-03-08 02:42
k8s
service
type
【
Elasticsearch
】自定义内置的索引生命周期管理(ILM)策略。
以下是对
Elasticsearch
官方教程《Customizebuilt-inILMpolicies》的详细解读,结合原文内容,帮助您更好地理解如何自定义内置的索引生命周期管理(ILM)策略。
risc123456
·
2025-03-08 02:12
Elasticsearch
elasticsearch
基于k8s安装jenkins
集群
k8s
集群
:master:192.168.0.200node1:192.168.0.201node2:192.168.0.202思路:通过在manager的namespace中,创建jenkins服务,
水上冰石
·
2025-03-08 01:08
云原生-运维架构
jenkins
k8s
kafka+zk三台
集群
问题排查
问题描述:项目中人大金仓同步工具同步数据增量到kafka
集群
,无法自动创建topic,以及出现同步到topic时连接失败的问题,经过排查修改配置参数最终解决。
未竟
·
2025-03-07 23:44
大数据组件
消息队列
kafka
zookeeper
big
data
elasticsearch
聚合查询
9聚合后再过滤查询汇总后多条件过滤超过100万的数据POSTzzp_invoice/_search{"size":0,"query":{"range":{"SSYF":{"gte":"202101","lte":"202112"}}},"aggs":{"ssyf_group":{"terms":{"field":"XHDWMC.raw"},"aggs":{"sum_aggs":{"sum":{"f
warrah
·
2025-03-07 23:09
岁月云——大数据杂烩
elasticsearch
大数据
【
Elasticsearch
】索引 强制合并 缓存 refresh flush 等操作
文章目录1.概述1.1索引强制合并1.1.1实战1.2缓存清理1.3、flush操作1.4、refresh操作1.概述1.1索引强制合并强制合并的功能为强制合并一个或多个索引,目的是通过索引合并达到减少段的数量,通过POST方法执行_forcemergeAPI。强制合并请求在没有执行完成之前,请求会一直被阻塞,直到执行完成才会返回,如果期间该HTTP请求由于网络或者其它原因被断开,合并请求将继续在
九师兄
·
2025-03-07 22:36
elasticsearch
es
索引
合并
refresh
elasticsearch
刷新问题
用
elasticsearch
作为搜索功能要求实时返回index或update的数据,指定refresh=True即可el.update(index="x",doc_type='xx',id=xxx,body
时代在召唤r
·
2025-03-07 22:06
数据库
elasticsearch
Canal+MySQL+Kafka+Zookeeper
canal.properties(2)conf/example/instance.propertiesⅢ、开启canal二、MySQLⅠ、搭建与基础使用Ⅱ、开启二进制日志三、Kafka+Zookeeper
集群
正大光明瑞士卷
·
2025-03-07 22:06
mysql
kafka
java-zookeeper
ElasticSearch
第十五讲 ES数据写入过程和写入原理以及数据如何保证一致性
Es的数据并发冲突ES数据并发冲突控制是基于的乐观锁和版本号的机制一个document第一次创建的时候,它的_version内部版本号就是1;以后,每次对这个document执行修改或者删除操作,都会对这个_version版本号自动加1;哪怕是删除,也会对这条数据的版本号加1(假删除)。对于更新操作客户端对es数据做更新的时候,如果带上了版本号,那带的版本号与es中文档的版本号一致才能修改成功,否
程序员路同学
·
2025-03-07 22:33
ElasticSearch
elasticsearch
java
大数据
Elasticsearch
聚合查询的 Java 实现
importco.elastic.clients.
elasticsearch
.
Leon_Jinhai_Sun
·
2025-03-07 22:01
elasticsearch
java
Elasticsearch
聚合查询(aggs)
桶内度量前面的例子告诉我们每个桶里面的文档数量,但是我们需要更复杂的文档度量,我们需要告诉
Elasticsearch
使用哪个字段,使用何种度量方式进行运算,这些信息要嵌套在桶内,度量的运算会基于桶内的文档进行现在
2401_85112189
·
2025-03-07 21:59
作者\/
elasticsearch
jenkins
大数据
YashanDB更换服务器IP
本文内容来自YashanDB官网,原文内容请见https://doc.yashandb.com/yashandb/23.3/zh/%E5%AE%89%E8%A3%85%...本文主要介绍当一个单机部署的数据库
集群
中
·
2025-03-07 21:05
数据库
ES中数据刷新策略refresh
在
Elasticsearch
中,插入数据时的refresh参数控制文档在写入后何时对搜索可见,其行为直接影响数据可见性和系统性能。
不平衡的叉叉树
·
2025-03-07 21:27
java
elasticsearch
大数据
搜索引擎
YashanDB更换服务器IP
本文内容来自YashanDB官网,原文内容请见https://doc.yashandb.com/yashandb/23.3/zh/%E5%AE%89%E8%A3%85%...本文主要介绍当一个单机部署的数据库
集群
中
·
2025-03-07 21:57
数据库
docker-compose部署mongodb 5.0.5
集群
一、服务器10.1.1.16510.1.1.16410.1.1.169二、生成mongodb.keyroot@mongodb:/data#opensslrand-base64756>mongodb.keyu2aDJG+yz9uLwdWSavN/yh7noG0wfnTvOalKO5xNuTMQ85daIqkWnOh1YgKzbosrqTvU1Np2PU4QpLJIHtwU1XfHgvkCQRR7ox
inventecsh
·
2025-03-07 19:00
docker
mongodb
容器
常见分布式ID生成方案
常见分布式ID生成方案文章目录一、为什么要用分布式ID1、什么是分布式ID2、那么分布式ID需要满足哪些条件二、分布式ID有哪些生成方式1、基于UUID2、基于数据库自增ID3、基于数据库
集群
模式4、基于数据库的号段模式
amo的代码园_毕设
·
2025-03-07 15:16
Java基础
分布式
java
vue.js
spring
boot
java-ee
maven
tomcat
美国AI圈破防了。。。
微软、Meta和谷歌等巨头正在将资源投入到庞大的10万GPU
集群
中进行人
强化学习曾小健
·
2025-03-07 13:43
LLM大语言模型
人工智能
sysbench手动测试OceanBase v4.2.4
集群
环境:1、ocp(sysbench节点)192.192.103.1282、ob
集群
1-1-1observer192.192.103.125、192.192.103.126、192.192.103.127
king_harry
·
2025-03-07 10:24
oceanbase
sysbench
数据库
Redis
除此之外,redis支持事务、持久化、LUA脚本、LRU驱动事件、多种
集群
方案。2.我们为什么要用redis/为什么要用缓存呢?主要从“高性能”和“
任璐
·
2025-03-07 10:52
redis
数据库
缓存
K8s 端口转发实战指南(Practical Guide to k8s Port Forwarding)
K8s端口转发实战指南1.背景1.1Kubernetes网络隔离性挑战在Kubernetes
集群
中,所有资源都运行在私有网络空间(通常使用CNI插件构建overlay网络),这带来了以下调试难题:Pod
Linux运维老纪
·
2025-03-07 08:02
天涯海角
k8s伴你同行
kubernetes
容器
云原生
运维开发
分布式
【
Elasticsearch
】Index Lifecycle Management
Elasticsearch
的索引生命周期管理(IndexLifecycleManagement,简称ILM)是一种自动化管理索引生命周期的功能,旨在帮助用户根据索引的使用模式和数据价值,高效地管理和优化索引的存储
risc123456
·
2025-03-07 08:23
Elasticsearch
elasticsearch
大数据面试系列之——Hadoop
Hadoop的三个核心:HDFS(分布式存储系统)MapReduce(分布式计算系统)YARN(分布式资源调度)1.Hadoop
集群
的几种搭建模式1.单机模式:直接解压安装,不存在分布式存储系统2.伪分布式
潜心_守道
·
2025-03-07 07:17
大数据
面经
面试
大数据
Hadoop
[
Elasticsearch
] refresh/flush/merge概念及Api
一、Refresh操作默认情况下,
Elasticsearch
写入的数据会存在于内存缓冲区中,此时并没有落入segment,而是等待index.refresh_interval的时间间隔后,数据会落入到segment
小鱼收藏夹
·
2025-03-07 02:54
elasticsearch
大数据
搜索引擎
Azkaban其一,介绍、体系架构和安装
比如:想启动hadoop
集群
先启动zk
集群
,再启动hdfs,再启动yarn,再启动日志系统工作过程中总会遇到多个脚本执行的时候有顺序。任务可以有一个编排的工具
出发行进
·
2025-03-07 00:35
#
Azkaban
Azkaban
linux
OceanBase数据库常用巡检SQL
一、版本信息select*frominformation_schema.GLOBAL_VARIABLESWHEREVARIABLE_NAMElike'version%';二、
集群
状态select*fromoceanbase.v
·
2025-03-06 23:15
数据库sqloceanbase
初识Redis
目录导航Redis核心架构解析多平台环境搭建指南可视化工具生态
集群
架构设计与实现虚拟化环境构建方案版本演进与6.0特性1.Redis核心架构解析1.1数据模型革命基础类型二进制安全字段存储嵌套结构顺序存储阻塞操作去重集合集合运算排序集合
我不是少爷.
·
2025-03-06 22:50
Redis
redis
数据库
缓存
FastGPT 引申:借鉴 FastGPT 基于MySQL + ES 实现知识库(含表结构以及核心代码)
2.1MySQL表结构(1)knowledge_base_dataset(2)knowledge_base_data(3)knowledge_base_index(4)ai_kb_relation2.2
Elasticsearch
Mapping
窝窝和牛牛
·
2025-03-06 22:45
FastGPT
mysql
elasticsearch
开源
十二、Redis Cluster(
集群
)详解:原理、搭建、数据分片与读写分离
RedisCluster(
集群
)详解:原理、搭建、数据分片与读写分离RedisCluster是Redis官方提供的分布式存储方案,通过数据分片(Sharding)实现水平扩展(scalability),
伯牙碎琴
·
2025-03-06 18:41
#
Redis
redis
数据库
缓存
Redis(主从、哨兵、
集群
)
一、Redis
集群
介绍1.主从复制:是高可用Redis的基础,哨兵和
集群
都是在主从复制基础上实现高可用的。主从复制主要实现了数据的多机备份,以及对于读操作的负载均衡和简单的故障恢复。
小
·
2025-03-06 18:40
redis
flink重启策略
平衡资源消耗:避免无限重启导致
集群
资源耗尽。状态一致性保障:与Checkpoint机制协同,确保Exactly-Once语义。
24k小善
·
2025-03-06 17:35
flink
大数据
java
K8S第三讲 Kubernetes
集群
配置网络插件
在Kubernetes
集群
中,网络插件是必需的,因为它们为Pod提供了可访问的IP地址,并确保它们能够相互通信。
程序员路同学
·
2025-03-06 17:01
K8S
kubernetes
网络
docker
ELK —— Logstash 将 MySQL 数据同步至
ElasticSearch
一、搭建环境1.0环境依赖1.1搭建
ElasticSearch
环境1.1.1
ElasticSearch
简介1.1.2启动
ElasticSearch
1.2Logstash(多数据源采集系统)1.3Kibana
2301_82242204
·
2025-03-06 15:12
程序员
elk
mysql
elasticsearch
Zookeeper(89)Zookeeper的线性化写入是如何实现的?
线性化写入的原理单一Leader:ZooKeeper通过选举机制确保在
集群
中只有一个Leader节点。所有的写请求都必须通过Leader进行处理。事务ID
辞暮尔尔-烟火年年
·
2025-03-06 09:53
微服务
zookeeper
分布式
云原生
Kubernetes(K8S)部署 Redis Cluster
集群
以下将详细介绍如何使用Kubernetes(K8S)部署RedisCluster
集群
,并给出相应的YAML代码。
Sirius Wu
·
2025-03-06 07:37
kubernetes
redis
容器
k8s中pod的创建过程和阶段状态
管理k8s
集群
kubectlk8s中有两种用户一种是登录的一种是/sbin/nologinlinux可以用密码登录,也可以用证书登录k8s只能用证书登录谁拿到这个证书,谁就可以管理
集群
在k8s中,所有节点都被网络组件
技术服务于生态
·
2025-03-06 07:06
linux
运维
服务器
Kubernetes Pod 管理及优化
一、Kubernetes资源管理1.1资源管理介绍Kubernetes是一个容器编排平台,通过将应用程序封装为容器并部署到
集群
中,实现高效管理和扩展。
π大星星️
·
2025-03-06 07:35
kubernetes
容器
云原生
跨地域灾备:远程异地复制实战指南
#作者:闫乾苓文章目录1.
集群
环境说明2.安装所需软件包3.备
集群
用户相关设置4.异地复制环境配置4.1时间同步4.2免密SSH4.3创建pempub文件4.4创建异地复制会话4.5备
集群
SSH免密配置
磐基Stack专业服务团队
·
2025-03-06 06:30
服务器
运维
云服务器安装宝塔Linux面板教程(建议收藏)
它支持一键LAMP/LNMP/
集群
/监控/网站/FTP/数据库/JAVA等100多项服务器管理功能。对于新手用云服务器来建站的话,宝塔面板是一个非常好用的工具。
慈云数据
·
2025-03-06 06:56
linux
服务器
linux
运维
第一个Hadoop程序
我们将使用Java编写MapReduce程序,并在Hadoop
集群
上运行它。一、WordCount程序概述WordCount是Hadoop的“HelloWorld”程序。
lqlj2233
·
2025-03-06 05:53
hadoop
大数据
分布式
Kubernetes Secret的创建与使用
前提条件拥有Kubernetes
集群
环境,可参考:Kubernetes
集群
搭建理解Kubernetes部署知识,可参考:使用Kubernetes部署第一个应用、Deloyment控制器Secret简介KubernetesSecret
Hadoop_Liang
·
2025-03-06 05:51
K8S
kubernetes
容器
云原生
从零开始:Kubernetes
集群
的搭建与配置指南,超详细,保姆级教程
从零开始搭建Kubernetes
集群
从零开始搭建Kubernetes(K8s)
集群
部署方式准备工作(所有节点)1.关闭防火墙2.关闭SELinux3.关闭Swap分区4.设置主机名5.配置网络设置6.安装
m0_74825108
·
2025-03-06 05:50
面试
学习路线
阿里巴巴
kubernetes
容器
云原生
ES(
Elasticsearch
)SSL
集群
部署
8.x后ES不在需要自行准备JDK环境,部署的服务包含ES、Kibana、Logstash,使用二进制方式部署,为了提高安全性,加密logstash、kibana及其他客户端到ES间的通信。1、准备工作1.1、es无法使用root用户启动useradd-m-s/bin/bashesuser1.2、配置必要的内核参数,否则会启动失败vm.max_map_count定义了一个进程可以拥有的最大内存映射
sj1163739403
·
2025-03-06 04:44
elasticsearch
ssl
大数据
K8s初次入门
初步:搭建k8s
集群
k8s
集群
主机清单主机名ip地址master1.50node-00011.51node-00021.52node-00031.53node-00041.54node-00051.55harbor1.30
城市的五彩
·
2025-03-06 04:43
k8s
【云原生之kubernetes】在k8s
集群
中安装和配置Metrics Server( V1.30.3)
【云原生之kubernetes】在k8s
集群
中安装和配置MetricsServer(V1.30.3)一、MetricsServer介绍1.1MetricsServer简介1.2MetricsServer
江湖有缘
·
2025-03-06 04:41
云原生
kubernetes
容器
Redis 数据结构与操作详解:从基本命令到高效缓存策略mget-0707
集群
中执行mgetk1k2可能会出现(error)CROSSSLOTKeysinrequestdon'thashtothesameslot因为k1k2不在同一个槽位中只有他们在同一个槽位中,才能mget
raiseup2
·
2025-03-06 04:10
mybatis
数据库
redis
缓存
java
后端
k8s1.30 监控并限制节点使用资源(kubelet+metrics-server)
新
集群
容器突然全挂了,一看是node节点无法登录,只有一台还在苟颜残喘,内存和cpu已经到达极限。为避免出现类似情况,需要为系统和kubelet保留一定的cpu和内存资源。
sj1163739403
·
2025-03-06 04:39
Kubernetes
kubernetes
kubelet
容器
app上架vivo应用商店流程
内容涵盖服务器硬件(如IBMSystem3650M5)、云服务平台(如腾讯云、华为云)、服务器软件(如Nginx、Apache、GitLab、Redis、
Elasticsearch
、Kubernetes
奔跑吧邓邓子
·
2025-03-06 01:23
企业运营
MongoDB状态查询详解:db.serverStatus()
corp.yongche.org",//主机名"version":"2.6.2",//mongodb版本"process":"mongod",//mongodb进程,主要有mongod和mongos(分片
集群
中
胡儿胡儿
·
2025-03-06 00:38
NoSQL/MongoDB
db.serverStatus
mongodb
状态查询
Java 如何与
Elasticsearch
完美 “牵手”?
引言本文适合有一定Java编程基础,且对搜索引擎技术感兴趣,尤其是希望在项目中运用
Elasticsearch
实现高效数据检索与分析功能的开发人员阅读。
程序员顾茗
·
2025-03-05 21:49
java
elasticsearch
Elasticsearch
平台介绍
1简介
Elasticsearch
是一个实时分布式搜索和分析引擎。它能以很高的速度处理数据。它用于全文搜索、结构化搜索、分析以及将这三者混合使用。
yzhujue
·
2025-03-05 21:12
elasticsearch
上一页
1
2
3
4
5
6
7
8
下一页
按字母分类:
A
B
C
D
E
F
G
H
I
J
K
L
M
N
O
P
Q
R
S
T
U
V
W
X
Y
Z
其他