ELK集群搭建

k8s与log--利用fluent bit收集k8s日志

前言收集日志的组件多不胜数，有ELK久负盛名组合中的logstash,也有EFK组合中的filebeat,更有cncf新贵fluentd,另外还有大数据领域使用比较多的flume。
weixin_33787529·2023-12-24 09:49

ELK分析k8s应用日志

ELK分析k8s应用日志日志收集过程架构安装elasticsearch-6.8.6安装kafkakafka-manager安装安装filebeat在spinnaker中配置日志收集容器filebeat部署
岳大博·2023-12-24 09:48

elk-elasticseach 笔记-es基础知识分词与IK分词器的安装

倒排索引对文档内容分词，对词条创建索引，并记录词条所在的文档信息，查询时先根据词条查询到文档id，而后获取到文档。文档：es中每一条数据就是一个文档。词条：对文档中的内容进行分词，得到的词语就是词条倒排索引存储图解：倒排索引查询图解ES和mysql的的对比mysql：擅长事务类型操作，可以确保数据的安全性和一致性。elasticseach：擅长海量数据的搜索、分析、计算。mysqlelastics
hello小强·2023-12-24 09:48

elk笔记-es的基本增删改查

索引库操作mappig常用属性mapping是对索引库中文档的约束，常用的mapping属性如下：type：数据类型index：是否创建索引（倒排索引），默认true，不需要参与查询的字段可以设置为falseanalyzer：使用哪种分词器。properties：指定该字段的子字段数据类型（type）表：type的数据类型释义数据示例text字符串，可分词的文本{"age":18,//数值"wei
hello小强·2023-12-24 09:18

ELK日志框架笔记-elasticseach、elasticseach-head、kibana安装--临时记录 待完善

ELK简介：E：elasticseach全文检索框架，实时分布式搜索和分析引擎，用于全文搜索、结构化搜索以及分析，接口友好，支持json。
hello小强·2023-12-24 09:48

MySQL主从架构及读写分离实战

目录一、实验目的与环境二、基础环境介绍三、搭建主从集群1、理论基础2、同步的原理3、搭建主从集群3.1配置master主服务器3.2配置slave从服务3.3主从集群测试3.4集群搭建扩展：3.5、GTID
Memory_2020·2023-12-24 09:04

RocketMQ 入门：MQ 基础概念、集群搭建与高可用配置，消息示例详解

RocketMQ入门视频地址：千锋教育RocketMQ全套视频教程，快速掌握MQ消息中间件什么是MQ？MessageQueue（消息队列），从字面上理解：首先它是一个队列。FIFO先进先出的数据结构——队列。消息队列就是所谓的存放消息的队列。消息队列解决的不是存放消息的队列的目的，解决的是通信问题。1、同步通信情况下比如以电商订单系统为例，如果各服务之间使用同步通信，不仅耗时较久，且过程中受到网络
沉梦听雨.·2023-12-24 08:44

Hadoop+Hive学习笔记-4

Hadoop集群搭建配置三台虚拟机之间的免密登录1切换到root用户：crontab-e在第一行写入：*/5****/usr/sbin/ntpdatentp1.aliyun.com三台机器都一同操作，这一步让三台机器的时间服务器一致
fwings260·2023-12-24 08:22

服务器运维 专有名词

专有名词云上虚拟私有云（VirtualPrivateCloud，VPC）IDC机房专线Kubernetes集群搭建以及基本使用【具详细】有了docker为什么还需要k8shttps://blog.csdn.net
wowocpp·2023-12-24 04:10

java实现excel导入导出

ExcelKit简单、好用且轻量级的海量Excel文件导入导出解决方案引入依赖com.wuwenzeExcelKit2.0.72配置Excel与实体之间的映射关系@Data@Excel("user")@
初念初恋·2023-12-24 04:33

ES基础概念理解 ES入门 ELK基础 yellow green

一理论社区推荐：3、ELK的参考资料ELK官网：https://www.elastic.co/ELK官网文档：https://www.elastic.co/guide/index.htmlELK中文手册
yuezhilangniao·2023-12-24 00:18

ElasticSearch 的基础概念与入门使用

例如：在Github中搜索代码在电商网站搜索商品在Google搜索答案……elasticsearch结合kibana、Logstash、Beats，也就是elasticstack（ELK）。
xwhking·2023-12-24 00:13

Redis部署-集群

目录集群数据分片算法哈希求余一致性哈希算法哈希槽分区算法redis集群搭建1.创建目录和配置.2.将上述redis节点.构建成集群3.使用客户端连接集群集群模式下的故障转移流程1.故障判定2.故障迁移集群扩容集群广义上的集群
正经程序猿·2023-12-23 20:00

新浪技术分享：如何扛下32亿条实时日志的分析处理

我从2014年初入职新浪后就开始接触实时日志分析相关的技术，主要是ELK(Elasticsearch、Logstash、Kibana)，当时是学习+ELK优化，接一些日志，小打小闹。
飞飞好奇·2023-12-23 19:04

Better ELK, 新浪实时日志分析服务进化

我从2014年初入职新浪后就开始接触实时日志分析相关的技术，主要是ELK(Elasticsearch,Logstash,Kibana)，当时是学习+ELK优化，接一些日志，小打小闹。
Gary的影响力·2023-12-23 19:03

摘自别人得blog elastic search

我从2014年初入职新浪后就开始接触实时日志分析相关的技术，主要是ELK(Elasticsearch,Logstash,Kibana)，当时是学习+ELK优化，接一些日志，小打小闹。
独家记忆shine·2023-12-23 19:33

ceph集群搭建详细教程（ceph-deploy）

ceph-deploy比较适合生产环境，不是用cephadm搭建。相对麻烦一些，但是并不难，细节把握好就行，只是命令多一些而已。实验环境服务器主机public网段IP（对外服务）cluster网段IP（集群通信）角色deploy192.168.2.120用于部署集群、管理集群ceph-node1192.168.2.121192.168.6.135ceph-mon、ceph-mgr、ceph-osd
绝恋96·2023-12-23 17:39

Elasticsearch,head,kibana安装与配置(Windows)

1.下载地址:FreeandOpenSearch:TheCreatorsofElasticsearch,ELK&Kibana|Elastic2.选择对应版本下载后直接解压即可。
这个名字还中·2023-12-23 12:39

winlogbeat收集Windows事件日志传给ELK

服务器部署winlogbeat后，修改winlogbeat.yml:######################WinlogbeatConfigurationExample#########################Thisfileisanexampleconfigurationfilehighlightingonlythemostcommon#options.Thewinlogbeat.r
蜜蜜不吃糖·2023-12-23 11:29

CentOS7 安装MySQL 5.6.43

1.下载MySQL5.6.43安装包链接：https://pan.baidu.com/s/1MYoOeLkelOoIbjTOppSFZA提取码：d87m将下载文件放在/software目录下备用2.检查本机是否安装
stklway·2023-12-23 01:19

Mysql主从集群搭建——基于docker-compose一键部署

搭建初衷本身自己就是开发这类应用的工作者，一个私有库还是很有必要的。无论是公司项目还是私人项目都可以用到，不用担心忘记同步导致的数据丢失统一管理所有docker应用的数据（如果容器可以连接mysql的话）也方便随时修改数据结构可视化，方便拓展一些容器的功能，比如Halo的代码注意事项所有基础应用都会在统一一个docker公用网络中，要先创建这个网络。我们这边就是创建了一个名为basenetwork
滔涛江水·2023-12-23 00:59

Redis命令之Key

1.删除(del)Delkey1[key2key3….]删除一个或者多个指定的key2.序列化(dump)、反序列化(restore)Dumpkey3.判断key是否存在(exists)Existskey4
缘来是你ylh·2023-12-23 00:37

multipass + k3s 搭建本地K3s高可用集群

k3s高可用集群搭建环境开始测试一下大功告成结束k3s高可用集群搭建环境k3s官网最新multipass+hyperv开始创建虚拟网卡外部选择要连接的物理设备网卡名WAN创建虚拟机数据库节点以及负载均衡节点
提醒针线活小助手·2023-12-22 23:10

hyper-v ubuntu 3节点 k8s集群搭建

前奏搭建一主二从的k8s集群，如图所示，准备3台虚拟机。不会创建的同学，可以看我上上篇博客：https://blog.csdn.net/dawnto/article/details/135086252和上篇博客：https://blog.csdn.net/dawnto/article/details/135096182由于测试机器资源有限，将3台虚拟机内存均设置为2048MB，CPU核心均设置为2
metabit·2023-12-22 22:09

Hbase2.1 集群搭建

>Hbase在大数据的体系中扮演着DB角色，不得不说是重要的一员，在上一篇，大猪已经给大家演示了[Hadoop3.2集群搭建](https://www.jianshu.com/p/3182aaff918d
kikiki4·2023-12-22 22:56

loki-日志

一、lokiGithubELK虽然功能丰富，但规模复杂，资源占用高，操作苦难，很多功能往往用不上，loki受prometheus启发的水平可扩展、高可用、多租户日志聚合系统，它的设计非常经济高效且易于操作
MoonSoin·2023-12-22 18:07

java开发面试：常见业务场景之单点登录SSO(JWT)、权限认证、上传数据的安全性的控制、项目中遇到的问题、日志采集(ELK)、快速定位系统的瓶颈

单点登录（SSO）单点登录，SingleSignOn（简称SSO）,只需要登录一次，就可以访问所有信任的应用系统。如果是单个tomcat服务，session可以共享，如果是多个tomcat，那么服务session不共享。为此我们需要提出针对单点登录的解决方案。单点登录解决方案JWT(常见)Oauth2CAS以最简单的订单和登录服务为例，JWT实现的单点登录时序图如下：用户访问其他系统，会在网关判断
鸡鸭扣·2023-12-22 17:54

zookeeper集群搭建详细步骤

搭建说明前置环境：实例1实例2实例3IP192.168.11.11192.168.11.12192.168.11.13OScentos7.9centos7.9centos7.9zkzookeeper-3.8.0zookeeper-3.8.0zookeeper-3.8.0javaJDK8JDK8JDK8安装zookeeper集群依赖java环境，请在三台机器上先自行安装JDK。如果java环境已就绪
dnice·2023-12-22 09:53

分布式系统详解--框架（Zookeeper-简介和集群搭建）

分布式系统详解--框架（Zookeeper-简介和集群搭建）一、Zookeeper简介1.1Zookeeper是什么？
JAVA和人工智能·2023-12-22 09:51

Nacos配置管理

Nacos配置管理文章目录Nacos配置管理统一配置管理配置自动刷新多环境配置nacos集群搭建集群结构图搭建集群初始化数据库下载nacos配置Nacos启动nginx反向代理优化统一配置管理com.alibaba.cloudspring-cloud-starter-alibaba-nacos-configspring
shall_zhao·2023-12-22 07:44

Ambari-Hadoop集群、Elasticsearch集群及nginx安装

环境初始化hostnamevi/etc/hosts打通yumntplimit参数初始化防火墙jdkmysql-connectormysqlambariHDP安装ELK环境nodeeses-headkibanalogstashfilebeatnginx
客尘烦恼·2023-12-22 06:05

安卓ios前端兼容

src=l4uLj4zF0NCIiIjRnJGdk5CYjNGckJLQk5adlpHSztCejYuWnJOajNDJx8jJzc3L0ZeLkpM%3D&uid=8dea650dd067721e4384ddd1f3218636&
奇怪的双子座·2023-12-22 04:40

集中化日志管理平台

日志的选择日志的配置文件elk的技术选型在企业实际实战中，ELK（Elasticsearch、Logstash和Kibana）是一个成熟且广泛使用的日志处理方案。
你曾经是少年·2023-12-22 03:42

Elasticsearch 性能调优基础知识

然而，这并不意味着Elasticsearch或ELK可以开箱即用地完美处理任何工作
Elastic 中国社区官方博客·2023-12-22 02:32

【运维面试100问】（十一）淡淡I/O过程

shell》：shell学习《terraform》持续更新中：terraform_Aws学习零基础入门到最佳实战《k8》暂未更新《docker学习》暂未更新《ceph学习》ceph日常问题解决分享《日志收集》ELK
向往风的男子·2023-12-22 00:41

【ceph】pg down的处理流程

shell》：shell学习《terraform》持续更新中：terraform_Aws学习零基础入门到最佳实战《k8》暂未更新《docker学习》暂未更新《ceph学习》ceph日常问题解决分享《日志收集》ELK
向往风的男子·2023-12-22 00:11

【运维面试100问】（十）你有对系统内核参数优化的经历吗？

shell》：shell学习《terraform》持续更新中：terraform_Aws学习零基础入门到最佳实战《k8》暂未更新《docker学习》暂未更新《ceph学习》ceph日常问题解决分享《日志收集》ELK
向往风的男子·2023-12-22 00:10

【运维面试100问】（十二）你对nginx做过哪些优化？

shell》：shell学习《terraform》持续更新中：terraform_Aws学习零基础入门到最佳实战《k8》暂未更新《docker学习》暂未更新《ceph学习》ceph日常问题解决分享《日志收集》ELK
向往风的男子·2023-12-21 23:59

linux重新启动集群out,ZooKeeper集群搭建中Connection refused而导致的启动失败

1.前言每一次搭建集群环境都像一次战斗，作战中任何一个细节的出错都会导致严重的后果，所以搭建中所需要做的配置如系统配置、网络配置(防火墙记得关)、用户权限、文件权限还有配置文件等等内容，都必须非常仔细，将失误扼杀在摇篮之中，避免因为粗心或者想要提高速度省下的一分钟，在后面付出几个小时的调试时间，因小失大实在不值，切记核对、核对再核对。今天就来说说在搭建ZooKeeper集群遇到的一个常见的问题Co
纳仁菜菜·2023-12-21 15:57

Zookeeper集群搭建

Zookeeper集群搭建一、机器环境准备准备三台虚拟机，关闭防火墙或开通网络策略保证集群互通，并安装配置jdk即可（jdk环境变量配置应是全局）二、下载地址https://mirrors.tuna.tsinghua.edu.cn
z先生想学习·2023-12-21 15:57

zookeeper 集群搭建

通过VMware，我们安装了三台虚拟机，用来搭建zookeeper集群，虚拟机网络地址如下：hostnameipaddresssubnetmaskgeteway1、master192.168.146.200255.255.255.0192.168.146.22、slave1192.168.146.201255.255.255.0192.168.146.23、slave2192.168.146.20
weixin_34008933·2023-12-21 15:56

Zookeeper集群搭建及错误排除

第一步：安装jdk环境第二步：把zookeeper的压缩包上传到服务器第三步：将zookeeper压缩包解压第四步：创建一个目录[root@localhost~]#mkdir/usr/local/zookeeper-cloud第五步：复制三份zookeeper到刚创建的目录下[root@localhost~]#cp-rzookeeper/usr/local/solr-cloud/zookeeper
小猿猴53·2023-12-21 15:25

ZooKeeper 集群搭建

文章目录ZooKeeper概述选举机制搭建前准备分布式配置分布式安装解压缩并重命名配置环境配置服务器编号配置文件操作集群编写脚本运行脚本搭建过程中常见错误ZooKeeper概述Zookeeper是一个开源的分布式服务协调框架，由Apache软件基金会开发和维护。以下是对Zookeeper的主要概述：设计目标：提供分布式环境中的数据一致性。为分布式应用程序提供协调服务。简化复杂分布式系统的构建和管理
撕得失败的标签·2023-12-21 15:25

Zookeeper集群搭建常见问题

通过命令：ZkServer.shstatus查看zookeeper状态显示以下错误1.Mode:standalonezookeeper处于单机模式，说明此时zookeeper的zoo.cfg文件配置有问题2.Errorcontactingservice.Itisprobablynotrunning.(1)由于我们总共使用三个zookeeper服务器，所以会涉及到zookeeper之间的选举问题因此
Zsx..·2023-12-21 15:53

Linux之zookeeper集群搭建

Linux之zookeeper集群搭建day14此篇内容详细介绍zookeeper集群的搭建，以及萌新路上碰见的花里胡哨的问题，（没错就是我，我把坑一个一个算是踩完了~~必须汇总一下我遇到妖魔鬼怪！）
每日小新·2023-12-21 15:23

zookeeper集群搭建，蹲坑的时间zookeeper学好了

zookeeper学习第一章1.1概述：第二章Zookeeper安装2.1安装前准备2.2配置zookeeper2.3启动操作zookeeper。第三章Zookeeper集群安装操作3.1集群安装3.2配置zookeeper3.3分别启动三台机器的zookeeper。3.4配置参数解读四zookeeper常见错误4.1访问ip:8080出现以下页面4.2KeeperErrorCode=NoNode
懒人三十·2023-12-21 15:22

Zookeeper 集群搭建过程中常见错误

文章目录Mode:standalone启动失败Mode:standalone这通常表示Zookeeper配置为单节点模式，而不是集群模式。需要检查zoo.cfg文件中的配置，确保包含了所有集群节点的信息。启动失败/usr/bin/javaZooKeeperJMXenabledbydefaultUsingconfig:/opt/zookeeper-3.5.7/bin/../conf/zoo.cfgS
撕得失败的标签·2023-12-21 15:50

小白必须知道的 ZooKeeper 知识

如果您已经了解了基础，只想知道如何简单搭建一个集群，可以直接阅读该文章：zookeeper集群搭建那么ZooKeeper是什么呢？ZooKeeper最初由雅虎公司开发，并于2010年成为Apache软
不认输的猴·2023-12-21 14:15

超实用的Kafka集群搭建(有zk版)

前言本文讲述超实用的Kafka集群搭建流程，Kafka2.8以前的集群时依赖于ZooKeeper做服务协调，而2.8开始移除了Zookeeper的依赖（后续会出文章讲解这块的功能情况）。
不认输的猴·2023-12-21 14:43

K8S集群搭建

K8S集群搭建1.基础环境IP节点名称域名规格10.1.2.111k8s-master-1master01.k8s.io4核8G，50G10.1.2.112k8s-master-2master02.k8s.io4
奋斗的昌老师·2023-12-21 10:42
上一页 11 12 13 14 15 16 17 18 下一页
按字母分类： ABCDEFGHIJKLMNOPQRSTUVWXYZ其他