k8s技术分享第12页

k8s使用filebeat和ELK收集存储日志

k8s使用filebeat和ELK收集存储集群日志一、filebeat1.filebeat的configmap介绍2.k8s配置介绍二、logstash1.配置pipeline2.配置my.config

Will4j·2024-02-06 14:02

K8S使用filebeat统一收集应用日志

今年3月份在公司的内部k8s培训会上，开发同事对应用整合进pod提出了几个问题，主要围绕在java应用的日志统一收集、集中存放和javajvm内存监控数据收集相关的点上，本文将介绍使用filebeat实现

weixin_34292924·2024-02-06 14:31

k8s部署安装常见错误

1.kubectl执行kubectlgetnodes错误描述：Theconnectiontotheserverlocalhost:8080wasrefused-didyouspecifytherighthostorport?错误原因：kubectl默认从~/.kube/config配置文件获取访问kube-apiserver地址、证书、用户名等信息，如果没有配置该文件，或者该文件个别参数配置出错，

曹吉利·2024-02-06 14:10

k8s 日志收集、es+ Filebeat +kibala

系列文章目录实现原理一个java副本程序里包含一个filebeat程序，java程序固定输入到目录日志，filebeat进行采集，推送到es，kibala进行采集kind:DeploymentapiVersion:apps/v1metadata:labels:app:$IMAGESname:$IMAGESnamespace:yanxuanspec:progressDeadlineSeconds:6

明天加薪·2024-02-06 14:58

docker安装filebeat、k8s安装filebeat、通过k8s ConfigMap配置filebeat，k8s DaemonSet安装filebeat采集日志到es

容器运行日志代理具有日志代理功能的边车容器从应用中直接暴露日志目录解决方案部署应用通过DaemonSet运行filebeat通过ConfinMap创建filebeat配置文件编写yaml脚本运行filebeat查看日志参考文档前言本博文中涉及解决方案通过参考k8s

昌杰的攻城狮之路·2024-02-06 14:28

k8s filebeat 接入kafka

filebeat读取日志写入到kafka---apiVersion:v1kind:ConfigMapmetadata:name:filebeat-confignamespace:kube-systemlabels:k8s-app

xiangzilong·2024-02-06 14:28

K8s容器日志实时收集FileBeat+ES+Kibana

K8s容器日志实时收集FileBeat+ES+Kibanak8s日志收集第一种方式k8s日志收集第二种方式环境说明IP地址服务主机名10.4.82.119docker、k8s_master|node、master10.4.82.120docker

正在输入中…………·2024-02-06 14:27

k8s部署filebeat 采集应用程序日志

公司的服务都部署在k8s上，日志采集成为必须要做的事；filebeat采集日志有两种方案：1.filebeat跟应用程序一同部署，放在一个pod内，filebeat作为sidecar监控应用程序的日志；

lixiaolinzq·2024-02-06 14:57

【k8s】【ELK】【二】基于节点DaemonSet运行日志Agent实践

1.日志收集场景分析与说明部署架构说明对于那些将日志输出到，stdout与stderr的Pod，可以直接使用DaemonSet控制器在每个Node节点上运行一个filebeat、logstash、fluentd容器进行统一的收集，而后写入到日志存储系统。2.filebeat部署#创建ServiceAccountkubectlcreateserviceaccountfilebeat-nlogging

Nightwish5·2024-02-06 14:56

k8s部署filebeat收集日志推送kafka

网上有许多方案，今天我们采用在pod中部署专有日志收集容器的方式来实现，话不多说，下面干货。1、官网pull镜像dockerpulldocker.elastic.co/beats/filebeat:8.4.3文档地址：https://www.elastic.co/guide/en/beats/filebeat/current/running-on-docker.html2、编写filebeat.y

段丁荣·2024-02-06 14:56

Kubernetes实战(二十五)-快速下载k8s.gcr.io，gcr.io，quay.io镜像

1背景在云计算和云原生的环境下，不可避免的会使用很多镜像创建容器，其中有些镜像只有谷歌镜像仓库才有，但是国内不可以直接下载谷歌仓库的镜像，下面推荐几种方法，k8s.gcr.io/gcr.io是谷歌的镜像仓库

alden_ygq·2024-02-06 14:55

k8s filebeat 应用日志搜集

实施：filebeat使用daemonSet（见附录）进行构建：【k8s】【ELK】【二】基于节点DaemonSet运行日志Agent实践_k8selkdaemonsets方案-CSDN博客需要结合实际场景配置

li371490890·2024-02-06 14:24

k8s部署zk集群

k8s部署zk集群1.环境介绍使用helm进行部署zookeeper：3.72.zk集群部署helmrepoaddbitnamihttps://charts.bitnami.com/bitnami3.创建

包泽旭·2024-02-06 12:34

.Net 报【创建在“system.net/defaultProxy”配置节中指定的 Web 代理时出错】

更多C#知识可从【dotNet开发技术分享】公众号获取

Fountyuan·2024-02-06 11:44

阿里云原生高级架构师独家分享：K8S+Spring Cloud实战指南，让你轻松成为技术领袖

在了解Kubernetes的基本概念时，我们将重点关注以下七个方面：Docker的管理痛点什么是K8s？云架构&云原生K8s架构原理K8s核心

手把手教你学Java·2024-02-06 09:06

k8s中节点node的ROLES值是＜none＞

注意：ROLES列对于的标签名是：kubernetes.io/roleROLES列对于的标签名是：kubernetes.io/roleROLES列对于的标签名是：kubernetes.io/role所以对ROLES列信息的操作，就是对标签名为kubernetes.io/role的操作。如果ROLES列显示的是，那就表示当前节点没有kubernetes.io/role标签。查询当前集群节点信息：[r

Lingoesforstudy·2024-02-06 07:20

k8s学习-Service Account和RBAC授权

1.1ServiceAccount介绍首先Kubernetes中账户区分为：UserAccounts（用户账户）和ServiceAccounts（服务账户）两种，它们的设计及用途如下：UserAccount是给kubernetes集群外部用户使用的，例如运维或者集群管理人员，使用kubectl命令时用的就是UserAccount账户。UserAccount是全局性，在集群所有namespaces中

ByteX·2024-02-06 07:16

k8s的Deployment部署策略线上踩坑

kafka监听增量数据,实时数据写入该csv文件,供下游数仓次日取数.每日产生数据50G(1.8亿条)左右,有天重启服务,下游数仓直接告警提示:数据有好多条脏数据,导致无法继续入仓.结论先行我们服务托管在k8s

吴free·2024-02-06 07:41

k8s学习-Kubernetes Ingress

1.1什么是Ingress？首先我们来思考用传统的web服务器，比如Nginx，如何处理这种场景？比如使用Nginx充当一个反向代理服务器拦截外部请求，读取路由规则配置，转发相应的请求到后端服务。kubernetes处理这种场景时，涉及到三个组件：反向代理web服务器负责拦截外部请求，比如Nginx、Apache、traefik等等。我一般以Deployment方式部署到kubernetes集群中

ByteX·2024-02-06 07:37

linux k8s 源码编译及单集群测试

在线安装containerd安装二进制安装yum安装修改containder配置文件cnietcdrsyncgo设置golang代理安装CFSSL下载kubernetes代码编译启动本地单节点集群问题k8s

流月up·2024-02-06 06:12

SparkSQL on K8s 在网易传媒的落地实践

网易传媒在2021年成功将SparkSQL部署到了K8s集群，并实现与部分在线业务的混合部署，到目前已经稳定运行了一年多。

wangyishufan·2024-02-06 06:02

k8s收集日志

k8s收集日志写在前面：k8s在1.23版本之后就不用fluentd-es来收集日志了，而是把日志通过fluentd把日志直接打到存储，所以下面的文件在后面的版本已经没有了，不过还是照样可以用一.收集控制台日志采用

帅大大的架构之路·2024-02-06 06:32

Flink 内容分享(十九)：理想汽车基于Flink on K8s的数据集成实践

目录数据集成的发展与现状数据集成的落地实践1.数据集成平台架构2.设计模型3.典型场景4.异构数据源5.SQL形式的过滤条件数据集成云原生的落地实践1.方案选型2.状态判断及日志采集3.监控告警4.共享存储未来规划数据集成的发展与现状理想汽车数据集成的发展经历了四个阶段：第一阶段：在2020年7月基于DataX构建了离线数据交换能力。第二阶段：在2021年7月，构建了基于Flink的实时处理平台，

之乎者也··2024-02-06 06:30

理想汽车基于Flink on K8s的数据集成实践

导读本文将介绍理想汽车在FlinkonK8s的数据集成落地实践。

架构师小秘圈·2024-02-06 06:28

Flink on k8s 讲解与实战操作

Flink官网：https://flink.apache.org/不同版本的文档：https://nightlies.apache.org/flink/k8sonflink官方文档：https://nightli

LinkSLA·2024-02-06 06:56

Flink on k8s之historyServer

1.FlinkHistoryServer用途HistoryServer可以在Flink作业终止运行（Flink集群关闭）之后，还可以查询已完成作业的统计信息。此外，它对外提供了RESTAPI，它接受HTTP请求并使用JSON数据进行响应。Flink任务停止后，JobManager会将已经完成任务的统计信息进行存档，HistoryServer进程则在任务停止后可以对任务统计信息进行查询。比如：最后一

卤蛋x001·2024-02-06 06:54

Dockerfile文件参数配置和使用

文章目录一、Dockerfile介绍二、Dockerfile常用参数三、配置Dockerfile四、使用Dockerfile1.构建镜像命令语法2.举例K8S自动化部署JAVA项目（GitlabCI/CD

寒山李白·2024-02-06 04:15

.gitlab-ci.yml文件参数配置和使用

文章目录一、介绍二、配置三、使用K8S自动化部署JAVA项目（GitlabCI/CD）请参考文章：K8S部署Java项目（GitlabCI/CD自动化部署）一、介绍既然你用到了.gitlab-ci.yml

寒山李白·2024-02-06 04:13

K8S集群管理平台Rancher（1）：基础入门

文章目录一、Rancher概述1.1什么是Rancher1.2RancherServer功能1.3Rancher架构设计1.4Rancher和下游集群交互1.5Rancher相关文件1.6Rancher创建的Kubernetes类型二、优点和不足2.1优点2.2不足一、Rancher概述1.1什么是RancherRancher是为使用容器的公司打造的容器管理平台。Rancher简化了使用Kuber

鹤冲天Pro·2024-02-06 04:58

K8S之标签的介绍和使用

标签标签定义标签实操1、对Node节点打标签2、对Pod资源打标签查看资源标签删除资源标签标签定义标签就是一对key/value，被关联到对象上。标签的使用让我们能够表示出对象的特点，比如使用在Pod上，能一眼看出这个Pod是干什么的。也可以用来划分特定的对象（比如版本，服务类型等）。标签可以在创建一个对象的时候直接定义，也可以在后期随时修改，每一个对象可以拥有多个标签，但是，key值必须是唯一的

sissie喵~·2024-02-06 03:42

K8S之Namespace的介绍和使用

的理论和实操Namespace理论说明Namespace实操创建、查看命名空间使用ResouceQuota对Namespace做资源限额更多ResouceQuota的使用Namespace理论说明命名空间定义K8s

sissie喵~·2024-02-06 03:39

分布式文件系统JuiceFS测试总结

这是一款由国内公司开源的分布式文件系统，2021年1月在GitHub上开源，支持k8s原生适配及多种应用场景。本文通过一系列的测试，评估分布式文件系统JuiceFS是否满足G行应用场景的需求。

啊码·2024-02-06 03:34

java的热部署/热更新（1）背景

为什么需要热部署现阶段，线上集群的发布采取1.虚拟机/物理机器更新代码的方式，2.docker/k8s环境更新pod的镜像。优点显而易见，一致性好，可靠性高。但是热部署也有自己的优势：快速发布/

define_us·2024-02-06 02:54

k8s-WordPress 网站搭建

WordPress网站搭建编排MariaDB使用ConfigMap定义MariaDB所需的环境变量，yaml文件命名：maria-cm.ymlapiVersion:v1kind:ConfigMapmetadata:name:maria-cmdata:DATABASE:'db'USER:'wp'PASSWORD:'123456'ROOT_PASSWORD:'123456'定义MariaDB的Pod，

雨打夏夜·2024-02-06 01:49

使用k8s搭建一个https的wordpress无坑版

没有想到用k8s搭https版的wordpress能耗时这么久，还搭上了我的基友slash先生，既然这么费事，就记录下来吧。欢迎转载，转载请注明出处，谢谢。

KTKong·2024-02-06 01:48

k8s创建并发布WordPress

WordPress简介WordPress是使⽤PHP语⾔开发的内容管理系统软件，⽤户可以在⽀持PHP和MySQL数据库的服务器上使⽤⾃⼰的博客，⼀个完整的WordPress应⽤程序包括以下Kubernetes对象。⽬的演示如何在KubeSphere中创建应⽤程序（以WordPress为例）并在集群外访问它。任务1：创建密钥创建MySQL密钥环境变量WORDPRESS_DB_PASSWORD是连接到

凌晨里的无聊人·2024-02-06 01:18

k8s 实战1：WordPress搭建

文章目录第一步：部署MariaDB第二步：部署WordPress第三步：映射WordPressPod端口号，让它在集群外可见第四步：创建反向代理的Nginx，让我们的网站对外提供服务WordPress架构图第一步：部署MariaDBMariaDB需要4个环境变量，比如数据库名、用户名、密码等，在Docker里我们是在命令行里使用参数--env，而在Kubernetes里我们就应该使用ConfigM

唐僧骑白马·2024-02-06 01:18

使用 k8s 搭建 wordpress

使用k8s搭建wordpress部署思路编写wordpress部署yaml编写mysql.yaml部署验证k8s是容器编排系统，使用K8s可以做到自动扩缩、故障转移，等等优秀的特性，被常常在企业中使用。

初原挽风·2024-02-06 01:47

Kubernetes 简介

k8s入门到微服务项目实战.xmindhttps://www.yuque.com/attachments/yuque/0/2024/xmind/35457682/1707117691869-1ea2805d

HuaLuLemon·2024-02-06 01:39

k8s学习（RKE+k8s+rancher2.x）成长系列之简配版环境搭建（二）

三、简配版集群，适用于demo环境1.集群架构设计主机名角色配置(核数，内存，磁盘)MasterRKE,controlplane,etcd,worker,rancher-master2C8G40GSlaver1controlplane,worker,rancher-master2C8G40GSlaver2controlplane,worker,rancher-master2C8G40G2.预期目标

日复一日伐树的熊哥·2024-02-06 00:29

2020年1月9日下午的技术分享

nginx的常用负载均衡HTTP重定向对于HTTP重定向，你一定不陌生，它可以将HTTP请求进行转移，在Web开发中我们经常会用它来完成自动跳转，比如用户登录成功后跳转到相应的管理页面。这种重定向完全由HTTP定义，并且由HTTP代理和Web服务器共同实现。很简单，当HTTP代理（比如浏览器）向Web服务器请求某个URL后，Web服务器可以通过HTTP响应头信息中的Location标记来返回一个新

91李先生·2024-02-06 00:37

ubuntu18 安装k8s、openyurt

参考链接ubuntu部署k8shttps://blog.csdn.net/SHELLCODE_8BIT/article/details/122192034ubuntu永久关闭swaphttps://blog.csdn.net

mpb·2024-02-05 22:10

kubeadm离线一键安装K8s集群

文章目录kubeadm离线一键安装K8s集群如何使用验证kubeadm离线一键安装K8s集群前言：安装的K8s版本为1.27.1容器运行时使用的containerd，不是使用docker。

银痕·2024-02-05 22:39

ubuntu18.04 搭建k8s

需求：搭建k8s为后续自动部署做准备进程：安装至少两个ubuntu18.04系统（一个master一到多个node）每个系统上都要装上docker和kubernetes安装dockersudosuapt-getupdate

weitao_11·2024-02-05 22:39

ubuntu离线安装k8s

目录一、前期准备二、安装前配置三、安装docker四、安装cri-dockerd五、部署k8smaster节点六、整合kubectl与cri-dockerd七、网络等插件安装八、常见问题及解决方法一、前期准备

雨欲语·2024-02-05 21:39

13、gitlab

13、gitlab4c8g、100gdocker安装gitlab（使用k8s的ingress暴露）版本：https://gitlab.com/gitlab-org/gitlab-foss/-/tags?

Linux云计算+运维开发·2024-02-05 20:58

2020年整理最完善的java学习体系

这里将开启你的人生新天地，不只技术分享，更多对人生的感悟和实践，站在作者肩膀上猪也能起风！如果你是技术人员，可以关注公众号Java云上体验，回复：面试题，不定期更新资料，留言备注ja

jackLu321·2024-02-05 17:01

k8s附加组件有哪些

Kubernetes(K8s)是一个用于自动化部署、扩展和管理容器化应用程序的开源平台。除了核心组件之外，Kubernetes还提供了一些附加组件，用于增强集群的功能和管理能力。

Fred3D·2024-02-05 17:58

提升CKA考试胜算：一文带你全面了解RBAC权限控制！

didiplus·2024-02-05 16:14

揭秘高效运维：如何用kubectl top命令实时监控K8s资源使用情况？

往期精彩:提升CKA考试胜算：一文带你全面了解RBAC权限控制！kubectltop是一个用于查看Kubernetes集群中资源使用情况的命令。它可以显示节点或Pod的CPU、内存和存储的使用情况。该命令要求正确配置MetricsServer并在服务器上工作。什么是MetricsServerMetricsServer是Kubernetes内置自动缩放管道的可扩展、高效的容器资源指标来源。Metri