Helm 安装 Prometheus 详解 以及 问题解决

Helm install prometheus


kubectl create ns monitor

helm repo add prometheus-community https://prometheus-community.github.io/helm-charts
helm repo update
helm search repo prometheus

# prometheus
helm show values prometheus-community/prometheus > prometheus.yaml
helm install prometheus prometheus-community/prometheus  -f prometheus.yaml -n monitor

uninstall

helm  uninstall prometheus  -n monitor

Helm install ingress

1.  添加ingress的helm仓库
01.# helm repo add ingress-nginx https://kubernetes.github.io/ingress-nginx
02.# helm search repo ingress-nginx
#要使用APP VERSION大于0.4.2的版本
2.  下载ingress的helm包至本地
# helm pull ingress-nginx/ingress-nginx --version 3.6.0
3.  更改对应的配置
tar xvf ingress-nginx-3.6.0.tgz
cd ingress-nginx
vim values.yaml
4.  需要修改的位置
a)  Controller和admissionWebhook的镜像地址，需要将公网镜像同步至公司内网镜像仓库（和文档不一致的版本，需要自行同步gcr镜像的，可以百度查一下使用阿里云同步gcr的镜像，也可以参考这个链接https://blog.csdn.net/weixin_39961559/article/details/80739352，
或者参考这个链接： https://blog.csdn.net/sinat_35543900/article/details/103290782）
修改repository为地址registry.cn-beijing.aliyuncs.com/dotbalo/controller，并注释掉哈希值；
    ////Controller和admissionWebhook的镜像备选的地址
image:
    registry: registry.aliyuncs.com  #修改镜像仓库地址
    image: google_containers/nginx-ingress-controller #修改镜像仓库和镜像名 ////
     
b)  镜像的hash值注释；
c)  hostNetwork设置为true；
d)  dnsPolicy设置为 ClusterFirstWithHostNet；
e)  nodeSelector添加ingress: "true"部署至指定节点；
f)  默认的类型是Deployment，更改为kind: DaemonSet；
g)  type: 默认是LoadBalancer（云环境使用这个） ，修改为ClusterIP；
h)  建议根据生产实际环境修改requests；
i)  建议根据生产实际环境修改admissionWebhooks；
要使用APP VERSION大于0.4.2的版本，大于这个版本，这个enabled不需要修改
j)  image修改镜像地址为registry.cn-beijing.aliyuncs.com/dotbalo/kube-webhook-certgen
    //此项的备用地址参考a项目的备用地址//
 
5.  部署ingress
给需要部署ingress的节点上打标签
  01.//创建命名空间叫ingress-nginx
# kubectl create ns ingress-nginx
  02.//获取所有namespace；
# kubectl get ns
  //查看到ingress-nginx创建完成；//
  03.//取所有工作节点
# kubectl get node
  04.//比如我们给部署在master03上ingress的节点上打标签
# kubectl label node k8s-master03 ingress=true
node/k8s-master03 labeled
  05.//注意末尾的 . （点）
# helm install ingress-nginx -n ingress-nginx .
  06.//镜像拉取快慢取决于镜像地址，国内的阿里云比较快（多次刷新看到结果Ready 1/1，STATUS：Running为止）
[root@k8s-master01 ingress-nginx]# kubectl get pod -n ingress-nginx
 
6.  将ingress controller部署至Node节点（ingress controller不能部署在master节点，需要安装视频中的步骤将ingress controller部署至Node节点，生产环境最少三个ingress controller，并且最好是独立的节点）
kubectl label node k8s-node01 ingress=true
kubectl label node k8s-master03 ingress-

image.png

ingress-nginx 配置使用

image.png


[root@vm2 ~]# cat ingress_alertmanager.yaml 
apiVersion: networking.k8s.io/v1
kind: Ingress  
metadata:
  name: alertmanager-ingress
  namespace: monitor
spec:
  ingressClassName: nginx
  rules:
  - host: "alertmanager.test.com"
    http:
      paths:
      - pathType: Prefix
        path: "/"
        backend:
          service:
            name: prometheus-alertmanager
            port:
              number: 9093
[root@vm2 ~]# 
[root@vm2 ~]# cat ingress_prometheus.yaml 
apiVersion: networking.k8s.io/v1
kind: Ingress  
metadata:
  name: prometheus-ingress
  namespace: monitor
spec:
  ingressClassName: nginx
  rules:
  - host: "prometheus.test.com"
    http:
      paths:
      - pathType: Prefix
        path: "/"
        backend:
          service:
            name: prometheus-server
            port:
              number: 80
生效：kubectl apply -f ingress_alertmanager.yaml

image.png

prometheus 配置

[root@vm2 ~]# kubectl -n monitor get cm
NAME                      DATA   AGE
prometheus-alertmanager   1      18h
prometheus-server         6      18h


kubectl -n monitor edit cm prometheus-server
.
.
- job_name: node-instance
      honor_timestamps: true
      scrape_interval: 1m
      scrape_timeout: 10s
      metrics_path: /metrics
      scheme: http
      static_configs:
      - targets:
        - 192.168.1x.11:9100
        - 192.168.1x.16:9100

验证

image.png

image.png

问题解决

pod ImagePullBackOff

kubectl  describe  pod prometheus-kube-state-metrics-xxxx  -n monitor
kubectl edit pod  prometheus-kube-state-metrics-xxxx  -n monitor
同样的，我们通过docker仓库找一下相同的,然后通过​​kubectl edit pod​​修改一下
k8s.gcr.io/kube-state-metrics/kube-state-metrics 替换为： docker.io/dyrnq/kube-state-metrics:v2.3.0

pod pending 问题

image.png

  • 解决问题思路方法：

    1. 使用logs或者describe 查看定位问题
 # kubectl describe pod prometheus-server-6d4664d595-pch8q -n monitor
。
。
Events:
  Type     Reason            Age                   From               Message
  ----     ------            ----                  ----               -------
  Warning  FailedScheduling  117s (x619 over 15h)  default-scheduler  0/6 nodes are available: 6 pod has unbound immediate PersistentVolumeClaims.
  1. 报错“6 pod has unbound immediate PersistentVolumeClaims”：没立即绑定pvc

  2. 来查看 namespace下的pvc实际情况

     [root@vm2 ~]# kubectl get pvc -n monitor
NAME                                STATUS    VOLUME                    CAPACITY   ACCESS MODES   STORAGECLASS   AGE
prometheus-server                   Pending                                                                      15h
storage-prometheus-alertmanager-0   Bound     pv-volume-alertmanager1   2Gi        RWO                           15h
    1. pvc是pending状态未 bound pv，现在需要创建一个pv

image.png

  1. 查看需要创建相应pv的信息
使用： helm show values prometheus-community/prometheus

这里我们已经把配置重定向到本地的prometheus.yaml 文件中，直接去文件中查看即可

image.png

image.png

  1. 创建 一个pv

    
[root@vm2 ~]# cat prometheus_pv.yaml 
kind: PersistentVolume
apiVersion: v1
metadata:
  namespace: monitor
  name: pv-volume-prometheus
  labels:
 type: local
spec:
  capacity:
 storage: 8Gi
  accessModes:
 - ReadWriteOnce
  hostPath:
 path: "/home/pv/prometheus/prometheus-server"
记得在节点上创建 目录
  1. 验证

image.png

CrashLoopBackOff 问题

1.describe 查看pod 问题

image.png

  1. 发现问题描述不清晰 只能去 node上 查看容器日志（目测在vm3上）

image.png

# 在vm3上
docker ps -a  #寻找exit的容器

# 查看日志
docker logs xxxxID

  1. 问题看起来是 权限导致的

    msg="Error opening query log file" file=/data/queries.active err="open /data/queries.active: permission denied"

权限问题，监控套件基于kube-prometheus构建,prometheus的镜像中文件/prometheus/queries.active属主为1000这个用户，当前nfs路径prometheus-k8s-db-prometheus-k8s-0属主是root用户(有权限风险),从而导致写入失败。

image.png

修改PV的路径权限为777，确保后续pod中属主为1000的用户也可以对文件进行操作

4.验证

image.png

问题 Error: INSTALLATION FAILED: chart requires kubeVersion: >=1.20.0-0 which is incompatible with Kubernetes v1.19.8

安装ingress 碰到了 k8s版本过低的问题 
helm pull ingress-nginx/ingress-nginx --version 3.6.0

image.png

你可能感兴趣的:(kuberneteshelm)

  • Linux Kubernetes Helm之构建一个 Helm Chart 阿然A
    kubernetesHelm之构建一个HelmChart一、创建helmchart二、构建本地chart仓库三、安装push插件四、部署应用部署mychart应用到k8s集群更新版本版本回滚卸载应用一、创建helmchart可以使用以下命令来创建一个名为mychart的helmchart：[root@server1helm]#helmcreatemychartCreatingmychart12创建
  • k8s (二十三) --- kubernetes Helm之构建一个 Helm Chart CL82 企业实战dockerlinuxkuberneteshelm运维
    kubernetesHelm之构建一个HelmChart一、创建helmchart二、构建本地chart仓库三、安装push插件四、部署应用部署mychart应用到k8s集群更新版本版本回滚卸载应用一、创建helmchart可以使用以下命令来创建一个名为mychart的helmchart：[root@server1helm]#helmcreatemychartCreatingmychart创建后会
  • Linux Kubernetes Helm详解及使用helm部署redis高可用集群 阿然A
    kubernetesHelm详解及部署一、Helm二、Helm安装三、Helm仓库的使用四、使用Helm部署redis-ha拉取部署文件解压更改变量文件部署redis高可用集群测试集群高可用集群的动态拉伸一、HelmHelm是Kubernetes应用的包管理工具，主要用来管理Charts，类似Linux系统的yum。HelmChart是用来封装Kubernetes原生应用程序的一系列YAML文件。
  • 微服务架构的现状与未来：服务网格与云原生趋势解析 IT·陈寒 架构设计AIGC人工智能架构云原生微服务
    文章目录微服务架构的崛起服务网格的崭露Istio和EnvoyLinkerd云原生技术的崭露KubernetesHelm未来趋势更强大的服务网格更智能的自动化更紧密的云原生集成结论欢迎来到AIGC人工智能专栏~微服务架构的现状与未来：服务网格与云原生趋势解析☆*o(≧▽≦)o*☆嗨~我是IT·陈寒✨博客主页：IT·陈寒的博客该系列文章专栏：AIGC人工智能其他专栏：Java学习路线Java面试技巧J
  • Loki 日志系统分布式部署实践一 简介 kong62
    说明关于loki是什么，有什么特性以及对比，这里不作说明，网上的文章已经很多。本次安装完全基于kuberneteshelm或operator进行部署。因为涉及的组件较多，除loki本身以外的组件，只是适当的优化了下性能，满足测试场景，生产还需要调整涉及组件cassandra存放index和chunketcd存放kvringredis作为cachedistributor日志中转ingester日志处
  • Kubernetes 3.2.4 Helm安装使用方法，部署一个简单的应用  清欢渡. kuberneteskubernetes
    KubernetesHelm什么是HelmHelm组件Helm部署一、安装Helm3.2.4版本二、常用chart源①、初始化chart源仓库Helm官网chart仓库②、查找想要安装的软件程序③、部署Helm应用例：安装一个Nginx应用④、查看helm生成应用、卸载应用什么是Helm在没有使用helm之前，在kubernetes部署应用，需要依次部署deployment、SVC等步骤较为繁琐。
  • k8s (二十四) --- kubernetes Helm之使用helm部署nfs pv CL82 企业实战
    kubernetesHelm之使用helm部署nfspv实验准备一、部署nfs-client二、创建nfspv实验准备删除所有的pv和pvc：[root@server1helm]#kubectldeletepvc--all......[root@server1helm]#kubectlgetpvNoresourcesfoundindefaultnamespace.[root@server1helm
  • k8s (二十二) --- kubernetes Helm详解及使用helm部署redis高可用集群 CL82 企业实战
    kubernetesHelm详解及部署一、Helm二、Helm安装三、Helm仓库的使用四、使用Helm部署redis-ha拉取部署文件解压更改变量文件部署redis高可用集群测试集群高可用集群的动态拉伸一、HelmHelm是Kubernetes应用的包管理工具，主要用来管理Charts，类似Linux系统的yum。HelmChart是用来封装Kubernetes原生应用程序的一系列YAML文件。
  • Go template 语法简介 风千寻艾
    使用kuberneteshelm部署服务，遇到template文件定义需要使用“或”的场景，查到原来helmtemplate使用的是gotemplate的语法，网上找了很多gotemplate的介绍文档，有一篇特别清晰，mark一下gotemplatereference：http://www.g-var.com/posts/translation/hugo/hugo-21-go-template-
  • Kubernetes 编排神器之 Helm jasondayee
    什么是KubernetesHelm?为什么要使用Helm?前言编写一堆Kubernetes配置文件是一件很麻烦的事情。对于一些容器，我们可能需要10多个yaml文件。维护它们是一个问题，而且在不同的环境中运行或使用相同的文件更是是一个噩梦。我们可以使用一些bash技巧来替换某些值，但这是一个不好的做法。这就是我们为什么要使用helm。我应该提到，还有另一个很好的工具ksonnet，它以自己的方式进
  • 部署Kubernetes - Helm 网管同学
    参考使用Helm管理kubernetes应用KubernetesHelm初体验QuickstartGuide部署安装客户端Helmcurlhttps://raw.githubusercontent.com/kubernetes/helm/master/scripts/get>get_helm.shchmod+xget_helm.sh./get_helm.sh安装服务端Tillerhelminit-
  • jdk tomcat 环境变量配置 Array_06 javajdktomcat
    Win7 下如何配置java环境变量 1。准备jdk包，win7系统，tomcat安装包（均上网下载即可） 2。进行对jdk的安装，尽量为默认路径（但要记住啊！！以防以后配置用。。。） 3。分别配置高级环境变量。   电脑-->右击属性-->高级环境变量-->环境变量。 分别配置 : path    &nbs
  • Spring调SDK包报java.lang.NoSuchFieldError错误 bijian1013 javaspring
            在工作中调另一个系统的SDK包，出现如下java.lang.NoSuchFieldError错误。 org.springframework.web.util.NestedServletException: Handler processing failed; nested exception is java.l
  • LeetCode[位运算] - #136 数组中的单一数 Cwind java题解位运算LeetCodeAlgorithm
    原题链接：#136 Single Number 要求： 给定一个整型数组，其中除了一个元素之外，每个元素都出现两次。找出这个元素 注意：算法的时间复杂度应为O(n)，最好不使用额外的内存空间 难度：中等 分析： 题目限定了线性的时间复杂度，同时不使用额外的空间，即要求只遍历数组一遍得出结果。由于异或运算 n XOR n = 0, n XOR 0 = n，故将数组中的每个元素进
  • qq登陆界面开发 15700786134 qq
    今天我们来开发一个qq登陆界面，首先写一个界面程序，一个界面首先是一个Frame对象，即是一个窗体。然后在这个窗体上放置其他组件。代码如下： public class First {         public void initul(){        jf=ne
  • Linux的程序包管理器RPM 被触发 linux
    在早期我们使用源代码的方式来安装软件时，都需要先把源程序代码编译成可执行的二进制安装程序，然后进行安装。这就意味着每次安装软件都需要经过预处理-->编译-->汇编-->链接-->生成安装文件--> 安装，这个复杂而艰辛的过程。为简化安装步骤，便于广大用户的安装部署程序，程序提供商就在特定的系统上面编译好相关程序的安装文件并进行打包，提供给大家下载，我们只需要根据自己的
  • socket通信遇到EOFException 肆无忌惮_ EOFException
    java.io.EOFException at java.io.ObjectInputStream$PeekInputStream.readFully(ObjectInputStream.java:2281) at java.io.ObjectInputStream$BlockDataInputStream.readShort(ObjectInputStream.java:
  • 基于spring的web项目定时操作 知了ing javaWeb
    废话不多说，直接上代码，很简单 配置一下项目启动就行 1，web.xml <?xml version="1.0" encoding="UTF-8"?> <web-app xmlns:xsi="http://www.w3.org/2001/XMLSchema-instance" xmlns="h
  • 树形结构的数据库表Schema设计 矮蛋蛋 schema
    原文地址： http://blog.csdn.net/MONKEY_D_MENG/article/details/6647488     程序设计过程中，我们常常用树形结构来表征某些数据的关联关系，如企业上下级部门、栏目结构、商品分类等等，通常而言，这些树状结构需要借助于数据库完成持久化。然而目前的各种基于关系的数据库，都是以二维表的形式记录存储数据信息，
  • maven将jar包和源码一起打包到本地仓库 alleni123 maven
    http://stackoverflow.com/questions/4031987/how-to-upload-sources-to-local-maven-repository <project> ... <build> <plugins> <plugin> <groupI
  • java IO操作 与 File 获取文件或文件夹的大小，可读，等属性！！！ 百合不是茶
    类 File File是指文件和目录路径名的抽象表示形式。 1，何为文件： 标准文件（txt doc mp3...） 目录文件（文件夹） 虚拟内存文件   2，File类中有可以创建文件的 createNewFile（）方法,在创建新文件的时候需要try{} catch(）{}因为可能会抛出异常；也有可以判断文件是否是一个标准文件的方法isFile();这些防抖都
  • Spring注入有继承关系的类（2） bijian1013 javaspring
    被注入类的父类有相应的属性，Spring可以直接注入相应的属性，如下所例：1.AClass类 package com.bijian.spring.test4; public class AClass { private String a; private String b; public String getA() { retu
  • 30岁转型期你能否成为成功人士 bijian1013 成长励志
            很多人由于年轻时走了弯路，到了30岁一事无成，这样的例子大有人在。但同样也有一些人，整个职业生涯都发展得很优秀，到了30岁已经成为职场的精英阶层。由于做猎头的原因，我们接触很多30岁左右的经理人，发现他们在职业发展道路上往往有很多致命的问题。在30岁之前，他们的职业生涯表现很优秀，但从30岁到40岁这一段，很多人
  • 【Velocity四】Velocity与Java互操作 bit1129 velocity
    Velocity出现的目的用于简化基于MVC的web应用开发，用于替代JSP标签技术，那么Velocity如何访问Java代码.本篇继续以Velocity三http://bit1129.iteye.com/blog/2106142中的例子为基础，      POJO    package com.tom.servlets; public
  • 【Hive十一】Hive数据倾斜优化 bit1129 hive
    什么是Hive数据倾斜问题   操作：join,group by,count distinct 现象：任务进度长时间维持在99%（或100%），查看任务监控页面，发现只有少量（1个或几个）reduce子任务未完成；查看未完成的子任务，可以看到本地读写数据量积累非常大，通常超过10GB可以认定为发生数据倾斜。 原因：key分布不均匀 倾斜度衡量：平均记录数超过50w且
  • 在nginx中集成lua脚本：添加自定义Http头，封IP等 ronin47 nginx lua csrf
    Lua是一个可以嵌入到Nginx配置文件中的动态脚本语言，从而可以在Nginx请求处理的任何阶段执行各种Lua代码。刚开始我们只是用Lua 把请求路由到后端服务器，但是它对我们架构的作用超出了我们的预期。下面就讲讲我们所做的工作。 强制搜索引擎只索引mixlr.com Google把子域名当作完全独立的网站，我们不希望爬虫抓取子域名的页面，降低我们的Page rank。 location /{
  • java-3.求子数组的最大和 bylijinnan java
    package beautyOfCoding; public class MaxSubArraySum { /** * 3.求子数组的最大和 题目描述： 输入一个整形数组，数组里有正数也有负数。 数组中连续的一个或多个整数组成一个子数组，每个子数组都有一个和。 求所有子数组的和的最大值。要求时间复杂度为O(n)。 例如输入的数组为1, -2, 3, 10, -4,
  • Netty源码学习-FileRegion bylijinnan javanetty
    今天看org.jboss.netty.example.http.file.HttpStaticFileServerHandler.java 可以直接往channel里面写入一个FileRegion对象，而不需要相应的encoder： //pipeline（没有诸如“FileRegionEncoder”的handler）： public ChannelPipeline ge
  • 使用ZeroClipboard解决跨浏览器复制到剪贴板的问题 cngolon 跨浏览器复制到粘贴板Zero Clipboard
    Zero Clipboard的实现原理 Zero Clipboard 利用透明的Flash让其漂浮在复制按钮之上，这样其实点击的不是按钮而是 Flash ，这样将需要的内容传入Flash，再通过Flash的复制功能把传入的内容复制到剪贴板。 Zero Clipboard的安装方法 首先需要下载 Zero Clipboard的压缩包，解压后把文件夹中两个文件：ZeroClipboard.js
  • 单例模式 cuishikuan 单例模式
    第一种（懒汉，线程不安全）： public class Singleton {   2     private static Singleton instance;   3     pri
  • spring+websocket的使用 dalan_123
    一、spring配置文件 <?xml version="1.0" encoding="UTF-8"?><beans xmlns="http://www.springframework.org/schema/beans"    xmlns:xsi="http://www.w3.or
  • 细节问题：ZEROFILL的用法范围。 dcj3sjt126com mysql
    1、zerofill把月份中的一位数字比如1，2，3等加前导0 mysql> CREATE TABLE t1 (year YEAR(4), month INT(2) UNSIGNED ZEROFILL,    -> day
  • Android开发10——Activity的跳转与传值 dcj3sjt126com Android开发
    Activity跳转与传值，主要是通过Intent类，Intent的作用是激活组件和附带数据。   一、Activity跳转 方法一Intent intent = new Intent(A.this, B.class); startActivity(intent)   方法二Intent intent = new Intent();intent.setCla
  • jdbc 得到表结构、主键 eksliang jdbc 得到表结构、主键
    转自博客：http://blog.csdn.net/ocean1010/article/details/7266042 假设有个con DatabaseMetaData dbmd = con.getMetaData(); rs = dbmd.getColumns(con.getCatalog(), schema, tableName, null); rs.getSt
  • Android 应用程序开关GPS gqdy365 android
    要在应用程序中操作GPS开关需要权限： <uses-permission android:name="android.permission.WRITE_SECURE_SETTINGS" /> 但在配置文件中添加此权限之后会报错，无法再eclipse里面正常编译，怎么办？ 1、方法一：将项目放到Android源码中编译； 2、方法二：网上有人说cl
  • Windows上调试MapReduce zhiquanliu mapreduce
    1.下载hadoop2x-eclipse-plugin https://github.com/winghc/hadoop2x-eclipse-plugin.git 把 hadoop2.6.0-eclipse-plugin.jar 放到eclipse plugin 目录中。 2.下载 hadoop2.6_x64_.zip http://dl.iteye.com/topics/download/d2b
  • 如何看待一些知名博客推广软文的行为？ justjavac 博客
    本文来自我在知乎上的一个回答：http://www.zhihu.com/question/23431810/answer/24588621 互联网上的两种典型心态： 当初求种像条狗，如今撸完嫌人丑 当初搜贴像条犬，如今读完嫌人软 你为啥感觉不舒服呢？ 难道非得要作者把自己的劳动成果免费给你用，你才舒服？ 就如同 Google 关闭了 Gooled Reader，那是
  • sql优化总结 macroli sql
    为了是自己对sql优化有更好的原则性，在这里做一下总结，个人原则如有不对请多多指教。谢谢！   要知道一个简单的sql语句执行效率，就要有查看方式，一遍更好的进行优化。   一、简单的统计语句执行时间 declare @d datetime ---定义一个datetime的变量set @d=getdate() ---获取查询语句开始前的时间select user_id
  • Linux Oracle中常遇到的一些问题及命令总结 超声波 oraclelinux
    1.linux更改主机名   (1)#hostname oracledb　　　　临时修改主机名 (2) vi /etc/sysconfig/network 　　修改hostname (3) vi /etc/hosts　　　　　　　　修改IP对应的主机名   2.linux重启oracle实例及监听的各种方法 （注意操作的顺序应该是先监听，后数据库实例） &nbs
  • hive函数大全及使用示例 superlxw1234 hadoophive函数
      具体说明及示例参 见附件文档。     文档目录：   目录 一、关系运算： 4 1. 等值比较: = 4 2. 不等值比较: <> 4 3. 小于比较: < 4 4. 小于等于比较: <= 4 5. 大于比较: > 5 6. 大于等于比较: >= 5 7. 空值判断: IS NULL 5
  • Spring 4.2新特性-使用@Order调整配置类加载顺序 wiselyman spring 4
    4.1 @Order Spring 4.2 利用@Order控制配置类的加载顺序 4.2 演示 两个演示bean package com.wisely.spring4_2.order; public class Demo1Service { } package com.wisely.spring4_2.order; public class
按字母分类： ABCDEFGHIJKLMNOPQRSTUVWXYZ其他