从0到1实现一套CICD流程之CD

理论

实战-主机安装

本次环境搭建需要安装三台linux系统(一主二从),内置Centos7.5系统,然后在每台linux中分别安装docker(18.06.3)、kubeadm(1.18.0)、kubectl(1.18.0)和kubelet(1.18.0)。

基础配置

配置网络

基础配置

DEVICE=ens33
BOOTPROTO=static
IPADDR=192.168.5.101
NETMASK=255.255.255.0
GATEWAY=192.168.5.1
NM_CONTROLLED=no
ONBOOT=yes
TYPE=Ethernet
IPV6INIT=no
DNS1=192.168.5.1

IP分别为

192.168.5.100
192.168.5.101
192.168.5.102
192.168.5.103

配置主机名

hostnamectl set-hostname build
hostnamectl set-hostname master
hostnamectl set-hostname node1
hostnamectl set-hostname node2

主机名分别为

构建机:build
master节点:master
node节点:node1
node节点:node2

配置免密登录

# 将公钥复制到目标主机
ssh-copy-id [email protected]
ssh-copy-id [email protected]
ssh-copy-id [email protected]
ssh-copy-id [email protected]

# 配置~/.ssh/config
Host build
  HostName 192.168.5.100
  User root
  Port 22
  IdentityFile ~/.ssh/id_rsa
Host master
  HostName 192.168.5.101
  User root
  Port 22
  IdentityFile ~/.ssh/id_rsa
Host node1
  HostName 192.168.5.102
  User root
  Port 22
  IdentityFile ~/.ssh/id_rsa
Host node2
  HostName 192.168.5.103
  User root
  Port 22
  IdentityFile ~/.ssh/id_rsa

环境初始化

主机名解析

# 编辑每台服务器的/etc/hosts文件,添加下面内容
vi /etc/hosts

192.168.5.100 build build.devops.com
192.168.5.101 master master.devops.com
192.168.5.102 node1 node1.devops.com
192.168.5.103 node2 node2.devops.com

windows的host配置地址为:C:\Windows\System32\drivers\etc\hosts

192.168.2.100 build build.devops.com
192.168.2.101 master master.devops.com
192.168.2.102 node1 node1.devops.com
192.168.2.103 node2 node2.devops.com

时间同步

# 启动chronyd服务
systemctl start chronyd
# 设置chronyd服务开机自启
systemctl enable chronyd
# chronyd服务启动稍等几秒钟,就可以使用date命令验证时间了
date

禁用iptables和firewalld服务

# 1 关闭firewalld服务
systemctl stop firewalld
systemctl disable firewalld
# 2 关闭iptables服务
systemctl stop iptables
systemctl disable iptables

禁用selinux

# 查看是否开启
getenforce

# 永久关闭selinux,需要重启
sed -i 's/enforcing/disabled/' /etc/selinux/config

禁用swap分区

# 编辑分区配置文件/etc/fstab,注释掉swap分区一行
# 注意修改完毕之后需要重启linux服务
vi /etc/fstab
UUID=455cc753-4c17-a424-7741728c44a1 /boot xfs    defaults    0 0
/dev/mapper/centos-home                    xfs    defaults    0 0
# /dev/mapper/centos-swap swap             swap   defaults    0 0

修改Linux内核参数

# 修改Linux的内核参数,添加网桥过滤和地址转发功能
# 编辑/etc/sysctl.d/kubernetes.conf文件,添加如下配置:
net.bridge.bridge-nf-call-ip6tables = 1
net.bridge.bridge-nf-call-iptables = 1
net.ipv4.ip_forward = 1

# 重新加载配置
sysctl -p

# 加载网桥过滤模块
modprobe br_netfilter

# 查看网桥过滤模块是否加载成功
lsmod | grep br_netfilter

配置ipvs功能

# 1 安装ipset和ipvsadm
yum install ipset ipvsadmin -y

# 2 添加需要加载的模块写入脚本文件
cat < /etc/sysconfig/modules/ipvs.modules
#!/bin/bash
modprobe -- ip_vs
modprobe -- ip_vs_rr
modprobe -- ip_vs_wrr
modprobe -- ip_vs_sh
modprobe -- nf_conntrack_ipv4
EOF

# 3 为脚本文件添加执行权限
chmod +x /etc/sysconfig/modules/ipvs.modules

# 4 执行脚本文件
/bin/bash /etc/sysconfig/modules/ipvs.modules

# 5 查看对应的模块是否加载成功
lsmod | grep -e ip_vs
lsmod | grep -e nf_conntrack_ipv4

重启服务器

reboot

部署k8s v1.18.0

每个节点安装Docker、kubeadm、kubelet和kubectl

安装Docker

# 确保有wget命令
yum install -y wget

wget https://mirrors.aliyun.com/docker-ce/linux/centos/docker-ce.repo -O /etc/yum.repos.d/docker-ce.repo
yum -y install docker-ce-18.06.3.ce-3.el7
systemctl enable docker && systemctl start docker
docker version

设置Docker镜像加速器

sudo mkdir -p /etc/docker
sudo tee /etc/docker/daemon.json <<-'EOF'
{
  "exec-opts": ["native.cgroupdriver=systemd"],    
  "registry-mirrors": ["https://zo8hp0ck.mirror.aliyuncs.com"],    
  "live-restore": true,
  "log-driver":"json-file",
  "log-opts": {"max-size":"500m", "max-file":"3"}
}
EOF
sudo systemctl daemon-reload && sudo systemctl restart docker

添加阿里云的YUM软件源

由于kubernetes的镜像源在国外,非常慢,这里切换成国内的阿里云镜像源

cat > /etc/yum.repos.d/kubernetes.repo << EOF
[kubernetes]
name=Kubernetes
baseurl=https://mirrors.aliyun.com/kubernetes/yum/repos/kubernetes-el7-x86_64
enabled=1
gpgcheck=0
repo_gpgcheck=0
gpgkey=https://mirrors.aliyun.com/kubernetes/yum/doc/yum-key.gpg https://mirrors.aliyun.com/kubernetes/yum/doc/rpm-package-key.gpg
EOF

安装kubeadm、kubelet和kubectl

由于版本更新频繁,这里指定版本号部署

yum install -y kubelet-1.18.0 kubeadm-1.18.0 kubectl-1.18.0

yum install -y kubelet-1.23.6 kubeadm-1.23.6 kubectl-1.23.6

为了实现Docker使用cgroup driver和kubelet使用的cgroup driver一致,建议个性"/etc/sysconfig/kubelet"文件的内容

vi /etc/sysconfig/kubelet
# 修改
KUBELET_EXTRA_ARGS="--cgroup-driver=systemd"
KUBE_PROXY_MODE="ipvs"

设置为开机自启动即可,由于没有生成配置文件,集群初始化后自动启动

systemctl enable kubelet

查看k8s所需镜像

kubeadm config images list

部署k8s的Master节点

部署k8s的Master节点 192.168.2.101

# 由于默认拉取镜像地址k8s.gcr.io国内无法访问,这里需要指定阿里云镜像仓库地址
kubeadm init \
  --apiserver-advertise-address=192.168.2.101 \
  --image-repository registry.aliyuncs.com/google_containers \
  --kubernetes-version v1.18.0 \
  --service-cidr=10.96.0.0/12 \
  --pod-network-cidr=10.244.0.0/16

# v1.23.6
kubeadm init \
  --apiserver-advertise-address=192.168.2.101 \
  --image-repository registry.aliyuncs.com/google_containers \
  --kubernetes-version v1.23.6 \
  --service-cidr=10.96.0.0/12 \
  --pod-network-cidr=10.244.0.0/16

[外链图片转存失败,源站可能有防盗链机制,建议将图片保存下来直接上传(img-5MlHqApa-1666001679982)(images/220927_从0到1实现一套CICD流程之CD第二版/image-20221002004239431.png)]

根据消息提示,在Master节点上使用kubectl工具

mkdir -p $HOME/.kube
sudo cp -i /etc/kubernetes/admin.conf $HOME/.kube/config
sudo chown $(id -u):$(id -g) $HOME/.kube/config

部署k8sNode节点

根据消息提示,在node1和node2上添加如下命令

kubeadm join 192.168.2.101:6443 --token 2da9w5.bug3ufqeq03t1fvv \
    --discovery-token-ca-cert-hash sha256:6a17c546fe1ecb0521eb81a2691d51bfb4602a694264c96cff0f02c03f5f0faf 

默认token有效期为24小时,当过期后,该token就不能用了,这时可以使用如下命令创建token

kubeadm token create --print-join-command

或者用如下命令生成一个永不过期的token

kubeadm token create --ttl 0 --print-join-command

安装网络插件

kubernetes支持多种网络插件,比如flannel、callco、canal等等,任选一种使用即可,本次选择flannel

下面操作依旧只在master节点执行即可,插件使用的是DaemonSet的控制器,它会在每个节点上运行
# 获取flannel的配置文件
wget https://raw.githubusercontent.com/coreos/flannel/master/Documentation/kube-flannel.yml

# 修改文件中quay.io仓库为quay-mirror.qiniu.com

# 使用配置文件启动flannel
kubectl apply -f kube-flannel.yml

# 稍等片刻,再次查看集群节点的状态
kubectl get nodes

从0到1实现一套CICD流程之CD_第1张图片

至此,kubernetes的集群环境搭建完成

服务部署

接下来在kubernetes集群中部署一个nginx程序,测试下集群是否正常工作

# 1 部署nginx
kubectl create deployment nginx --image=nginx:1.14-alpine

# 2 暴露端口
kubectl expose deployment nginx --port=80 --type=NodePort

# 3 查看服务状态
kubectl get pods,svc

# 4 最后在电脑上访问下部署的nginx服务
http://192.168.2.101:30054

从0到1实现一套CICD流程之CD_第2张图片

卸载k8s

# 在卸载K8s组件前,先执行kubeadm reset命令,清空K8s集群设置卸载管理组件
kubeadm reset

# 卸载管理组件
yum erase -y kubelet kubectl kubeadm kubernetes-cni

# docker全部清理
docker rm $(docker ps -a -q)
docker rmi $(docker images -q)

# docker 重启
systemctl daemon-reload
systemctl restart docker
systemctl stop docker service

部署k8s v1.23.6

yum install -y kubelet-1.23.6 kubeadm-1.23.6 kubectl-1.23.6

你可能感兴趣的:(后端)