理论
实战-主机安装
本次环境搭建需要安装三台linux系统(一主二从),内置Centos7.5系统,然后在每台linux中分别安装docker(18.06.3)、kubeadm(1.18.0)、kubectl(1.18.0)和kubelet(1.18.0)。
基础配置
配置网络
基础配置
DEVICE=ens33
BOOTPROTO=static
IPADDR=192.168.5.101
NETMASK=255.255.255.0
GATEWAY=192.168.5.1
NM_CONTROLLED=no
ONBOOT=yes
TYPE=Ethernet
IPV6INIT=no
DNS1=192.168.5.1
IP分别为
192.168.5.100
192.168.5.101
192.168.5.102
192.168.5.103
配置主机名
hostnamectl set-hostname build
hostnamectl set-hostname master
hostnamectl set-hostname node1
hostnamectl set-hostname node2
主机名分别为
构建机:build
master节点:master
node节点:node1
node节点:node2
配置免密登录
# 将公钥复制到目标主机
ssh-copy-id [email protected]
ssh-copy-id [email protected]
ssh-copy-id [email protected]
ssh-copy-id [email protected]
# 配置~/.ssh/config
Host build
HostName 192.168.5.100
User root
Port 22
IdentityFile ~/.ssh/id_rsa
Host master
HostName 192.168.5.101
User root
Port 22
IdentityFile ~/.ssh/id_rsa
Host node1
HostName 192.168.5.102
User root
Port 22
IdentityFile ~/.ssh/id_rsa
Host node2
HostName 192.168.5.103
User root
Port 22
IdentityFile ~/.ssh/id_rsa
环境初始化
主机名解析
# 编辑每台服务器的/etc/hosts文件,添加下面内容
vi /etc/hosts
192.168.5.100 build build.devops.com
192.168.5.101 master master.devops.com
192.168.5.102 node1 node1.devops.com
192.168.5.103 node2 node2.devops.com
windows的host配置地址为:C:\Windows\System32\drivers\etc\hosts
192.168.2.100 build build.devops.com
192.168.2.101 master master.devops.com
192.168.2.102 node1 node1.devops.com
192.168.2.103 node2 node2.devops.com
时间同步
# 启动chronyd服务
systemctl start chronyd
# 设置chronyd服务开机自启
systemctl enable chronyd
# chronyd服务启动稍等几秒钟,就可以使用date命令验证时间了
date
禁用iptables和firewalld服务
# 1 关闭firewalld服务
systemctl stop firewalld
systemctl disable firewalld
# 2 关闭iptables服务
systemctl stop iptables
systemctl disable iptables
禁用selinux
# 查看是否开启
getenforce
# 永久关闭selinux,需要重启
sed -i 's/enforcing/disabled/' /etc/selinux/config
禁用swap分区
# 编辑分区配置文件/etc/fstab,注释掉swap分区一行
# 注意修改完毕之后需要重启linux服务
vi /etc/fstab
UUID=455cc753-4c17-a424-7741728c44a1 /boot xfs defaults 0 0
/dev/mapper/centos-home xfs defaults 0 0
# /dev/mapper/centos-swap swap swap defaults 0 0
修改Linux内核参数
# 修改Linux的内核参数,添加网桥过滤和地址转发功能
# 编辑/etc/sysctl.d/kubernetes.conf文件,添加如下配置:
net.bridge.bridge-nf-call-ip6tables = 1
net.bridge.bridge-nf-call-iptables = 1
net.ipv4.ip_forward = 1
# 重新加载配置
sysctl -p
# 加载网桥过滤模块
modprobe br_netfilter
# 查看网桥过滤模块是否加载成功
lsmod | grep br_netfilter
配置ipvs功能
# 1 安装ipset和ipvsadm
yum install ipset ipvsadmin -y
# 2 添加需要加载的模块写入脚本文件
cat < /etc/sysconfig/modules/ipvs.modules
#!/bin/bash
modprobe -- ip_vs
modprobe -- ip_vs_rr
modprobe -- ip_vs_wrr
modprobe -- ip_vs_sh
modprobe -- nf_conntrack_ipv4
EOF
# 3 为脚本文件添加执行权限
chmod +x /etc/sysconfig/modules/ipvs.modules
# 4 执行脚本文件
/bin/bash /etc/sysconfig/modules/ipvs.modules
# 5 查看对应的模块是否加载成功
lsmod | grep -e ip_vs
lsmod | grep -e nf_conntrack_ipv4
重启服务器
reboot
部署k8s v1.18.0
每个节点安装Docker、kubeadm、kubelet和kubectl
安装Docker
# 确保有wget命令
yum install -y wget
wget https://mirrors.aliyun.com/docker-ce/linux/centos/docker-ce.repo -O /etc/yum.repos.d/docker-ce.repo
yum -y install docker-ce-18.06.3.ce-3.el7
systemctl enable docker && systemctl start docker
docker version
设置Docker镜像加速器
sudo mkdir -p /etc/docker
sudo tee /etc/docker/daemon.json <<-'EOF'
{
"exec-opts": ["native.cgroupdriver=systemd"],
"registry-mirrors": ["https://zo8hp0ck.mirror.aliyuncs.com"],
"live-restore": true,
"log-driver":"json-file",
"log-opts": {"max-size":"500m", "max-file":"3"}
}
EOF
sudo systemctl daemon-reload && sudo systemctl restart docker
添加阿里云的YUM软件源
由于kubernetes的镜像源在国外,非常慢,这里切换成国内的阿里云镜像源
cat > /etc/yum.repos.d/kubernetes.repo << EOF
[kubernetes]
name=Kubernetes
baseurl=https://mirrors.aliyun.com/kubernetes/yum/repos/kubernetes-el7-x86_64
enabled=1
gpgcheck=0
repo_gpgcheck=0
gpgkey=https://mirrors.aliyun.com/kubernetes/yum/doc/yum-key.gpg https://mirrors.aliyun.com/kubernetes/yum/doc/rpm-package-key.gpg
EOF
安装kubeadm、kubelet和kubectl
由于版本更新频繁,这里指定版本号部署
yum install -y kubelet-1.18.0 kubeadm-1.18.0 kubectl-1.18.0
yum install -y kubelet-1.23.6 kubeadm-1.23.6 kubectl-1.23.6
为了实现Docker使用cgroup driver和kubelet使用的cgroup driver一致,建议个性"/etc/sysconfig/kubelet"文件的内容
vi /etc/sysconfig/kubelet
# 修改
KUBELET_EXTRA_ARGS="--cgroup-driver=systemd"
KUBE_PROXY_MODE="ipvs"
设置为开机自启动即可,由于没有生成配置文件,集群初始化后自动启动
systemctl enable kubelet
查看k8s所需镜像
kubeadm config images list
部署k8s的Master节点
部署k8s的Master节点 192.168.2.101
# 由于默认拉取镜像地址k8s.gcr.io国内无法访问,这里需要指定阿里云镜像仓库地址
kubeadm init \
--apiserver-advertise-address=192.168.2.101 \
--image-repository registry.aliyuncs.com/google_containers \
--kubernetes-version v1.18.0 \
--service-cidr=10.96.0.0/12 \
--pod-network-cidr=10.244.0.0/16
# v1.23.6
kubeadm init \
--apiserver-advertise-address=192.168.2.101 \
--image-repository registry.aliyuncs.com/google_containers \
--kubernetes-version v1.23.6 \
--service-cidr=10.96.0.0/12 \
--pod-network-cidr=10.244.0.0/16
[外链图片转存失败,源站可能有防盗链机制,建议将图片保存下来直接上传(img-5MlHqApa-1666001679982)(images/220927_从0到1实现一套CICD流程之CD第二版/image-20221002004239431.png)]
根据消息提示,在Master节点上使用kubectl工具
mkdir -p $HOME/.kube
sudo cp -i /etc/kubernetes/admin.conf $HOME/.kube/config
sudo chown $(id -u):$(id -g) $HOME/.kube/config
部署k8sNode节点
根据消息提示,在node1和node2上添加如下命令
kubeadm join 192.168.2.101:6443 --token 2da9w5.bug3ufqeq03t1fvv \
--discovery-token-ca-cert-hash sha256:6a17c546fe1ecb0521eb81a2691d51bfb4602a694264c96cff0f02c03f5f0faf
默认token有效期为24小时,当过期后,该token就不能用了,这时可以使用如下命令创建token
kubeadm token create --print-join-command
或者用如下命令生成一个永不过期的token
kubeadm token create --ttl 0 --print-join-command
安装网络插件
kubernetes支持多种网络插件,比如flannel、callco、canal等等,任选一种使用即可,本次选择flannel
下面操作依旧只在master节点执行即可,插件使用的是DaemonSet的控制器,它会在每个节点上运行
# 获取flannel的配置文件
wget https://raw.githubusercontent.com/coreos/flannel/master/Documentation/kube-flannel.yml
# 修改文件中quay.io仓库为quay-mirror.qiniu.com
# 使用配置文件启动flannel
kubectl apply -f kube-flannel.yml
# 稍等片刻,再次查看集群节点的状态
kubectl get nodes
至此,kubernetes的集群环境搭建完成
服务部署
接下来在kubernetes集群中部署一个nginx程序,测试下集群是否正常工作
# 1 部署nginx
kubectl create deployment nginx --image=nginx:1.14-alpine
# 2 暴露端口
kubectl expose deployment nginx --port=80 --type=NodePort
# 3 查看服务状态
kubectl get pods,svc
# 4 最后在电脑上访问下部署的nginx服务
http://192.168.2.101:30054
卸载k8s
# 在卸载K8s组件前,先执行kubeadm reset命令,清空K8s集群设置卸载管理组件
kubeadm reset
# 卸载管理组件
yum erase -y kubelet kubectl kubeadm kubernetes-cni
# docker全部清理
docker rm $(docker ps -a -q)
docker rmi $(docker images -q)
# docker 重启
systemctl daemon-reload
systemctl restart docker
systemctl stop docker service
部署k8s v1.23.6
yum install -y kubelet-1.23.6 kubeadm-1.23.6 kubectl-1.23.6