k8s集群搭建

简介

k8s集群有两种方式

方式	优势	缺点
kubeadm	简单、快速	无法更好的理解k8s各个组件之间的关系
二进制包安装	繁琐、复杂	可能更好的理解k8s集群组件的关系

并且集群也分为简单版和复杂版，此教程采用kubeadm快速搭建一个简单集群（只有一个maste节点，两个工作节点）

机器规划

注：机器至少是2核2G的配置

机器可以是虚拟机、也可以是三台物理机器。我使用的是三台centos7的虚拟机！

hostname	ip地址	用途
server130	192.168.73.130	master节点
server131	192.168.73.131	node1节点
server132	192.168.73.132	node2节点

搭建教程

除特别说明外，以下命令需在三台机器中都执行，建议找一个可以同时在多台机器中执行命令的工具（mac环境下可以使用item2）

1、配置机器的host文件

vi /etc/hosts
#添加如下内容
192.168.73.130 master
192.168.73.131 node1
192.168.73.132 node2

执行ping master 看配置是否成功

2、禁用防火墙

#docker会产生很多端口规则，为了引起不必要的麻烦，自己关闭掉（反正这个环境只是学习使用的，生成环境不要这么做）
systemctl stop firewalld
systemctl disable firewalld
systemctl stop iptables
systemctl disable iptables

3、禁用linux系统的安全服务
selinux是linux下的一个安全服务，安装软件会产生各种奇葩问题，直接禁用掉

vi /etc/selinux/config
#设置如下内容
SELINUX=disabled

4、禁用swap分区
作用是在物理内存使用完之后虚拟磁盘空间作为内存使用，开启此会产生性能影响，在搭建k8s集群的时候如果开启的话还需要特别说明

vi /etc/fstab
#注释最后一行(/dev/mapper/centos-swap swap                    swap    defaults        0 0)

5、修改linux内核参数

#修改linux内核参数，添加网桥过滤和地址转发功能
vi /etc/sysctl.d/kubernetes.conf
# 添加如下配置
net.bridge.bridge-nf-call-ip6tables = 1
net.bridge.bridge-nf-call-iptables = 1
net.ipv4.ip_forward = 1

#  重新加载配置
sysctl -p
#加载网桥过滤模块
modprobe br_netfilter
# 查看网桥过滤模块是否加载成功
lsmod|grep br_netfilter

6、配置ipvs功能

#安装ipset、ipvsadm
yum -y install ipset ipvsadm
#添加需要加载的模块，写入到脚本文件中
vi /etc/sysconfig/modules/ipvs.modules
#内容如下
#!/bin/bash
modprobe -- ip_vs
modprobe -- ip_vs_rr
modprobe -- ip_vs_wrr
modprobe -- ip_vs_sh
modprobe -- nf_conntrack_ipv4

#为脚本文件添加执行权限
chmod +x /etc/sysconfig/modules/ipvs.modules
#执行脚本文件
/bin/bash /etc/sysconfig/modules/ipvs.modules
#查询对应模块是否加载成功
lsmod |grep -e ip_vs -e nf_conntrack_ipv4

7、安装docker
已经安装过了就跳过

参考centos安装docker的官方文档

sudo yum install -y yum-utils
sudo yum-config-manager --add-repo https://download.docker.com/linux/centos/docker-ce.repo
sudo yum install docker-ce docker-ce-cli containerd.io
sudo systemctl start docker
sudo docker run hello-world
#配置docker的仓库镜像地址
vi /etc/docker/daemon.json
#内容如下
{
  "exec-opts":["native.cgroupdriver=systemd"],
  "registry-mirrors": ["https://39dvdikp.mirror.aliyuncs.com"]
}

8、统一重启服务器

reboot

9、安装k8s组件

#配置kubernetes的镜像源
cat > /etc/yum.repos.d/kubernetes.repo << EOF
[kubernetes]
name=Kubernetes
baseurl=https://mirrors.aliyun.com/kubernetes/yum/repos/kubernetes-el7-x86_64
enabled=1
gpgcheck=0
repo_gpgcheck=0
gpgkey=https://mirrors.aliyun.com/kubernetes/yum/doc/yum-key.gpg https://mirrors.aliyun.com/kubernetes/yum/doc/rpm-package-key.gpg
EOF

#安装kubernetes的相关组件
yum -y install kubeadm kubelet kubectl

#配置kubelet的cgroup
vi /etc/sysconfig/kubelet
#内容如下
KUBELET_CGROUP_ARGS="--cgroup-driver=systemd"
KUBE_PROXY_MODE="ipvs"

#设置为开机自启动并启动 
systemctl enable kubelet

10、集群初始化（仅在master上执行）

#apiserver-advertise-address为master的ip地址
#kubernetes-version为当前一步安装的k8s的版本(kubectl version查看安装的k8s组件版本)
kubeadm init \
--apiserver-advertise-address=192.168.73.130 \
--image-repository registry.aliyuncs.com/google_containers \
--kubernetes-version v1.22.2 \
--service-cidr=10.1.0.0/16 \
--pod-network-cidr=10.244.0.0/16 \
--ignore-preflight-errors=all  \
--v=6

最后出现Your Kubernetes control-plane has initialized successfully!内容则表示集群初始化成功。最后按照安装成功后的提示语执行一些命令即可。
注意：在加入节点之前需要先在master上安装网络组件

image.png

11、安装网络组件（仅在master上执行）

kubectl apply -f https://docs.projectcalico.org/manifests/calico.yaml

12、将其他节点加入到集群中（在非master节点上执行）

# 这个命令在集群初始化成功后会提示 拷贝自己对应的命令执行即可
kubeadm join 172.16.255.130:6443 --token adyqwv.wj3x6lkok9xy1gg2 \
    --discovery-token-ca-cert-hash sha256:a00f68126fa6afaee5bd77db5a2f389f0a8b4a3ef9d961814f2babf2f815c9ba

13、测试（仅在master上执行）

kubectl create deployment nginx --image=nginx
kubectl expose deployment nginx --port=80 --type=NodePort
kubectl get pod,svc 
#在 web 浏览器输入以下地址，会返回 nginx 欢迎界面
http://192.168.73.130:32409/ (该端口为kubectl get pod,svc命令获取)

结束