使用kubeadm安装kubenetes1.17.3
我们使用centos7的系统，内核升级到5.5.4，为什么使用升级后的内核，这是因为centos7.4的内核是3.10，在docker运行时，有内核bug，导致运行缓慢，出现一堆错误异常，可以查阅我另外一个博客文章。
一、安装前的准备工作
1、系统版本如下：
- Linux cka61.xulinpeng.cn 5.5.4-1.el7.elrepo.x86_64 #1 SMP Thu Feb 13 18:09:18 EST 2020 x86_64 x86_64 x86_64 GNU/Linux
- 系统最低配置为2核cpu，2GB内存，主机名称和MAC地址不能有冲突。
2、iptables不能使用nftables，nftables和kubeadm不兼容，将形成重复的防火墙规则，导致kube-proxy不能正常工作。
update-alternatives --set iptables /usr/sbin/iptables-legacy3、检查端口没有没占用
控制节点
Protocol Direction Port Range Purpose Used By
TCP Inbound 6443* Kubernetes API server All
TCP Inbound 2379-2380 etcd server client API kube-apiserver, etcd
TCP Inbound 10250 Kubelet API Self, Control plane
TCP Inbound 10251 kube-scheduler Self
TCP Inbound 10252 kube-controller-manager Self
工作节点
Protocol Direction Port Range Purpose Used By
TCP Inbound 10250 Kubelet API Self, Control plane
TCP Inbound 30000-32767 NodePort Services† All4、安装必须的工具包，可能会影响k8s正常工作，像nfs工具包不安装将导致pv挂载nfs时出现错误异常。
yum install vim net-tools nfs-utils yum-utils device-mapper-persistent-data lvm2 nfs-utils5、关闭系统防火墙、selinux
[root@cka60 ~]# systemctl stop firewalld && systemctl disable firewalld
Removed symlink /etc/systemd/system/multi-user.target.wants/firewalld.service.
Removed symlink /etc/systemd/system/dbus-org.fedoraproject.FirewallD1.service.
[root@cka60 ~]# setenforce 0
[root@cka60 ~]# sed -i 's/SELINUX=enforcing/SELINUX=disabled/g' /etc/selinux/config
6、关闭
swap，使用swap将会降低k8s性能，fstab中也要注释掉
[root@cka60 ~]# swapoff -a
# /etc/fstab
# Created by anaconda on Mon Feb 17 21:07:54 2020
#
# Accessible filesystems, by reference, are maintained under '/dev/disk'
# See man pages fstab(5), findfs(8), mount(8) and/or blkid(8) for more info
#
UUID=d9c958a2-8f63-47c0-b2e5-1a0478b4b129 / xfs defaults 0 0
UUID=c7c6e317-9cbc-47a8-9491-73eb42af8dc7 /boot xfs defaults 0 0
#UUID=3ba5e597-0689-483f-9058-f58d1273c973 swap swap defaults 0 07、确保 在 sysctl 配置中的 net.bridge.bridge-nf-call-iptables 被设置为 1，防止无法正确路由的问题
cat < /etc/sysctl.d/k8s.conf
net.bridge.bridge-nf-call-ip6tables = 1
net.bridge.bridge-nf-call-iptables = 1
net.bridge.bridge-nf-call-arptables = 1
net.ipv4.ip_forward=1
vm.swappiness=0
vm.overcommit_memory=1
vm.panic_on_oom=0
EOF 8、配置hosts文件
[root@cka60 etc]# cat /etc/hosts
127.0.0.1 localhost localhost.localdomain localhost4 localhost4.localdomain4
::1 localhost localhost.localdomain localhost6 localhost6.localdomain6
192.168.26.60 cka60
192.168.26.61 cka61
192.168.26.62 cka629、配置yum源
#配置docker安装源
[root@cka60 yum.repos.d]# yum-config-manager --add-repo http://mirrors.aliyun.com/docker-ce/linux/centos/docker-ce.repo
Loaded plugins: fastestmirror
adding repo from: http://mirrors.aliyun.com/docker-ce/linux/centos/docker-ce.repo
grabbing file http://mirrors.aliyun.com/docker-ce/linux/centos/docker-ce.repo to /etc/yum.repos.d/docker-ce.repo
repo saved to /etc/yum.repos.d/docker-ce.repo
添加kubernetes安装源
cat >> /etc/yum.repos.d/kubernetes.repo << EOF
[kubernetes]
name=Kubernetes
baseurl=https://mirrors.aliyun.com/kubernetes/yum/repos/kubernetes-el7-x86_64/
enabled=1
gpgcheck=0
EOF二、安装docker
1、docker使用第9步中配置的yum源，最新版是19.03，如果使用centos7.4自带的则是docker1.13版本较低。
[root@cka60 ~]# yum list docker-ce
Loaded plugins: fastestmirror
Loading mirror speeds from cached hostfile
* base: mirrors.aliyun.com
* extras: mirrors.aliyun.com
* updates: mirrors.aliyun.com
Available Packages
docker-ce.x86_64 3:19.03.6-3.el7 docker-ce-stable
[root@cka60 ~]# yum install docker-ce -y2、安装完毕后，启动docker服务，并查看版本，检查是不是正确。
[root@cka60 ~]# systemctl restart docker && systemctl enable docker
Created symlink from /etc/systemd/system/multi-user.target.wants/docker.service to /usr/lib/systemd/system/docker.service.
[root@cka60 ~]# docker version
Client: Docker Engine - Community
Version: 19.03.6
API version: 1.40
Go version: go1.12.16
Git commit: 369ce74a3c
Built: Thu Feb 13 01:29:29 2020
OS/Arch: linux/amd64
Experimental: false
Server: Docker Engine - Community
Engine:
Version: 19.03.6
API version: 1.40 (minimum version 1.12)
Go version: go1.12.16
Git commit: 369ce74a3c
Built: Thu Feb 13 01:28:07 2020
OS/Arch: linux/amd64
Experimental: false
containerd:
Version: 1.2.10
GitCommit: b34a5c8af56e510852c35414db4c1f4fa6172339
runc:
Version: 1.0.0-rc8+dev
GitCommit: 3e425f80a8c931f88e6d94a8c831b9d5aa481657
docker-init:
Version: 0.18.0
GitCommit: fec36833、配置docker国内镜像加速地址，这个是使用阿里云的加速器，国内其他的也可以。
cat /etc/docker/daemon.json
{
"registry-mirrors":["https://ns2wtlx2.mirror.aliyuncs.com"]
}三、安装kubernetes集群
1、安装kubeadm和kubectl、kubelet
这里我没有指定版本。
yum install -y kubelet kubeadm kubectl
如果不指定安装版本，则安装是最新版的，安装完毕后检查版本
[root@cka60 docker]# kubectl version
Client Version: version.Info{Major:"1", Minor:"17", GitVersion:"v1.17.3", GitCommit:"06ad960bfd03b39c8310aaf92d1e7c12ce618213", GitTreeState:"clean", BuildDate:"2020-02-11T18:14:22Z", GoVersion:"go1.13.6", Compiler:"gc", Platform:"linux/amd64"}
The connection to the server localhost:8080 was refused - did you specify the right host or port?
[root@cka60 docker]# kubeadm version
kubeadm version: &version.Info{Major:"1", Minor:"17", GitVersion:"v1.17.3", GitCommit:"06ad960bfd03b39c8310aaf92d1e7c12ce618213", GitTreeState:"clean", BuildDate:"2020-02-11T18:12:12Z", GoVersion:"go1.13.6", Compiler:"gc", Platform:"linux/amd64"}
kubelet就不要看版本了。直接设置为服务就可以了
systemctl enable kubelet2、裂变从节点
由于我是在虚拟机中安装练习，而主节点、从节点以上步骤均一致，无需重复安装，因此有个小技巧，可以从这一步，将虚拟机进行克隆，复制出从节点来，该节点为master节点。
3、初始化主节点
kubeadm init --image-repository=registry.aliyuncs.com/google_containers --kubernetes-version=v1.17.0 --pod-network-cidr=10.244.0.0/16--image-repository指定使用的仓库地址，如果不指定国内仓库，则下载镜像非常缓慢，只能通过导入image的方式，导入节点仓库，而我们指定了阿里的镜像仓库，不需要手工导入image。
--kubernetes-version指定安装的版本
--pod-network-cidr集群pod的ip地址范围
其余使用默认参数，结果大约有3~5分钟
Your Kubernetes control-plane has initialized successfully!
To start using your cluster, you need to run the following as a regular user:
mkdir -p $HOME/.kube
sudo cp -i /etc/kubernetes/admin.conf $HOME/.kube/config
sudo chown $(id -u):$(id -g) $HOME/.kube/config
You should now deploy a pod network to the cluster.
Run "kubectl apply -f [podnetwork].yaml" with one of the options listed at:
https://kubernetes.io/docs/concepts/cluster-administration/addons/
Then you can join any number of worker nodes by running the following on each as root:
kubeadm join 192.168.26.60:6443 --token 1cby7t.a7nngscv38au0a5v \
--discovery-token-ca-cert-hash sha256:bb84b80364c8ff7795cb33e3c1c1bb46078503d9a57f25045dd671c8dc991f02至此说明已经安装成功了。
4、加入从节点
从节点依次执行
kubeadm join 192.168.26.60:6443 --token 1cby7t.a7nngscv38au0a5v \
--discovery-token-ca-cert-hash sha256:bb84b80364c8ff7795cb33e3c1c1bb46078503d9a57f25045dd671c8dc991f02
一定要根据自己的机器去处理。5、调整kubectl配置
要将kube的配置文件放到home目录下，才可以正常使用kubectl，否则出现端口错误提示
[root@cka61 ~]# kubectl get nodes
The connection to the server localhost:8080 was refused - did you specify the right host or port?mkdir -p $HOME/.kube
sudo cp -i /etc/kubernetes/admin.conf $HOME/.kube/config
sudo chown $(id -u):$(id -g) $HOME/.kube/config6、检查节点状态
可以看到节点都是NotReady状态，进一步检查pod的状态，发现coredns节点没启动，错误信息为node节点都被taint，真正原因是没有安装网络插件。
[root@cka60 ~]# kubectl get nodes
NAME STATUS ROLES AGE VERSION
cka60.xulinpeng.cn NotReady master 3m2s v1.17.3
cka61.xulinpeng.cn NotReady 90s v1.17.3
cka62.xulinpeng.cn NotReady 15s v1.17.3 7、安装网络插件
我们安装的网络插件是flannel，如果安装calico，需要将yaml文件中的pod地址端配置改一下，和kubeadm中配置的一致。
CALICO_IPV4POOL_CIDR
value: "192.168.0.0/16"先将flannel的yaml文件下载下来，检查一下使用的镜像image
wget
https://raw.githubusercontent.com/coreos/flannel/2140ac876ef134e0ed5af15c65e414cf26827915/Documentation/kube-flannel.yml
grep image kube-flannel.yml
image: quay.io/coreos/flannel:v0.11.0-amd64
image: quay.io/coreos/flannel:v0.11.0-amd64
image: quay.io/coreos/flannel:v0.11.0-arm64
image: quay.io/coreos/flannel:v0.11.0-arm64
image: quay.io/coreos/flannel:v0.11.0-arm
image: quay.io/coreos/flannel:v0.11.0-arm
image: quay.io/coreos/flannel:v0.11.0-ppc64le
image: quay.io/coreos/flannel:v0.11.0-ppc64le
image: quay.io/coreos/flannel:v0.11.0-s390x
image: quay.io/coreos/flannel:v0.11.0-s390x只需要下载镜像即可quay.io/coreos/flannel:v0.11.0-arm64，这个镜像也在国外，即便使用代理下载也不是很容易，而国内需要去镜像仓库找，大部分需要注册账号才能使用，我把这个镜像做成flannel-0.11.tar包，放到资源里面，需要的时候，下载导入就可以了。
docker load -i flannel-0.11.tar
kubectl apply -f kube-flannel.yml这时候再检查node状态，全部都正常了。
[root@cka60 ~]# kubectl get nodes
NAME STATUS ROLES AGE VERSION
cka60.xulinpeng.cn Ready master 19h v1.17.3
cka61.xulinpeng.cn Ready 19h v1.17.3
cka62.xulinpeng.cn Ready 19h v1.17.3