一、准备工作:
三台虚拟机:centos7系统
二、开始安装:
1.设置主机名:
2.修改hosts
3.安装依赖包
yum install -y conntrack ntpdatentp ipvsadm ipset jq iptables curl sysstat libseccomp wget vim net-tools git
4.设置防火墙为Iptables并设置空规则
systemctl stop firewalld
systemctl disable firewalld
yum -y install iptables-services
systemctl start iptables
systemctl enable iptables
service iptables save
5.关闭SELINUX,关闭swap
setenforce 0 && sed -i 's/^SELINUX=.*/SELINUX=disabled/' /etc/selinux/config
swapoff -a && sed -i '/ swap / s/^\(.*\)$/#\1/g' /etc/fstab
6.调整内核参数,对于K8S
cat > kubernetes.conf <
net.bridge.bridge-nf-call-iptables=1 #重要 开启网格模式
net.bridge.bridge-nf-call-ip6tables=1 #重要
net.ipv4.ip_forward=1
net.ipv4.tcp_tw_recycle=0
vm.swappiness=0 #禁止使用swap空间,只有当系统OOM时才允许使用它
vm.overcommit_memory=1 #不检查物理内存是否够用
vm.panic_on_oom=0 #开启OOM
fs.inotify.max_user_instances=8192
fs.inotify.max_user_watches=1048576
fs.file-max=52706963
fs.nr_open=52706963
net.ipv6.conf.all.disable_ipv6=1 #重要,关闭ipv6协议
net.netfilter.nf_conntrack_max=2310720
EOF
cp kubernetes.conf /etc/sysctl.d/kubernetes.conf
sysctl -p /etc/sysctl.d/kubernetes.conf #刷新
刷新时候可能会提示文件不存在,不用管:
7.设置rsyslogd 和system-journald
mkdir /var/log/journal # 持久化保存日志的目录
mkdir /etc/systemd/journald.conf.d
cat > /etc/systemd/journald.conf.d/99-prophet.conf <
[Journal]
# 持久化保存到磁盘
Storage=persistent
# 压缩历史日志
Compress=yes
SyncIntervalSec=5m
RateLimitInterval=30s
RateLimitBurst=1000
# 最大占用空间10G
SystemMaxUse=10G
# 单日志文件最大200M
SystemMaxFileSize=200M
# 日志保存时间2 周
MaxRetentionSec=2week
# 不将日志转发到 syslog
ForwardToSyslog=no
EOF
systemctl restart systemd-journald
8.升级系统内核为4.44
rpm -Uvh http://www.elrepo.org/elrepo-release-7.0-3.el7.elrepo.noarch.rpm
yum --enablerepo=elrepo-kernel install -y kernel-lt
#设置开机从新内核启动
grub2-set-default 'CentOS Linux (4.4.189-1.el7.elrepo.x86_64) 7 (Core)'
完成后 reboot 重启
uname -a 查看内核版本
9.kube-proxy开启ipvs的前置条件
modprobe br_netfilter
cat > /etc/sysconfig/modules/ipvs.modules <
#!/bin/bash
modprobe -- ip_vs
modprobe -- ip_vs_rr
modprobe -- ip_vs_wrr
modprobe -- ip_vs_sh
modprobe -- nf_conntrack_ipv4
EOF
chmod 755 /etc/sysconfig/modules/ipvs.modules&&
bash /etc/sysconfig/modules/ipvs.modules &&
lsmod | grep -e ip_vs -e nf_conntrack_ipv4
10.安装docker软件
yum install -y yum-utils device-mapper-persistent-data lvm2
yum-config-manager --add-repo http://mirrors.aliyun.com/docker-ce/linux/centos/docker-ce.repo
yum update -y && yum install docker-ce-18.09.9-3.el7docker-ce-cli-18.09.9-3.el7 containerd.io
注意:Docker请使用18.09, k8s暂不支持Docker最新版19.x
11.创建 /etc/docker 目录并配置daemon.json
cat > /etc/docker/daemon.json <
{
"registry-mirrors": ["https://xxxxxxxx.mirror.aliyuncs.com"],
"exec-opts": ["native.cgroupdriver=systemd"],
"log-driver": "json-file",
"log-opts": {
"max-size": "100m"
}
}
EOF
mkdir -p /etc/systemd/system/docker.service.d
其中https://xxxxxxxx.mirror.aliyuncs.com为阿里云镜像加速地址, xxxxxxxx需要替换为自己账户中的地址,也可以为其他镜像地址,没有账户的整个删掉不填
12.重启docker服务设置docker开机自启
systemctl daemon-reload && systemctl restart docker && systemctl enable docker
13.安装 Kubeadm
cat < /etc/yum.repos.d/kubernetes.repo
[kubernetes]
name=Kubernetes
baseurl=http://mirrors.aliyun.com/kubernetes/yum/repos/kubernetes-el7-x86_64
enabled=1
gpgcheck=0
repo_gpgcheck=0
gpgkey=http://mirrors.aliyun.com/kubernetes/yum/doc/yum-key.gpghttp://mirrors.aliyun.com/kubernetes/yum/doc/rpm-package-key.gpg
EOF
yum -y install kubeadm kubectl kubelet
systemctl enable kubelet.service
以上为主从节点都需要完成的
14.初始化主节点
kubeadm config print init-defaults > kubeadm-init.yaml
将advertiseAddress修改为自己ip,imageRepository修改为阿里云镜像仓库,运行以下命令
kubeadm init --config=kubeadm-init.yaml | tee kubeadm-init.log
成功后如下图:
mkdir -p $HOME/.kube
sudo cp -i /etc/kubernetes/admin.conf $HOME/.kube/config
sudo chown $(id -u):$(id -g) $HOME/.kube/config
15.部署主节点网络
这里使用calico,giuhub下载 calico.yaml
kubectl apply -f calico.yaml
成功后用:kubectl get pod -n kube-system 查看状态
kubectl get node 列出节点状态信息:
16.从节点加入集群
运行在主节点初始化成功后,输出的信息最后面两句
最后结果:
三、遇到问题
1.couldn’t validate the identity ofthe API Server: abort connecting to API servers after timeout of 5m0s
解决:在master节点上运行 kubeadm token create,得到新的token
2.no route to host
解决: 在主节点上运行 iptables -F
3.cpu核心数没有达到要求
解决: 加