之前项目要求安装fabric8,在官网,各大博客中浏览无数,发现坑实在太多,特地写下这篇文章,希望对后来想尝试kubernetes和fabric8的同学们有所帮助。
docker是一个开源的容器平台,我们可以粗略的理解为虚拟机,用户使用image挂载一个docker之后,就可以像虚拟机一样访问一个资源,docker相对于虚拟机有很多优势,比如它更加轻量级,更加容易启动和管理等。当然,由于它不算一个完整的虚拟机,和真正虚拟化还是有一定差距的。
Kubernetes (K8s)是一个开源的容器集群管理平台,它在docker的基础上,增加的任务调度和任务部署,docker的单位是一个个images挂载上去的docker容器,而k8s的运行单位则是一个个pod,一个pod可以理解为一个任务,它在一个或者几个机子上启动相同的docker,从而实现任务运行在docker的集群调度和运行。用户不必关心pod到底运行在哪,而只要关心pod是否启动和运行效果即可。
fabric8是个开源的ci工具,通过这个工具,开发者可以在上面进行代码编写,版本管理,测试以及发布等一系列流程。fabric8依赖于k8s,而k8s则依赖于docker,我们的最终目的是搭建一个比较大型的ci开发流程工具网站。
以下搭建过程均运行在ubuntu 16.04版本,如果运行在其它平台上的需求,请查阅相关命令或者联系我。
$ sudo apt-get update
$ sudo apt-get install -y docker.io
$ apt-get update && apt-get install -y apt-transport-https
$ curl -s https://packages.cloud.google.com/apt/doc/apt-key.gpg | apt-key add -
$ cat <<EOF >/etc/apt/sources.list.d/kubernetes.list
> deb http://apt.kubernetes.io/ kubernetes-xenial main
> EOF
$ apt-get update
$ apt-get install -y kubelet kubeadm kubectl
为避免出现安装warning,需要安装如下工具
$ apt-get install ebtables ethtool
$ apt-get update && apt-get upgrade
$ kubeadm init
之后系统回提示你,master设置完成,你可以在其它机子上使用kubeadm设置为node,然后连接master机器,诸如
(other machine to set node)
$ kubeadm join --token <token> <master-ip>:<master-port> --discovery-token-ca-cert-hash sha256:<hash>
查看master是否连接
(master machine)
$ kubectl get nodes
gofabric8是一个官方发布的专门安装fabric8的软件工具,我们使用这个工具安装。
$ curl -sS https://get.fabric8.io/download.txt | bash
$ export PATH=$PATH:$HOME/.fabric8/bin
然后我们使用它部署
$ gofabric8 deploy --domain=xxx
这之后我们就等待它安装docker image就好了,可以使用以下命令在另一个shell里查看
kubectl get pods -n default
之后我们验证是是否安装好并且是否依赖缺少
$ gofabric8 validate
$ gofabric8 volumes
请注意,这里我们需要把RBAC关掉
$ kubectl create clusterrolebinding permissive-binding --clusterrole=cluster-admin --user=admin --user=kubelet --group=system:serviceaccounts
使用gofabric8打开网页端口
$ gofabric8 console
由于这个端口仅仅暴露在k8s集群内部,所以我们需要loadblancer把它暴露到集群外部
$ kubectl expose deployment gofabric8 --type=LoadBalancer --name=myfabric
查看下端口
$ kubectl get service
myfab LoadBalancer 10.98.231.216 9090:32451/TCP,9191:31460/TCP 18h
这时我们访问master所在机器的32451端口就可以了。
由于官方的错误,所以到这里应该有gogs无法启动,我们需要在页面上,找到gogs的配置文件,在containers的前面一行,加入
initContainers:
- name: init
image: busybox
command:
- chmod
- '777'
- /app/gogs/data
resources: {}
volumeMounts:
- name: gogs-data
mountPath: /app/gogs/data
terminationMessagePath: /dev/termination-log
terminationMessagePolicy: File
imagePullPolicy: IfNotPresent
到这里,所有的fabric8就可以在kubernets上运行了。
当然,如果你没有集群条件,我们可以根据官网所说,使用虚拟机安装k8s,在测试环境上使用fabric8。如果你有mac,那么非常简单,使用brew安装gofabric8, 直接使用gofabric8 deploy 部署运行就可以(我觉得这里表示,苹果是亲爸爸)
如果你是用的是其它linux系统,那么就稍微有点麻烦。
首先,需要看下你的电脑是否支持虚拟化
$ egrep '^flags.*(vmx|svm)' /proc/cpuinfo
如果有输出,那么就支持虚拟化。在有虚拟化支持的基础上,你需要根据系统版本安装virtualBOX或者是kvm,下面列出kvm的安装,virtualbox类似
$ sudo apt install libvirt-bin qemu-kvm
$ sudo usermod -a -G libvirtd $(whoami)
$ newgrp libvirtd
$ sudo apt-get install qemu-guest-agent
$ sudo /usr/sbin/kvm-ok
$ ln -s /usr/local/bin/qemu-system-x86_64 /usr/bin/qemu
然后重启它。
之后从官网下载gofabric8和其它软件
$ curl -sS https://get.fabric8.io/download.txt | bash
$ export PATH=$PATH:$HOME/.fabric8/bin
$ sudo gofabric8 start
这时gofabric8会运行一个minikube(一个小型的k8s环境,运行在虚拟机上)。然后由于我们的环境问题,有可能虚拟机无法联网,需要登陆进去更改dns
minikube ssh
$ sudo vi /etc/resolv.conf (change to 144.144.144.144)
虚拟机有时会自动更改dns,我们需要使用一个硬连接防止其更改
$ sudo cp /etc/resolv.conf /etc/init.d/resolv.conf
$ sudo vi /etc/init.d/resolv.conf # change the DNS
$ sudo rm /etc/resolv.conf
$ sudo ln /etc/init.d/resolv.conf /etc/resolv.conf
在虚拟机外部,我们使用gofabric8获取网站入口
$ gofabric8 service fabric8 --url
之后就可以访问了~~