先来思考个问题,新机器跑一个常规springboot项目要几步?
1. 下载并配置java环境、mysql环境,redis环境(6步)
2. 初始化mysql数据库,导入sql文件(2步)
3. 下载jar包,启动(2步)
大概分为零零碎碎的十多步,每块又内容繁杂,而且换一台机器又是一模一样的浪费时间方法,所以今天就介绍利用docker-compose一步完成【基于docker环境(win,linux均可),一条指令完成】。
docker是什么?
基于问题出发简单解释一下,配环境是win10系统里面很痛苦的事情,各种软件各种环境,网上博客鱼目混珠,怎么配置环境,当然是找身边大佬喝杯奶茶,让精通配置安装各种软件的他来帮助你。同时互联网上有很多这样的思想,让专业的人来办专业的事情来节省一些重复又麻烦的事情,例如知识付费,代理找资源,淘宝电脑远程协助服务等等。
而docker的思想就基于上面融入了容器镜像(虚拟机)思想,既然有人配置过了,走过一遍流程,那我直接把他的流程、配置的环境和需要的依赖最小化封装起来(镜像),然后别人使用就直接拿来运行(类似脚本,你执行一次(镜像)就能产生和镜像发布者一样操作的效果),存在容器中,容器又能基于镜像多次创建。这个就是docker。
本文将从零构建属于自己的docker-compose【内含很多大坑】
github仓库链接 【示例项目】
docker-compose一键运行 【示例项目】
Java开发基础,jar包就是封装好的springboot程序,使用java -jar命令启动
maven package即可打包好jar
本文jar包为:face-0.0.1-SNAPSHOT.jar
jar包同目录下创建以下文件
取名 Dockerfile,读写完记得删去后面的txt
# Docker image for springboot file run
# VERSION 1.0.0
# Author: 404name
# 基础镜像使用java
FROM java:8
# 作者
MAINTAINER 404name
# 映射文件
VOLUME /tmp
# 将你的jar包改名为app.jar
ADD face-0.0.1-SNAPSHOT.jar app.jar
# 这里指jar包里面填的端口,才能映射暴露出去
EXPOSE 8080
# 启动脚本
ENTRYPOINT ["java","-Djava.security.egd=file:/dev/./urandom","-jar","/app.jar"]
先要有docker环境【链接】
当前目录下运行
docker build -t your_image_name .
例如
docker build -t 404name/sign-in-system:1.0.0 .
这里404name对应我dockerhub的用户名,后面是仓库名:版本 .点表示当前目录
Docker Hub 登录注册~创建仓库,类似github
docker tag [REPOSITORY]:[TAG] [repo]/[REPOSITORY]:[TAG]
比如你docker id叫 404name创建了叫 sign-in-system的 REPOSITORY仓库 提交版本1.0.0
则:
docker tag 404name/sign-in-system:1.0.0 404name/sign-in-system:1.0.0
docker push 404name/sign-in-system:1.0.0
(之后就能像github一样下载了)
docker pull helloQMX/test:3
看到上面的push和pull是不是已经想到了 git,docker就是使用类似的仓库管理来管理镜像,世界上各地的大佬将他封装的环境发上来,别人要使用就简单 docker pull xxx就能拉去一个复杂的镜像在自己机器上跑。
坑很多,每一步都要理解和照或者优化
基于前面的java:8 jar包镜像已经是公开可以下载的了,这里写脚本添加仓库内的mysql + redis环境
文件目录
├─docker-compose (映射容器文件)
│ ├─mysql
│ │ ├─conf
│ │ │ my.cnf
│ │ │
│ │ └─initdb
│ │ face_sign_in.sql
│ │
│ └─redis
│ redis.conf
│ docker-compose.yml(主脚本)
│ wait-for-it.sh(监听其他服务启动)
wait-for-it.sh(网上开源的监听脚本)
#!/usr/bin/env bash
# Use this script to test if a given TCP host/port are available
WAITFORIT_cmdname=${0##*/}
echoerr() { if [[ $WAITFORIT_QUIET -ne 1 ]]; then echo "$@" 1>&2; fi }
usage()
{
cat << USAGE >&2
Usage:
$WAITFORIT_cmdname host:port [-s] [-t timeout] [-- command args]
-h HOST | --host=HOST Host or IP under test
-p PORT | --port=PORT TCP port under test
Alternatively, you specify the host and port as host:port
-s | --strict Only execute subcommand if the test succeeds
-q | --quiet Don't output any status messages
-t TIMEOUT | --timeout=TIMEOUT
Timeout in seconds, zero for no timeout
-- COMMAND ARGS Execute command with args after the test finishes
USAGE
exit 1
}
wait_for()
{
if [[ $WAITFORIT_TIMEOUT -gt 0 ]]; then
echoerr "$WAITFORIT_cmdname: waiting $WAITFORIT_TIMEOUT seconds for $WAITFORIT_HOST:$WAITFORIT_PORT"
else
echoerr "$WAITFORIT_cmdname: waiting for $WAITFORIT_HOST:$WAITFORIT_PORT without a timeout"
fi
WAITFORIT_start_ts=$(date +%s)
while :
do
if [[ $WAITFORIT_ISBUSY -eq 1 ]]; then
nc -z $WAITFORIT_HOST $WAITFORIT_PORT
WAITFORIT_result=$?
else
(echo -n > /dev/tcp/$WAITFORIT_HOST/$WAITFORIT_PORT) >/dev/null 2>&1
WAITFORIT_result=$?
fi
if [[ $WAITFORIT_result -eq 0 ]]; then
WAITFORIT_end_ts=$(date +%s)
echoerr "$WAITFORIT_cmdname: $WAITFORIT_HOST:$WAITFORIT_PORT is available after $((WAITFORIT_end_ts - WAITFORIT_start_ts)) seconds"
break
fi
sleep 1
done
return $WAITFORIT_result
}
wait_for_wrapper()
{
# In order to support SIGINT during timeout: http://unix.stackexchange.com/a/57692
if [[ $WAITFORIT_QUIET -eq 1 ]]; then
timeout $WAITFORIT_BUSYTIMEFLAG $WAITFORIT_TIMEOUT $0 --quiet --child --host=$WAITFORIT_HOST --port=$WAITFORIT_PORT --timeout=$WAITFORIT_TIMEOUT &
else
timeout $WAITFORIT_BUSYTIMEFLAG $WAITFORIT_TIMEOUT $0 --child --host=$WAITFORIT_HOST --port=$WAITFORIT_PORT --timeout=$WAITFORIT_TIMEOUT &
fi
WAITFORIT_PID=$!
trap "kill -INT -$WAITFORIT_PID" INT
wait $WAITFORIT_PID
WAITFORIT_RESULT=$?
if [[ $WAITFORIT_RESULT -ne 0 ]]; then
echoerr "$WAITFORIT_cmdname: timeout occurred after waiting $WAITFORIT_TIMEOUT seconds for $WAITFORIT_HOST:$WAITFORIT_PORT"
fi
return $WAITFORIT_RESULT
}
# process arguments
while [[ $# -gt 0 ]]
do
case "$1" in
*:* )
WAITFORIT_hostport=(${1//:/ })
WAITFORIT_HOST=${WAITFORIT_hostport[0]}
WAITFORIT_PORT=${WAITFORIT_hostport[1]}
shift 1
;;
--child)
WAITFORIT_CHILD=1
shift 1
;;
-q | --quiet)
WAITFORIT_QUIET=1
shift 1
;;
-s | --strict)
WAITFORIT_STRICT=1
shift 1
;;
-h)
WAITFORIT_HOST="$2"
if [[ $WAITFORIT_HOST == "" ]]; then break; fi
shift 2
;;
--host=*)
WAITFORIT_HOST="${1#*=}"
shift 1
;;
-p)
WAITFORIT_PORT="$2"
if [[ $WAITFORIT_PORT == "" ]]; then break; fi
shift 2
;;
--port=*)
WAITFORIT_PORT="${1#*=}"
shift 1
;;
-t)
WAITFORIT_TIMEOUT="$2"
if [[ $WAITFORIT_TIMEOUT == "" ]]; then break; fi
shift 2
;;
--timeout=*)
WAITFORIT_TIMEOUT="${1#*=}"
shift 1
;;
--)
shift
WAITFORIT_CLI=("$@")
break
;;
--help)
usage
;;
*)
echoerr "Unknown argument: $1"
usage
;;
esac
done
if [[ "$WAITFORIT_HOST" == "" || "$WAITFORIT_PORT" == "" ]]; then
echoerr "Error: you need to provide a host and port to test."
usage
fi
WAITFORIT_TIMEOUT=${WAITFORIT_TIMEOUT:-15}
WAITFORIT_STRICT=${WAITFORIT_STRICT:-0}
WAITFORIT_CHILD=${WAITFORIT_CHILD:-0}
WAITFORIT_QUIET=${WAITFORIT_QUIET:-0}
# Check to see if timeout is from busybox?
WAITFORIT_TIMEOUT_PATH=$(type -p timeout)
WAITFORIT_TIMEOUT_PATH=$(realpath $WAITFORIT_TIMEOUT_PATH 2>/dev/null || readlink -f $WAITFORIT_TIMEOUT_PATH)
WAITFORIT_BUSYTIMEFLAG=""
if [[ $WAITFORIT_TIMEOUT_PATH =~ "busybox" ]]; then
WAITFORIT_ISBUSY=1
# Check if busybox timeout uses -t flag
# (recent Alpine versions don't support -t anymore)
if timeout &>/dev/stdout | grep -q -e '-t '; then
WAITFORIT_BUSYTIMEFLAG="-t"
fi
else
WAITFORIT_ISBUSY=0
fi
if [[ $WAITFORIT_CHILD -gt 0 ]]; then
wait_for
WAITFORIT_RESULT=$?
exit $WAITFORIT_RESULT
else
if [[ $WAITFORIT_TIMEOUT -gt 0 ]]; then
wait_for_wrapper
WAITFORIT_RESULT=$?
else
wait_for
WAITFORIT_RESULT=$?
fi
fi
if [[ $WAITFORIT_CLI != "" ]]; then
if [[ $WAITFORIT_RESULT -ne 0 && $WAITFORIT_STRICT -eq 1 ]]; then
echoerr "$WAITFORIT_cmdname: strict mode, refusing to execute subprocess"
exit $WAITFORIT_RESULT
fi
exec "${WAITFORIT_CLI[@]}"
else
exit $WAITFORIT_RESULT
fi
docker-compose.yml (理解下注释)
version: "3"
# 构建服务
services:
# 第一个服务拉去jar包
webapp:
# 刚刚打包的镜像
image: 404name/sign-in-system:1.0.0
ports:
- "8080:8080"
volumes:
# 本地文件:映射容器文件
- "./wait-for-it.sh:/wait-for-it.sh"
- "/data"
links:
# 创建通道链接服务,这样跨容器就不用找ip了,jar的环境直接使用mysql:3306链接
- mysql:mysql
- redis:redis
# 下面两个创建后执行,但不会等下面两个创建完成再执行,容易产生数据库还没初始化问题
depends_on:
- redis
- mysql
# 等待mysql通就执行jar包,小概率失败,再跑一次就行
command: ./wait-for-it.sh mysql:3306 --timeout=60
redis:
image: redis:latest
restart: always
ports:
- "6379:6379"
volumes:
- ./docker-compose/redis/redis.conf:/etc/redis/redis.conf
command: redis-server /etc/redis/redis.conf
mysql:
image: mysql:5.7
environment:
MYSQL_DATABASE: face_sign_in
MYSQL_USER: face_sign_in
MYSQL_PASSWORD: 123456
MYSQL_ROOT_PASSWORD: 123456
expose:
- 3306
ports:
- 3306:3306
# 为防止中文乱码,加以下启动参数
volumes:
# 启动初始化sql文件
- ./docker-compose/mysql/initdb:/docker-entrypoint-initdb.d/
# db持久化
- mysql_db:/var/lib/mysql
# 防止导入sql文件异常,要指定格式
- ./docker-compose/mysql/conf/my.cnf:/etc/my.cnf
volumes:
mysql_db:
driver: local
my.cnf
[mysqld]
user=mysql
default-storage-engine=INNODB
character-set-server=utf8mb4
[client]
default-character-set=utf8mb4
[mysql]
default-character-set=utf8mb4
redis.conf
bind 0.0.0.0
protected-mode yes
port 6379
tcp-backlog 511
daemonize no
supervised no
pidfile /var/run/redis_6379.pid
loglevel notice
logfile ""
databases 16
always-show-logo yes
save 900 1
save 300 10
save 60 10000
stop-writes-on-bgsave-error yes
rdbcompression yes
rdbchecksum yes
dbfilename dump.rdb
replica-serve-stale-data yes
repl-diskless-sync no
repl-diskless-sync-delay 5
repl-diskless-load disabled
repl-disable-tcp-nodelay no
replica-priority 100
acllog-max-len 128
lazyfree-lazy-eviction no
lazyfree-lazy-expire no
lazyfree-lazy-server-del no
replica-lazy-flush no
lazyfree-lazy-user-del no
oom-score-adj no
oom-score-adj-values 0 200 800
appendonly no
appendfilename "appendonly.aof"
appendfsync everysec
no-appendfsync-on-rewrite no
auto-aof-rewrite-percentage 100
auto-aof-rewrite-min-size 64mb
aof-load-truncated yes
aof-use-rdb-preamble yes
lua-time-limit 5000
slowlog-log-slower-than 10000
slowlog-max-len 128
latency-monitor-threshold 0
notify-keyspace-events ""
hash-max-ziplist-entries 512
hash-max-ziplist-value 64
list-max-ziplist-size -2
list-compress-depth 0
set-max-intset-entries 512
zset-max-ziplist-entries 128
zset-max-ziplist-value 64
hll-sparse-max-bytes 3000
stream-node-max-bytes 4096
stream-node-max-entries 100
activerehashing yes
client-output-buffer-limit normal 0 0 0
client-output-buffer-limit replica 256mb 64mb 60
client-output-buffer-limit pubsub 32mb 8mb 60
hz 10
dynamic-hz yes
aof-rewrite-incremental-fsync yes
rdb-save-incremental-fsync yes
jemalloc-bg-thread yes
3.2.1 jar包启动后找不到mysql数据库
数据库链接地址不管填localhost:3306 还是127.0.0.1都不行。因为容器之间是有自己ip地址的,对外暴露是127.0.0.1:3306但跨容器访问就不能用本地链接了
方式一:找到msql容器ip,然后修改jar包数据库链接
方式二:数据库链接填主机ip地址(适合有公网ip的服务器)
【上面两种都要事先确定ip,换机器就不适合了,所以使用麻烦的方式三】
方式三:自动查询mysql
3.2.2 数据库初始化不完整
需要指定字符集,utf8mb4,配置参考上面my.cnf文件夹和仓库映射
3.2.3 jar包在数据库初始化之前就已经启动了,链接上了数据库,但找不到表
设定启动顺序,使用wait-for-it.sh脚本,指定jar包等mysql:3306响应再启动(但小概率失败,可以再次启动就行了)
至此,就已经全部完成了。
当前文件夹运行 docker-compose up
就能一键完成了(也可以封装成bat,点击运行)。
github慢,dockerhub也慢,你想使用gitee一样使用github就可以试试阿里云镜像托管~
阿里云登录 - 欢迎登录阿里云,安全稳定的云计算服务平台
$ docker login --username=404**** registry.cn-hangzhou.aliyuncs.com
用于登录的用户名为阿里云账号全名,密码为开通服务时设置的密码。
您可以在访问凭证页面修改凭证密码。
$ docker pull registry.cn-hangzhou.aliyuncs.com/404name/test:[镜像版本号]
$ docker login --username=404**** registry.cn-hangzhou.aliyuncs.com``$ docker tag [ImageId] registry.cn-hangzhou.aliyuncs.com/404name/test:[镜像版本号]``$ docker push registry.cn-hangzhou.aliyuncs.com/404name/test:[镜像版本号]
请根据实际镜像信息替换示例中的[ImageId]和[镜像版本号]参数。
从ECS推送镜像时,可以选择使用镜像仓库内网地址。推送速度将得到提升并且将不会损耗您的公网流量。
如果您使用的机器位于经典网络,请使用 registry-internal.cn-hangzhou.aliyuncs.com 作为Registry的域名登录。
如果您使用的机器位于VPC网络,请使用 registry-vpc.cn-hangzhou.aliyuncs.com 作为Registry的域名登录。
使用"docker tag"命令重命名镜像,并将它通过专有网络地址推送至Registry。
$ docker images``REPOSITORY TAG IMAGE ID CREATED VIRTUAL SIZE``registry.aliyuncs.com/acs/agent 0.7-dfb6816 37bb9c63c8b2 7 days ago 37.89 MB``$ docker tag 37bb9c63c8b2 registry-vpc.cn-hangzhou.aliyuncs.com/acs/agent:0.7-dfb6816
使用 "docker push" 命令将该镜像推送至远程。
$ docker push registry-vpc.cn-hangzhou.aliyuncs.com/acs/agent:0.7-dfb6816