【docker-compose】从构建镜像到一键运行Java项目

【docker-compose】从构建镜像到一键运行Java项目_第1张图片

先来思考个问题,新机器跑一个常规springboot项目要几步?

1. 下载并配置java环境、mysql环境,redis环境(6步)

2. 初始化mysql数据库,导入sql文件(2步)

3. 下载jar包,启动(2步)

大概分为零零碎碎的十多步,每块又内容繁杂,而且换一台机器又是一模一样的浪费时间方法,所以今天就介绍利用docker-compose一步完成【基于docker环境(win,linux均可),一条指令完成】。

docker是什么?

基于问题出发简单解释一下,配环境是win10系统里面很痛苦的事情,各种软件各种环境,网上博客鱼目混珠,怎么配置环境,当然是找身边大佬喝杯奶茶,让精通配置安装各种软件的他来帮助你。同时互联网上有很多这样的思想,让专业的人来办专业的事情来节省一些重复又麻烦的事情,例如知识付费,代理找资源,淘宝电脑远程协助服务等等。

docker的思想就基于上面融入了容器镜像(虚拟机)思想,既然有人配置过了,走过一遍流程,那我直接把他的流程、配置的环境和需要的依赖最小化封装起来(镜像),然后别人使用就直接拿来运行(类似脚本,你执行一次(镜像)就能产生和镜像发布者一样操作的效果),存在容器中,容器又能基于镜像多次创建。这个就是docker。

本文将从零构建属于自己的docker-compose【内含很多大坑】

github仓库链接 【示例项目】

docker-compose一键运行 【示例项目】

  • 如何构建自己的镜像,和仓库?
    • springboot项目打包,基于jdk8创建镜像
    • 给镜像打tag,上传dockerhub仓库
  • docker-compose构建以及各种环境问题解决。
    • 创建docker-compose文件
    • 拉取jar包镜像-拉取mysql镜像-拉取redis镜像
    • 容器初始化顺序问题解决
    • jar包跨容器访问数据库失败

1. 创建jar包镜像

1.1 idea将springboot项目打包成Jar包

Java开发基础,jar包就是封装好的springboot程序,使用java -jar命令启动

maven package即可打包好jar

本文jar包为:face-0.0.1-SNAPSHOT.jar

1.2 创建镜像

jar包同目录下创建以下文件

取名 Dockerfile,读写完记得删去后面的txt

# Docker image for springboot file run
# VERSION 1.0.0
# Author: 404name
# 基础镜像使用java
FROM java:8
# 作者
MAINTAINER 404name
# 映射文件
VOLUME /tmp
# 将你的jar包改名为app.jar
ADD face-0.0.1-SNAPSHOT.jar app.jar
# 这里指jar包里面填的端口,才能映射暴露出去
EXPOSE 8080
# 启动脚本
ENTRYPOINT ["java","-Djava.security.egd=file:/dev/./urandom","-jar","/app.jar"]

1.3 构建镜像

先要有docker环境【链接】

当前目录下运行

docker build -t your_image_name .

例如

docker build -t 404name/sign-in-system:1.0.0 .

这里404name对应我dockerhub的用户名,后面是仓库名:版本 .点表示当前目录

2. 提交镜像

2.1 创建仓库

Docker Hub 登录注册~创建仓库,类似github

【docker-compose】从构建镜像到一键运行Java项目_第2张图片

2.2 给镜像打标签

docker tag [REPOSITORY]:[TAG] [repo]/[REPOSITORY]:[TAG]

比如你docker id叫 404name创建了叫 sign-in-system的 REPOSITORY仓库 提交版本1.0.0

则:docker tag 404name/sign-in-system:1.0.0 404name/sign-in-system:1.0.0

2.3 docker login后提交

docker push 404name/sign-in-system:1.0.0

【docker-compose】从构建镜像到一键运行Java项目_第3张图片

(之后就能像github一样下载了)

docker pull helloQMX/test:3

看到上面的push和pull是不是已经想到了 git,docker就是使用类似的仓库管理来管理镜像,世界上各地的大佬将他封装的环境发上来,别人要使用就简单 docker pull xxx就能拉去一个复杂的镜像在自己机器上跑。

3. docker-compose脚本编写

坑很多,每一步都要理解和照或者优化

基于前面的java:8 jar包镜像已经是公开可以下载的了,这里写脚本添加仓库内的mysql + redis环境

  1. 创建docker-compose.yml编写内容
  2. 同级创建文件夹docker-compose
  1. 下级创建/mysql/initdb/xxx.sql 。放入初始化sql文件
  2. 下级创建/redis/redis.conf,写入配置如下

3.1 配置内容

文件目录

├─docker-compose (映射容器文件)
│  ├─mysql
│  │  ├─conf
│  │  │      my.cnf
│  │  │
│  │  └─initdb
│  │          face_sign_in.sql
│  │
│  └─redis
│          redis.conf
│  docker-compose.yml(主脚本)
│  wait-for-it.sh(监听其他服务启动)

wait-for-it.sh(网上开源的监听脚本)

#!/usr/bin/env bash
# Use this script to test if a given TCP host/port are available

WAITFORIT_cmdname=${0##*/}

echoerr() { if [[ $WAITFORIT_QUIET -ne 1 ]]; then echo "$@" 1>&2; fi }

usage()
{
    cat << USAGE >&2
Usage:
    $WAITFORIT_cmdname host:port [-s] [-t timeout] [-- command args]
    -h HOST | --host=HOST       Host or IP under test
    -p PORT | --port=PORT       TCP port under test
                                Alternatively, you specify the host and port as host:port
    -s | --strict               Only execute subcommand if the test succeeds
    -q | --quiet                Don't output any status messages
    -t TIMEOUT | --timeout=TIMEOUT
                                Timeout in seconds, zero for no timeout
    -- COMMAND ARGS             Execute command with args after the test finishes
USAGE
    exit 1
}

wait_for()
{
    if [[ $WAITFORIT_TIMEOUT -gt 0 ]]; then
        echoerr "$WAITFORIT_cmdname: waiting $WAITFORIT_TIMEOUT seconds for $WAITFORIT_HOST:$WAITFORIT_PORT"
    else
        echoerr "$WAITFORIT_cmdname: waiting for $WAITFORIT_HOST:$WAITFORIT_PORT without a timeout"
    fi
    WAITFORIT_start_ts=$(date +%s)
    while :
    do
        if [[ $WAITFORIT_ISBUSY -eq 1 ]]; then
            nc -z $WAITFORIT_HOST $WAITFORIT_PORT
            WAITFORIT_result=$?
        else
            (echo -n > /dev/tcp/$WAITFORIT_HOST/$WAITFORIT_PORT) >/dev/null 2>&1
            WAITFORIT_result=$?
        fi
        if [[ $WAITFORIT_result -eq 0 ]]; then
            WAITFORIT_end_ts=$(date +%s)
            echoerr "$WAITFORIT_cmdname: $WAITFORIT_HOST:$WAITFORIT_PORT is available after $((WAITFORIT_end_ts - WAITFORIT_start_ts)) seconds"
            break
        fi
        sleep 1
    done
    return $WAITFORIT_result
}

wait_for_wrapper()
{
    # In order to support SIGINT during timeout: http://unix.stackexchange.com/a/57692
    if [[ $WAITFORIT_QUIET -eq 1 ]]; then
        timeout $WAITFORIT_BUSYTIMEFLAG $WAITFORIT_TIMEOUT $0 --quiet --child --host=$WAITFORIT_HOST --port=$WAITFORIT_PORT --timeout=$WAITFORIT_TIMEOUT &
    else
        timeout $WAITFORIT_BUSYTIMEFLAG $WAITFORIT_TIMEOUT $0 --child --host=$WAITFORIT_HOST --port=$WAITFORIT_PORT --timeout=$WAITFORIT_TIMEOUT &
    fi
    WAITFORIT_PID=$!
    trap "kill -INT -$WAITFORIT_PID" INT
    wait $WAITFORIT_PID
    WAITFORIT_RESULT=$?
    if [[ $WAITFORIT_RESULT -ne 0 ]]; then
        echoerr "$WAITFORIT_cmdname: timeout occurred after waiting $WAITFORIT_TIMEOUT seconds for $WAITFORIT_HOST:$WAITFORIT_PORT"
    fi
    return $WAITFORIT_RESULT
}

# process arguments
while [[ $# -gt 0 ]]
do
    case "$1" in
        *:* )
        WAITFORIT_hostport=(${1//:/ })
        WAITFORIT_HOST=${WAITFORIT_hostport[0]}
        WAITFORIT_PORT=${WAITFORIT_hostport[1]}
        shift 1
        ;;
        --child)
        WAITFORIT_CHILD=1
        shift 1
        ;;
        -q | --quiet)
        WAITFORIT_QUIET=1
        shift 1
        ;;
        -s | --strict)
        WAITFORIT_STRICT=1
        shift 1
        ;;
        -h)
        WAITFORIT_HOST="$2"
        if [[ $WAITFORIT_HOST == "" ]]; then break; fi
        shift 2
        ;;
        --host=*)
        WAITFORIT_HOST="${1#*=}"
        shift 1
        ;;
        -p)
        WAITFORIT_PORT="$2"
        if [[ $WAITFORIT_PORT == "" ]]; then break; fi
        shift 2
        ;;
        --port=*)
        WAITFORIT_PORT="${1#*=}"
        shift 1
        ;;
        -t)
        WAITFORIT_TIMEOUT="$2"
        if [[ $WAITFORIT_TIMEOUT == "" ]]; then break; fi
        shift 2
        ;;
        --timeout=*)
        WAITFORIT_TIMEOUT="${1#*=}"
        shift 1
        ;;
        --)
        shift
        WAITFORIT_CLI=("$@")
        break
        ;;
        --help)
        usage
        ;;
        *)
        echoerr "Unknown argument: $1"
        usage
        ;;
    esac
done

if [[ "$WAITFORIT_HOST" == "" || "$WAITFORIT_PORT" == "" ]]; then
    echoerr "Error: you need to provide a host and port to test."
    usage
fi

WAITFORIT_TIMEOUT=${WAITFORIT_TIMEOUT:-15}
WAITFORIT_STRICT=${WAITFORIT_STRICT:-0}
WAITFORIT_CHILD=${WAITFORIT_CHILD:-0}
WAITFORIT_QUIET=${WAITFORIT_QUIET:-0}

# Check to see if timeout is from busybox?
WAITFORIT_TIMEOUT_PATH=$(type -p timeout)
WAITFORIT_TIMEOUT_PATH=$(realpath $WAITFORIT_TIMEOUT_PATH 2>/dev/null || readlink -f $WAITFORIT_TIMEOUT_PATH)

WAITFORIT_BUSYTIMEFLAG=""
if [[ $WAITFORIT_TIMEOUT_PATH =~ "busybox" ]]; then
    WAITFORIT_ISBUSY=1
    # Check if busybox timeout uses -t flag
    # (recent Alpine versions don't support -t anymore)
    if timeout &>/dev/stdout | grep -q -e '-t '; then
        WAITFORIT_BUSYTIMEFLAG="-t"
    fi
else
    WAITFORIT_ISBUSY=0
fi

if [[ $WAITFORIT_CHILD -gt 0 ]]; then
    wait_for
    WAITFORIT_RESULT=$?
    exit $WAITFORIT_RESULT
else
    if [[ $WAITFORIT_TIMEOUT -gt 0 ]]; then
        wait_for_wrapper
        WAITFORIT_RESULT=$?
    else
        wait_for
        WAITFORIT_RESULT=$?
    fi
fi

if [[ $WAITFORIT_CLI != "" ]]; then
    if [[ $WAITFORIT_RESULT -ne 0 && $WAITFORIT_STRICT -eq 1 ]]; then
        echoerr "$WAITFORIT_cmdname: strict mode, refusing to execute subprocess"
        exit $WAITFORIT_RESULT
    fi
    exec "${WAITFORIT_CLI[@]}"
else
    exit $WAITFORIT_RESULT
fi

docker-compose.yml (理解下注释)

version: "3"
# 构建服务
services:
  # 第一个服务拉去jar包
  webapp:
    # 刚刚打包的镜像
    image: 404name/sign-in-system:1.0.0
    ports:
      - "8080:8080"
    volumes:
      # 本地文件:映射容器文件
      - "./wait-for-it.sh:/wait-for-it.sh"
      - "/data"
    links:
      # 创建通道链接服务,这样跨容器就不用找ip了,jar的环境直接使用mysql:3306链接
      - mysql:mysql
      - redis:redis
    # 下面两个创建后执行,但不会等下面两个创建完成再执行,容易产生数据库还没初始化问题
    depends_on: 
      - redis
      - mysql
    # 等待mysql通就执行jar包,小概率失败,再跑一次就行
    command: ./wait-for-it.sh mysql:3306 --timeout=60

  redis:
    image: redis:latest
    restart: always
    ports:
      - "6379:6379"
    volumes:
      - ./docker-compose/redis/redis.conf:/etc/redis/redis.conf
    command: redis-server /etc/redis/redis.conf
    
  mysql:
    image: mysql:5.7
    environment:
      MYSQL_DATABASE: face_sign_in
      MYSQL_USER: face_sign_in
      MYSQL_PASSWORD: 123456
      MYSQL_ROOT_PASSWORD: 123456
    expose:
      - 3306
    ports:
      - 3306:3306
    # 为防止中文乱码,加以下启动参数
    volumes:
      # 启动初始化sql文件
      - ./docker-compose/mysql/initdb:/docker-entrypoint-initdb.d/
      # db持久化
      - mysql_db:/var/lib/mysql
      # 防止导入sql文件异常,要指定格式
      - ./docker-compose/mysql/conf/my.cnf:/etc/my.cnf
      
volumes:
  mysql_db:
    driver: local

my.cnf

[mysqld]
user=mysql
default-storage-engine=INNODB
character-set-server=utf8mb4
[client]
default-character-set=utf8mb4
[mysql]
default-character-set=utf8mb4

redis.conf

bind 0.0.0.0
protected-mode yes
port 6379
tcp-backlog 511
daemonize no
supervised no
pidfile /var/run/redis_6379.pid
loglevel notice
logfile ""
databases 16
always-show-logo yes
save 900 1
save 300 10
save 60 10000
stop-writes-on-bgsave-error yes
rdbcompression yes
rdbchecksum yes
dbfilename dump.rdb
replica-serve-stale-data yes
repl-diskless-sync no
repl-diskless-sync-delay 5
repl-diskless-load disabled
repl-disable-tcp-nodelay no
replica-priority 100
acllog-max-len 128
lazyfree-lazy-eviction no
lazyfree-lazy-expire no
lazyfree-lazy-server-del no
replica-lazy-flush no
lazyfree-lazy-user-del no
oom-score-adj no
oom-score-adj-values 0 200 800
appendonly no
appendfilename "appendonly.aof"
appendfsync everysec
no-appendfsync-on-rewrite no
auto-aof-rewrite-percentage 100
auto-aof-rewrite-min-size 64mb
aof-load-truncated yes
aof-use-rdb-preamble yes
lua-time-limit 5000
slowlog-log-slower-than 10000
slowlog-max-len 128
latency-monitor-threshold 0
notify-keyspace-events ""
hash-max-ziplist-entries 512
hash-max-ziplist-value 64
list-max-ziplist-size -2
list-compress-depth 0
set-max-intset-entries 512
zset-max-ziplist-entries 128
zset-max-ziplist-value 64
hll-sparse-max-bytes 3000
stream-node-max-bytes 4096
stream-node-max-entries 100
activerehashing yes
client-output-buffer-limit normal 0 0 0
client-output-buffer-limit replica 256mb 64mb 60
client-output-buffer-limit pubsub 32mb 8mb 60
hz 10
dynamic-hz yes
aof-rewrite-incremental-fsync yes
rdb-save-incremental-fsync yes
jemalloc-bg-thread yes

3.2 踩坑点【注意!】

3.2.1 jar包启动后找不到mysql数据库

数据库链接地址不管填localhost:3306 还是127.0.0.1都不行。因为容器之间是有自己ip地址的,对外暴露是127.0.0.1:3306但跨容器访问就不能用本地链接了

方式一:找到msql容器ip,然后修改jar包数据库链接

方式二:数据库链接填主机ip地址(适合有公网ip的服务器)

【上面两种都要事先确定ip,换机器就不适合了,所以使用麻烦的方式三】

方式三:自动查询mysql

  1. 先设置链接追加?useSSL=fasle
  2. 配置参考上面设置link链接mysql,然后数据库链接填myqsl:3306这样mysql就是自动映射容器ip,不用自己填了。

3.2.2 数据库初始化不完整

需要指定字符集,utf8mb4,配置参考上面my.cnf文件夹和仓库映射

3.2.3 jar包在数据库初始化之前就已经启动了,链接上了数据库,但找不到表

设定启动顺序,使用wait-for-it.sh脚本,指定jar包等mysql:3306响应再启动(但小概率失败,可以再次启动就行了)

3.3 运行效果

至此,就已经全部完成了。

当前文件夹运行 docker-compose up就能一键完成了(也可以封装成bat,点击运行)。

阿里云托管镜像

github慢,dockerhub也慢,你想使用gitee一样使用github就可以试试阿里云镜像托管~

阿里云登录 - 欢迎登录阿里云,安全稳定的云计算服务平台

1. 登录阿里云Docker Registry

$ docker login --username=404**** registry.cn-hangzhou.aliyuncs.com

用于登录的用户名为阿里云账号全名,密码为开通服务时设置的密码。

您可以在访问凭证页面修改凭证密码。

2. 从Registry中拉取镜像

$ docker pull registry.cn-hangzhou.aliyuncs.com/404name/test:[镜像版本号]

3. 将镜像推送到Registry

$ docker login --username=404**** registry.cn-hangzhou.aliyuncs.com``$ docker tag [ImageId] registry.cn-hangzhou.aliyuncs.com/404name/test:[镜像版本号]``$ docker push registry.cn-hangzhou.aliyuncs.com/404name/test:[镜像版本号]

请根据实际镜像信息替换示例中的[ImageId]和[镜像版本号]参数。

4. 选择合适的镜像仓库地址

从ECS推送镜像时,可以选择使用镜像仓库内网地址。推送速度将得到提升并且将不会损耗您的公网流量。

如果您使用的机器位于经典网络,请使用 registry-internal.cn-hangzhou.aliyuncs.com 作为Registry的域名登录。

如果您使用的机器位于VPC网络,请使用 registry-vpc.cn-hangzhou.aliyuncs.com 作为Registry的域名登录。

5. 示例

使用"docker tag"命令重命名镜像,并将它通过专有网络地址推送至Registry。

$ docker images``REPOSITORY                                                         TAG                 IMAGE ID            CREATED             VIRTUAL SIZE``registry.aliyuncs.com/acs/agent                                    0.7-dfb6816         37bb9c63c8b2        7 days ago          37.89 MB``$ docker tag 37bb9c63c8b2 registry-vpc.cn-hangzhou.aliyuncs.com/acs/agent:0.7-dfb6816

使用 "docker push" 命令将该镜像推送至远程。

$ docker push registry-vpc.cn-hangzhou.aliyuncs.com/acs/agent:0.7-dfb6816

你可能感兴趣的:(⚙️技术拓展,docker,docker-compose,jar,mysql,springboot)