部署专题集合

虽主职是软件测试,但我一度怀疑自己个专职的运维人员。
总结这几年的搭建环境经验,形成本专题,望可以对大家有些帮助,少走些弯路,也希望和大家有更多交流的机会。

部署专题集合_第1张图片
部署专题规划.png
  1. 基础环境
    CentOS7 集群配置
    Tomcat session共享配置
    Tomcat-页面访问时新Jsp未生效
    Tomcat8 日志配置

  2. 大数据方向
    Hadoop 2.7.1 搭建
    Hive 1.2.1搭建
    zookeeper 3.4.6 搭建
    Hbase 1.1.2 搭建

以上四篇构成一个hadoop的生态环境,为了学习这个本人专程报名上了大数据的课程,参与了一个小型项目,收集一个汽车网站的数据(通过python爬虫完成)、清洗数据、导入到hbase中,再通过程序去读取,显示在WEB界面上。

  1. 数据库方向
    Docker运行数据库mariaDB
    Docker中mariaDB Master/Slave Replication--手动版
    [Docker中mariaDB Master/Slave Replication--自动版]
    mysql经典的8小时问题-wait_timeout
    Mysql-数据恢复
    redis
    redis 集群

  2. 消息队列
    kafka 和 Logstash的使用

将日志发送到kafka,然后再写个程序对kafka的数据进行处理,写成另外的日志文件,吐给大数据平台。相当于是一个数据清洗的过程。

kafka集群
[rabbitMQ]
[rabbitMQ集群]

  1. 负载均衡
    Nginx proxy_set_header 理解

  2. devOps
    我的Docker学习路线图
    Docker的问题记录
    Docker 使用中的问题记录
    Docker 管理工具(Shipyard&DockerUI)
    docker compose的使用
    Docker+Jenkins 自动构建镜像
    windows 中使用docker
    Docker run 命令详解
    构建支持registry v2的shipyard的镜像
    Docker registry 管理工具Portus
    Docker的IO和数据库读写性能测试
    Docker 私有仓库建立
    如何访问Docker中的应用
    Docker Dockerfile的使用
    Docker images导出和导入
    Docker中mariaDB Master/Slave Replication
    Docker运行数据库mariaDB
    Docker中使用Tomcat8
    Docker中使用CentOS7镜像
    CentOS7上安装Docker

  1. 运维
    Filebeat 多行合并
    Docker和ELK搭建日志平台

ELK--当前用途,收集现网所有日志,方便Bug定位分析。

自动化运维工具jumpserver
自动化运维工具Ansible

你可能感兴趣的:(部署专题集合)