Day38ansible自动化管理1(课堂笔记)

Day38


作者:孙鹏鹏

归档:课后笔记

时间:2019/4/23


快捷键:

Ctrl + 1    标题1

Ctrl + 2    标题2

Ctrl + 3    标题3

Ctrl + 4    标题4

Ctrl + 5    程序代码

Ctrl + 6    正文

Ctrl + 7    实例1-1

格式说明:

蓝色字体:注释

黄色背景:重要

绿色背景:注意

老男孩教育教学核心思想6重:重目标、重思路、重方法、重实践、重习惯、重总结

学无止境,老男孩教育成就你人生的起点!

联系方式:

网站运维QQ交流群:

Linux 385168604架构师390642196

Python 29215534大数据421358633

官方网站:

http://www.oldboyedu.com 

目  录

第一章:









SSH批量管理项目如何一键一秒钟完成:一秒完成。

#1.ssh-keygen非交互式创建秘钥对:

具体命令:ssh-keygen -f~/.ssh/id_rsa  -P '' -q

参数讲解:

ssh-keygen:密钥对创建工具

      [-P old_passphrase]  密码

      [-f output_keyfile]  输出的秘钥文件

    [-q]      不输出信息     

      [-t dsa ] 指定秘钥类型。

      #2.ssh-copy-id不需要提示yes/no分发秘钥

具体命令:ssh-copy-id -f -i~/.ssh/id_rsa.pub -o StrictHostKeyChecking=no 172.16.1.8

##参数讲解:

ssh-copy-id  -f   -i~/.ssh/id_rsa.pub -o StrictHostKeyChecking=no root172.16.1.8

ssh-copy-id[-f] [-i [identity_file]] [-p port] [[-o ] ...][user@]hostname

##说明:

-f:

force mode 强制

[-i

[identity_file]] 指定秘钥文件

[[-o

] ...] 指定ssh参数选项。

#3.sshpass工具:指定密码非人工交互分发秘钥

sshpass-p123456 ssh-copy-id -f -i ~/.ssh/id_rsa.pub "-o StrictHostKeyChecking=no"172.16.1.7


[root@web02~]# sshpass -help

Usage:sshpass [-f|-d|-p|-e] [-hV] command parameters

sshpass-p123456 ssh-copy-id -f -i ~/.ssh/id_rsa.pub "-oStrictHostKeyChecking=no" 172.16.1.7

sshpass[-f|-d|-p|-e] [-hV] command parameters


##参数讲解:

-ppassword   Provide password as argument(security unwise)    #指定用户密码操作


#4.一键配置实践

把web02作为分发服务器:

web02(8)-->m01(61)

web02(8)-->web01(7)


ssh-keygen-f ~/.ssh/id_rsa  -P '' -q

ssh-copy-id-f -i ~/.ssh/id_rsa.pub "-o StrictHostKeyChecking=no" 172.16.1.7

sshpass-p123456 ssh-copy-id -f -i ~/.ssh/id_rsa.pub "-o StrictHostKeyChecking=no"172.16.1.7


#!/bin/bash

#yuminstall sshpass -y

ssh-keygen-f ~/.ssh/id_rsa  -P '' -q

forip in 7 61

do

  sshpass -p123456 ssh-copy-id -f -i~/.ssh/id_rsa.pub "-o StrictHostKeyChecking=no" 172.16.1.$ip

done

#test

ssh172.16.1.7 "ifconfig eth0"

ssh172.16.1.61 "ifconfig eth0"


##老男孩Linux58-ansible自动化管理实践

##运维发展历史                          

#1.ansible介绍

ssh秘钥认证+脚本批量管理,特点:简单、实用,

但是看起来比较LOW,需要人工写脚本,类似实时复制的inotify工具。

2013以前这种方式很普遍。

MySQL高可用 MHA集群,要求所有机器互相秘钥认证。

大数据集群也需要。

#2.批量管理工具历史

SSH+脚本 CFEngine、Puppet、saltstack               、ansible

08年以前 07-08年   10-13年 14-17(python开发)      16-(python开发)

         sina网


#3.为什么用ansible

简单、方便、容易学习、功能同样强大。

ansible有配置文件,可以多线程直接实现。不需要写脚本,类似实时复制的sersync。


#4.什么是ansible

Ansible是一个用来远程管理服务器的工具软件。

Ansible是一个用来批量部署远程主机上服务的工具。这里“远程主机(Remote Host)”是指任

何可以通过SSH登录的主机,所以它既可以是远程虚拟机或物理机,也可以是本地主机。


Ansible通过SSH协议实现管理节点与远程节点之间的通信。理论上来说,只要能通过SSH登录到

远程主机来完成的操作,都可以通过Ansible实现批量自动化操作。

涉及管理操作:复制文件、安装服务、服务启动停止管理、配置管理等等。


#5.为什么要用批量管理工具运维?

提高效率,百度几万台服务器,阿里几十万台服务器。

如何省钱?

SSD+SATA热点存储15 15 7


#6.Ansible特点

Ansible基于Python语言实现,由Paramiko和PyYAML两个关键模块构建。

Shell、Python是Linux运维学员必会的两门语言。

##1)安装部署过程特别简单,学习曲线很平坦。

##2)不需要单独安装客户端,只是利用现有的SSHD服务(协议)即可。

##3)不需要服务端(no servers)。

##4)ansible playbook,采用yaml配置,提前编排自动化任务。

##5)ansible功能模块较多,对于自动化的场景支持丰富。


官方:http://docs.ansible.com

#7.Ansible架构介绍(见图说明)

##1、连接插件connectior plugins用于连接主机 用来连接被管理端

##2、核心模块 core modules 连接主机实现操作, 它依赖于具体的模块来做具体的事情

##3、自定义模块 custom modules,根据自己的需求编写具体的模块

##4、插件 plugins,完成模块功能的补充

##5、剧本 playbooks,ansible的配置文件,将多个任务定义在剧本中,由ansible自动执行

##6、主机清单 inventor,定义ansible需要操作主机的范围

最重要的一点是 ansible是模块化的 它所有的操作都依赖于模块

(懂Python可以二次开发)

#7.ansible实践环境准备

61(m01)====>31(nfs01)

61(m01)====>41(backup)


#8.安装ansible

m01管理机:

yuminstall epel-release -y

yuminstall ansible -y


#如果有libselinux-python就不执行下面的命令了。

#rpm-qa |grep libselinux-python

#yuminstall libselinux-python -y


其他所有机器:

#rpm-qa |grep libselinux-python

#yuminstall libselinux-python -y


#10.主机列表配置

ssh列表实现方法:

forn  in 7 8

do

 echo 172.16.1.$n

done


/etc/ansible/hosts主机资产清单文件,用于定义被管理主机的认证信息,

例如ssh登录用户名、密码以及key相关信息。如何配置Inventory文件

##1.主机支持主机名通配以及正则表达式,例如web[1:3].oldboy.com代表三台主机

##2.主机支持基于非标准的ssh端口,例如web1.oldboyedu.com:6666

##3.主机支持指定变量,可对个别主机的特殊配置,如登陆用户\密码

##4.主机组支持指定变量[group_name:vars],同时支持嵌套组[game:children]


实践:

cp/etc/ansible/hosts{,.ori}

cat>/etc/ansible/hosts<

[oldboy]

172.16.1.31

172.16.1.41


[oldgirl]

172.16.1.31

172.16.1.41

172.16.1.51

EOF

cat/etc/ansible/hosts

/etc/ansible/ansible.cfg

#ansible的配置文件


#11.小试牛刀

直接执行如下命令或报错

ansibleoldboy -m command -a "free -m"

基于SSH秘钥认证的前提下:

如果没有做SSH秘钥认证,可以把用户名密码写到

/etc/ansible/hosts

[oldboy_pass]

172.16.1.7ansible_ssh_user=root ansible_ssh_pass=123456

172.16.1.8ansible_ssh_user=root ansible_ssh_pass=123456

ansible

oldboy -m command -a "free -m" 要想成功,先解决yes/no的问题。

##1、ssh连接一遍。

##2、ssh -o 参数


上述命令就是sshpass的封装

==========================================

ansible关闭ssh首次连接时yes/no提示

使用ssh连接时,可以使用-o参数将StrictHostKeyChecking设置为no,

避免使用ssh连接时避免首次连接时让输入yes/no部分的提示。


方法1:修改 /etc/ansible/ansible.cfg中的374行

369[ssh_connection]

370

371# ssh arguments to use

372# Leaving off ControlPersist will result in poor performance, so use

373# paramiko on older platforms rather than removing it, -C controls compressionuse

374#ssh_args = -C -o ControlMaster=auto -o ControlPersist=60s


374行改为:

ssh_args= -o ControlMaster=auto -o ControlPersist=60s -o StrictHostKeyChecking=no


方法2:修改 /etc/ansible/ansible.cfg中的71行

 70 # uncomment this to disable SSH key hostchecking

 71 #host_key_checking = False


71行的注释取消:host_key_checking = False

==========================================

[root@m01/server/scripts]# > ~/.ssh/known_hosts

[root@m01/server/scripts]# ssh 172.16.1.31

Theauthenticity of host '172.16.1.31 (172.16.1.31)' can't be established.

ECDSAkey fingerprint is SHA256:qZSBkrmOv7xO/63qOU1uLXkPyNVHdkqvrNAcAmXqNEk.

ECDSAkey fingerprint is MD5:23:d0:cb:a9:f4:7c:0b:eb:2d:07:00:e1:a3:12:d8:33.

Areyou sure you want to continue connecting (yes/no)? ^C

[root@m01/server/scripts]# ansible oldboy -m command -a "free -m"

172.16.1.31| CHANGED | rc=0 >>

             total        used        free      shared buff/cache   available

Mem:            972          88         592          13         291         708

Swap:           767           0         767


172.16.1.41| CHANGED | rc=0 >>

              total       used        free      shared buff/cache   available

Mem:            972          89         572          13         310         706

Swap:           767           0         767




目标:ansible是不是需要免秘钥认证(ssh免秘钥认证)?yes

[root@m01~]# cat /etc/ansible/hosts

[oldboy]

172.16.1.31

172.16.1.7


还原ansible.cfg配置,重启服务器

[root@m01~]# ansible oldboy -m command -a "free -m"

Theauthenticity of host '172.16.1.7 (172.16.1.7)' can't be established.

ECDSAkey fingerprint is SHA256:qZSBkrmOv7xO/63qOU1uLXkPyNVHdkqvrNAcAmXqNEk.

ECDSAkey fingerprint is MD5:23:d0:cb:a9:f4:7c:0b:eb:2d:07:00:e1:a3:12:d8:33.

Areyou sure you want to continue connecting (yes/no)? The authenticity of host'172.16.1.31 (172.16.1.31)' can't be established.

ECDSAkey fingerprint is SHA256:qZSBkrmOv7xO/63qOU1uLXkPyNVHdkqvrNAcAmXqNEk.

ECDSAkey fingerprint is MD5:23:d0:cb:a9:f4:7c:0b:eb:2d:07:00:e1:a3:12:d8:33.

Areyou sure you want to continue connecting (yes/no)?


解决yes/no不需要输入问题:


修改ansible.cfg 374行:

ssh_args= -o ControlMaster=auto -o ControlPersist=60s -o StrictHostKeyChecking=no


在执行报错:

[root@m01~]# ansible oldboy -m command -a "free -m"

172.16.1.7| UNREACHABLE! => {

    "changed": false,

    "msg": "Failed to connect tothe host via ssh: Warning: Permanently added '172.16.1.7' (ECDSA) to the listof known hosts.\r\nPermission denied (publickey,password).",

    "unreachable": true

}

172.16.1.31| UNREACHABLE! => {

    "changed": false,

    "msg": "Failed to connect tothe host via ssh: Warning: Permanently added '172.16.1.31' (ECDSA) to the listof known hosts.\r\nPermission denied(publickey,gssapi-keyex,gssapi-with-mic,password).",

    "unreachable": true

}


解决公钥问题:

ssh-keygen-f ~/.ssh/id_rsa  -P '' -q

forip in 7

do

  sshpass -p123456 ssh-copy-id -f -i~/.ssh/id_rsa.pub "-o StrictHostKeyChecking=no" 172.16.1.$ip

done

#test

ssh172.16.1.7 "ifconfig eth0"


执行ansible命令:

[root@m01~]# ansible oldboy -m command -a "free -m"

172.16.1.31| UNREACHABLE! => {

    "changed": false,

    "msg": "Failed to connect tothe host via ssh: Permission denied(publickey,gssapi-keyex,gssapi-with-mic,password).",

    "unreachable": true

}

172.16.1.7| CHANGED | rc=0 >>

              total        used       free      shared buff/cache   available

Mem:            972          69         807           7          95         771

Swap:           767           0         767


forip in 31

do

  sshpass -p123456 ssh-copy-id -f -i~/.ssh/id_rsa.pub "-o StrictHostKeyChecking=no" 172.16.1.$ip

done

#test

ssh172.16.1.31 "ifconfig eth0"


[root@m01~]# ansible oldboy -m command -a "free -m"

172.16.1.7| CHANGED | rc=0 >>

              total        used        free      shared buff/cache   available

Mem:            972          69         807           7          95         771

Swap:           767           0         767


172.16.1.31| CHANGED | rc=0 >>

              total        used        free      shared buff/cache   available

Mem:            972          71         804           7          96         768

Swap:           767           0         767


验证:删除公钥,是不是不可以了?

重启后,不行,重启前可以

[root@m01~]# ansible oldboy -m command -a "free -m"

172.16.1.7| UNREACHABLE! => {

    "changed": false,

    "msg": "Failed to connect tothe host via ssh: Warning: Permanently added '172.16.1.7' (ECDSA) to the listof known hosts.\r\nPermission denied (publickey,password).",

    "unreachable": true

}

172.16.1.31| UNREACHABLE! => {

    "changed": false,

    "msg": "Failed to connect tothe host via ssh: Could not create directory '/root/.ssh'.\r\nWarning:Permanently added '172.16.1.31' (ECDSA) to the list of knownhosts.\r\nPermission denied (publickey,gssapi-keyex,gssapi-with-mic,password).",

    "unreachable": true

}


修改Host增加用户和密码:

[root@m01~]# cat /etc/ansible/hosts

#[oldboy]

#172.16.1.31

#172.16.1.7


[oldboy_pass]

172.16.1.31ansible_ssh_user=root ansible_ssh_pass=123456

172.16.1.7ansible_ssh_user=root ansible_ssh_pass=123456


结果:

[root@m01~]# ansible oldboy_pass -m command -a "free -m"

172.16.1.31| CHANGED | rc=0 >>

              total        used        free      shared buff/cache   available

Mem:            972          79        791           7         101         758

Swap:           767           0         767


172.16.1.7| CHANGED | rc=0 >>

              total        used        free      shared buff/cache   available

Mem:            972          69         806          7          95         771

Swap:           767           0         767



结论:使用SSH连接:

密码认证 host里主机后面加密码         Paramiko模块 重点:

秘钥认证:提前发公钥,才能用ansible.  SSHPASS工具


http://docs.ansible.com/ansible/latest/intro_inventory.html#list-of-behavioral-inventory-parameters


特殊端口:

[oldboy]

172.16.1.7  ansible_port=52113  ansible_user=root ansible_ssh_pass=123456

172.16.1.8  ansible_port=52113  ansible_user=root ansible_ssh_pass=123456



#12.基于SSH秘钥认证的实践

一键创建及分发秘钥:

#!/bin/bash

ssh-keygen-f ~/.ssh/id_rsa  -P '' -q

forip in 7 8 41 31

do

  sshpass -p123456 ssh-copy-id -i~/.ssh/id_rsa.pub "-o StrictHostKeyChecking=no" 172.16.1.$ip

done



[root@m01~]# cat /etc/ansible/hosts

[oldboy]

172.16.1.31

172.16.1.41

172.16.1.7


[root@m01

~]# ansible oldboy -m command -a "free -m" #和前面sh cmd.sh "free-m"



#11.ansible命令参数

-m

MODULE_NAME, 模块名字,默认command

-a

MODULE_ARGS, 模块参数

-fFORKS         并发进程数,默认5个。

-i

INVENTORY(default=/etc/ansible/hosts)指定主机列表文件

===================

ansible

ansible-doc

ansible-playbook

ansible-galaxy

===================


#12.ansible模块查看和帮助*****


查找模块

ansible-doc-l          #模块就Linux命令了。


查看某个模块的具体参数帮助

ansible-doc-s command  #Linux命令参数

 

#12.1 command模块*****


##1)功能说明:

command  Executes a command on a remote node

功能说明:执行一个命令在远程节点上

操作实践:

ansibleoldboy -m command -a "free -m"

ansibleoldboy -m command -a "df -h"

ansibleoldboy -m command -a "ls /root"

ansibleoldboy -m command -a "cat redhat-release"

ansibleoldboy -m command -a "cat /etc/redhat-release"

最通用的功能。


[root@m01~]# ansible oldboy -m command -a "cat /etc/redhat-release"

172.16.1.7| CHANGED | rc=0 >>

CentOSLinux release 7.6.1810 (Core)


172.16.1.31| CHANGED | rc=0 >>

CentOSLinux release 7.6.1810 (Core)


172.16.1.41| CHANGED | rc=0 >>

CentOSLinux release 7.6.1810 (Core)


[root@m01~]# cat /server/scripts/cmd.sh

forn in 31 41

do

   echo "=====172.16.1.$n======"

   ssh 172.16.1.$n "$1"

done

[root@m01~]# sh /server/scripts/cmd.sh "cat /etc/redhat-release"

=====172.16.1.31======

CentOSLinux release 7.6.1810 (Core)

=====172.16.1.41======

CentOSLinux release 7.6.1810 (Core)



特殊:不支持的东西,例如 > < | &等 $HOME,替代方案用shell模块

ansibleoldboy -m shell -a "ps -ef|grep ssh"

ansibleoldboy -m shell -a "echo oldboy >/tmp/a.log"

##2)常用参数说明及实践

[root@m01~]# ansible-doc -s command

-name: Executes a command on a remote node

  command:

      argv:                  # Allows the user to providethe command as a list vs. a string.  Onlythe

                               string or thelist form can be provided, not

                               both.  One or the other must be provided.

      chdir:                 # Change into this directorybefore running the command.

      creates:               # A filename or (since 2.0) globpattern. If it already exists, this step

                               *won't* be run.

      free_form:             # (required) The command module takes afree form command to run.  There is no

                               parameteractually named 'free form'. See the

                               examples!

      removes:               # A filename or (since 2.0) globpattern. If it already exists, this step *will* be run.

      stdin:                 # Set the stdin of the commanddirectly to the specified value.

      warn:                  # If command_warnings are onin ansible.cfg, do not warn about this particular

                               line if set to`no'.                                   

参数:chdir=/tmp配置相当于cd /tmp

[root@m01~]# ansible oldboy  -m command -a"pwd chdir=/etc"

ansibleoldboy  -m shell -a "cd/etc/;pwd"


参数:creates=/etc  相当于条件测试 [ -e /etc ]||pwd和下面removes相反

[root@m01~]# ansible oldboy  -m command -a"pwd creates=/etc"


参数:removes=/root 相当于条件测试[ -e /root ]&&ls/root

ansibleoldboy  -m command -a "ls /rootremoves=/root"

ansibleoldboy  -m shell -a "[ -d /etc]||pwd"

[root@m01~]# ansible oldboy  -m command -a"cat /etc/hosts removes=/etc/hosts"


参数:warn=False 忽略警告

[root@m01~]# ansible oldboy  -m command -a "chmod000 /etc/hosts warn=False"

更多官方链接:http://docs.ansible.com/ansible/latest/command_module.html或ansible-doc -s command

你可能感兴趣的:(Day38ansible自动化管理1(课堂笔记))