在Azure上创建虚拟机一般是使用市场上做好的操作系统映像,但有的时候对于一些业务系统的特殊要求需要一些特别版本的系统映像恰好是市场里没有的,比如这里我需要用CentOS6.4,市场里没有,因此我就需要自己做一个CentOS6.4的映像上传到Azure供自己以后使用,在制作之前需要了解Azure对自定义映像的一些限制:

  • Azure 不支持 VHDX 格式,仅支持 固定大小的 VHD

  • 在安装 Linux 系统时,建议使用标准分区而不是 LVM(通常是许多安装的默认值)。 这可以避免与克隆 VM 发生 LVM 名称冲突,尤其是在需要将 OS 磁盘连接到另一个同类 VM 进行故障排除时。

  • 内核需要支持装载 UDF 文件系统。

  • 低于 2.6.37 的 Linux 内核版本不支持具有更大 VM 大小的 Hyper-V 上的 NUMA

  • 不要在操作系统磁盘上配置交换分区。

  • Azure 上的所有 VHD 必须已将虚拟大小调整为 1MB。 从原始磁盘转换为 VHD 时,必须确保在转换前原始磁盘大小是 1MB 的倍数。

按照如上要求我来做一个CentOS6.4的映像吧,首先我再Hyper-V上创建一台CentOS64的虚拟机

57.创建自定义CentOS映像并上传到Azure创建虚拟机(21V)_第1张图片

等会创建虚拟磁盘,因为默认创建的是VHDX,但这里需要VHD的虚拟磁盘

57.创建自定义CentOS映像并上传到Azure创建虚拟机(21V)_第2张图片

创建好虚拟机后设置该虚拟机,点击添加硬盘驱动器

57.创建自定义CentOS映像并上传到Azure创建虚拟机(21V)_第3张图片

新建,下一步

57.创建自定义CentOS映像并上传到Azure创建虚拟机(21V)_第4张图片

选择VHD,下一步

57.创建自定义CentOS映像并上传到Azure创建虚拟机(21V)_第5张图片

选择固定大小

57.创建自定义CentOS映像并上传到Azure创建虚拟机(21V)_第6张图片

设置VHD的名称以及保存位置

57.创建自定义CentOS映像并上传到Azure创建虚拟机(21V)_第7张图片

设置大小,当然这里只需要系统盘

57.创建自定义CentOS映像并上传到Azure创建虚拟机(21V)_第8张图片

挂在CentOS6.4的ISO,然后启动虚拟机

57.创建自定义CentOS映像并上传到Azure创建虚拟机(21V)_第9张图片

跳过

57.创建自定义CentOS映像并上传到Azure创建虚拟机(21V)_第10张图片

57.创建自定义CentOS映像并上传到Azure创建虚拟机(21V)_第11张图片

NEXT

57.创建自定义CentOS映像并上传到Azure创建虚拟机(21V)_第12张图片

Next

57.创建自定义CentOS映像并上传到Azure创建虚拟机(21V)_第13张图片

Next

57.创建自定义CentOS映像并上传到Azure创建虚拟机(21V)_第14张图片

Next

57.创建自定义CentOS映像并上传到Azure创建虚拟机(21V)_第15张图片

Yes

57.创建自定义CentOS映像并上传到Azure创建虚拟机(21V)_第16张图片

配置网卡,并编辑勾选自动连接,应用后Next

57.创建自定义CentOS映像并上传到Azure创建虚拟机(21V)_第17张图片

选择时区为上海,并且不勾选UTC

57.创建自定义CentOS映像并上传到Azure创建虚拟机(21V)_第18张图片

设置root密码

57.创建自定义CentOS映像并上传到Azure创建虚拟机(21V)_第19张图片

选择创建自定义布局,Next

57.创建自定义CentOS映像并上传到Azure创建虚拟机(21V)_第20张图片

创建标准分区

57.创建自定义CentOS映像并上传到Azure创建虚拟机(21V)_第21张图片

使用全部大小,不创建交换分区

57.创建自定义CentOS映像并上传到Azure创建虚拟机(21V)_第22张图片

下一步

57.创建自定义CentOS映像并上传到Azure创建虚拟机(21V)_第23张图片

Yes

57.创建自定义CentOS映像并上传到Azure创建虚拟机(21V)_第24张图片

格式化

57.创建自定义CentOS映像并上传到Azure创建虚拟机(21V)_第25张图片

Write changes to disk

57.创建自定义CentOS映像并上传到Azure创建虚拟机(21V)_第26张图片

下一步

57.创建自定义CentOS映像并上传到Azure创建虚拟机(21V)_第27张图片

下一步

57.创建自定义CentOS映像并上传到Azure创建虚拟机(21V)_第28张图片

开始安装,等待安装完成

57.创建自定义CentOS映像并上传到Azure创建虚拟机(21V)_第29张图片

重启

57.创建自定义CentOS映像并上传到Azure创建虚拟机(21V)_第30张图片

重启好登录,然后首先看内核

57.创建自定义CentOS映像并上传到Azure创建虚拟机(21V)_第31张图片

++++++++++++++++++++++++++++可选步骤+++++++++++++++++++++++++++++++++++

备注:升级了内核也就升级了CentOS系统版本号,比如CentOS6.4升级当前最新就变成CentOS6.10了

内核低于2.6.37 的 Linux 内核版本不支持具有更大 VM 大小的 Hyper-V 上的 NUMA,因此需要升级内核

升级网络安全服务

yum update nss

导入public key

rpm --import https://www.elrepo.org/RPM-GPG-KEY-elrepo.org

先要进入后面的网址,http://elrepo.org/tiki/tiki-index.php

57.创建自定义CentOS映像并上传到Azure创建虚拟机(21V)_第32张图片

选择要安装的ELRepo

yum install https://www.elrepo.org/elrepo-release-6-8.el6.elrepo.noarch.rpm
安装 kernel-lt(lt=long-term)

yum --enablerepo=elrepo-kernel install kernel-lt -y

编辑grub.conf文件,修改Grub引导顺序

vim /etc/grub.conf

57.创建自定义CentOS映像并上传到Azure创建虚拟机(21V)_第33张图片

最后重启系统

shutdown -r now

内核升级完毕,再次检查内核版本

57.创建自定义CentOS映像并上传到Azure创建虚拟机(21V)_第34张图片

++++++++++++++++++++++++++++可选步骤+++++++++++++++++++++++++++++++++++

在 CentOS 6 中,NetworkManager 可能会干扰 Azure Linux 代理。 请运行以下命令来卸载该包(我这里安装的方式没有这个):

sudo rpm -e --nodeps NetworkManager

检查/etc/sysconfig/network 文件是否如下:vim /etc/sysconfig/network

57.创建自定义CentOS映像并上传到Azure创建虚拟机(21V)_第35张图片

检查/etc/sysconfig/network-scripts/ifcfg-eth0文件是否如下:vim /etc/sysconfig/network-scripts/ifcfg-eth0

57.创建自定义CentOS映像并上传到Azure创建虚拟机(21V)_第36张图片

修改 udev 规则,以免为以太网接口生成静态规则。 在 Azure 或 Hyper-V 中克隆虚拟机时,这些规则可能会引发问题:

# sudo ln -s /dev/null /etc/udev/rules.d/75-persistent-net-generator.rules

# sudo rm -f /etc/udev/rules.d/70-persistent-net.rules

57.创建自定义CentOS映像并上传到Azure创建虚拟机(21V)_第37张图片

通过运行以下命令,确保网络服务在引导时启动

# sudo chkconfig network on

如果要使用 Azure 数据中心托管的 OpenLogic 镜像,在/etc/yum.repos.d/目录下新建一个CentOS-Azure.repo 文件

57.创建自定义CentOS映像并上传到Azure创建虚拟机(21V)_第38张图片

文件内容如下,包含 Azure Linux 代理等其他包的 [openlogic] 存储库:

# CentOS-Azure.repo

#

# The mirror system uses the connecting IP address of the client and the

# update status of each mirror to pick mirrors that are updated to and

# geographically close to the client. You should use this for CentOS updates

# unless you are manually picking other mirrors.

#

# If the mirrorlist= does not work for you, as a fall back you can try the

# remarked out baseurl= line instead.

#

#

[base]

name=CentOS-$releasever - Base

baseurl=http://olcentchan.chinacloudapp.cn/centos/$releasever/os/$basearch/

gpgcheck=1

gpgkey=file:///etc/pki/rpm-gpg/RPM-GPG-KEY-CentOS-6

#released updates

[updates]

name=CentOS-$releasever - Updates

baseurl=http://olcentchan.chinacloudapp.cn/centos/$releasever/updates/$basearch/

gpgcheck=1

gpgkey=file:///etc/pki/rpm-gpg/RPM-GPG-KEY-CentOS-6

#additional packages that may be useful

[extras]

name=CentOS-$releasever - Extras

baseurl=http://olcentchan.chinacloudapp.cn/centos/$releasever/extras/$basearch/

gpgcheck=1

gpgkey=file:///etc/pki/rpm-gpg/RPM-GPG-KEY-CentOS-6

#additional packages that extend functionality of existing packages

[centosplus]

name=CentOS-$releasever - Plus

baseurl=http://olcentchan.chinacloudapp.cn/centos/$releasever/centosplus/$basearch/

gpgcheck=1

enabled=0

gpgkey=file:///etc/pki/rpm-gpg/RPM-GPG-KEY-CentOS-6

#contrib - packages by Centos Users

[contrib]

name=CentOS-$releasever - Contrib

baseurl=http://olcentchan.chinacloudapp.cn/centos/$releasever/contrib/$basearch/

gpgcheck=1

enabled=0

gpgkey=file:///etc/pki/rpm-gpg/RPM-GPG-KEY-CentOS-6

57.创建自定义CentOS映像并上传到Azure创建虚拟机(21V)_第39张图片

将以下行添加到 /etc/yum.conf

http_caching=packages

57.创建自定义CentOS映像并上传到Azure创建虚拟机(21V)_第40张图片

运行以下命令,清除当前的 yum 元数据并使用最新的包更新系统

# yum clean all

建议将所有包都更新到最新版本,除非要为旧版 CentOS 创建映像

# sudo yum -y update

运行此命令后,重新启动系统

shutdown -r now

安装适用于 Linux Integration Services (LIS) 的驱动程序(对于 CentOS 6.3 及更低版本来说是 必需 步骤,对于更高版本来说是可选步骤)

# sudo rpm -e hypervkvpd ## (如果没有安装可能会返回错误,没关系)

# sudo yum install -y microsoft-hyper-v

安装Azure Linux 代理和依赖项(如果没有删除 NetworkManager和NetworkManager-gnome 包,则安装 WALinuxAgent 包时会删除它们)

# sudo yum install python-pyasn1 WALinuxAgent

57.创建自定义CentOS映像并上传到Azure创建虚拟机(21V)_第41张图片

clip_image042[1]

在 grub 配置中修改内核引导行,使其包含 Azure 的其他内核参数(将确保所有控制台消息都发送到第一个串行端口,从而可以协助 Azure 支持人员调试问题),打开/boot/grub/menu.lst

vim /boot/grub/menu.lst

console=ttyS0 earlyprintk=ttyS0 rootdelay=300

57.创建自定义CentOS映像并上传到Azure创建虚拟机(21V)_第42张图片

CentOS 6.5或更早版本还必须设置内核参数 numa=off

由于低于 2.6.37 的 Linux 内核版本中的 bug,因此大型VM不支持非一致性内存访问 (NUMA),运行版本低于 2.6.37 的自定义内核的系统或者版本低于 2.6.32-504 的基于 RHEL 的内核必须在 grub.conf 中的内核命令行上设置启动参数 numa=off,有关详细信息,请参阅 Red Hat KB 436883

57.创建自定义CentOS映像并上传到Azure创建虚拟机(21V)_第43张图片

如果该文件里有如下参数,建议删除

rhgb quiet crashkernel=auto

57.创建自定义CentOS映像并上传到Azure创建虚拟机(21V)_第44张图片

接着检查下内核是否支持装载 UDF 文件系统,这里看是支持的,OK没问题

clip_image046[1]

永久关闭SELinux(这样需要重启服务器后生效)

sed -i 's/SELINUX=enforcing/SELINUX=disabled/' /etc/selinux/config

永久关闭Linux防火墙

chkconfig iptables off

接着安装waagent(Microsoft Azure Linux代理)先打开https://github.com/Azure/WALinuxAgent/releases,选择最新的版本

57.创建自定义CentOS映像并上传到Azure创建虚拟机(21V)_第45张图片

cd /tmp/

yum install -y wget

wget https://github.com/Azure/WALinuxAgent/archive/v2.2.38.tar.gz

tar -xzf v2.2.38.tar.gz

ls -l

57.创建自定义CentOS映像并上传到Azure创建虚拟机(21V)_第46张图片

cd WALinuxAgent-2.2.38

ls -l

57.创建自定义CentOS映像并上传到Azure创建虚拟机(21V)_第47张图片

接着安装pip

sudo yum install python-pip

python package setuptools是安装Azure Linux Agent的先决条件

yum install -y python-setuptools

安装好python package setuptools后继续安装Azure Linux Agent

sudo python setup.py install

查看waagent运行状态

service waagent restart

查看waagent版本

waagent -version

57.创建自定义CentOS映像并上传到Azure创建虚拟机(21V)_第48张图片

创建一个新的非root账户,比如zjunsen

# useradd zjunsen

# passwd zjunsen

输入新密码(密码建议设置为符合Azure虚拟机创建时的复杂度要求)

再次输入新密码

让zjunsen加入root组

# usermod -G root zjunsen

# visudo

添加zjunsen可以执行sudo

57.创建自定义CentOS映像并上传到Azure创建虚拟机(21V)_第49张图片

最后运行以下命令对虚拟机执行通用化设置,在设置之前需要修改下网络配置,为什么要在关机之前的通用化之前来做就是怕找不到网卡

sudo vim /etc/sysconfig/network-scripts/ifcfg-eth0

57.创建自定义CentOS映像并上传到Azure创建虚拟机(21V)_第50张图片

编辑“/etc/resolv.conf”,添加Azure上的DNS服务器

sudo vim /etc/resolv.conf

修改如下

search pfa1hgkf53jujovxud25btaopc.shax.internal.chinacloudapp.cn

nameserver 168.63.129.16

clip_image053[1]

加下来就可以对CentOS通用化了,一般通用化使用waagent -deprovision+user或者waagent -deprovision

注:+user 参数还会删除上次预配的用户帐户(deprovision参数会禁用root账户);新建的其他root组的user账户依然可用

这里执行如下:

# sudo waagent -deprovision+user -force

# export HISTSIZE=0

# sudo shutdown -h 0

执行init 0或shutdown -h 0关机,在Hyper-V管理器中可以看到该虚拟机关机了,CentOS6.4 VHD就准备就绪可以上传到Azure了

clip_image054[1]

接下来切换到Azure门户上,创建一个资源组

57.创建自定义CentOS映像并上传到Azure创建虚拟机(21V)_第51张图片

接下来在这个资源组里创建一个存储账户

57.创建自定义CentOS映像并上传到Azure创建虚拟机(21V)_第52张图片

创建好以后会看到该存储账户有两组25个字符的访问密钥,这里我只需要用到KEY1的密钥

57.创建自定义CentOS映像并上传到Azure创建虚拟机(21V)_第53张图片

接下来创建容器

57.创建自定义CentOS映像并上传到Azure创建虚拟机(21V)_第54张图片

添加容器

57.创建自定义CentOS映像并上传到Azure创建虚拟机(21V)_第55张图片

设置专用

57.创建自定义CentOS映像并上传到Azure创建虚拟机(21V)_第56张图片

接下来上传VHD到Azure容器里,因为VHD文件比较大,这里采用Azcopy , 因为Azcopy 可以支持断点续传

Azcopy 下载地址:https://docs.azure.cn/zh-cn/storage/common/storage-use-azcopy?toc=%2fstorage%2ftables%2ftoc.json

通过Azcopy操作Azure存储可以参考https://docs.azure.cn/zh-cn/articles/azure-operations-guide/storage/aog-storage-how-to-use-azcopy

默认情况下,Azcopy 的安装位置:64-bit Window 为 C:\Program Files (x86)\Microsoft SDKs\Azure,32-bit Windows 为 C:\Program Files\Microsoft SDKs\Azure

使用Azcopy 将本地的文件上传到对应的存储账户下面的容器

执行命令格式为:AzCopy /Source:C:\myfolder /Dest:https://myaccount.blob.core.chinacloudapi.cn/mycontainer /DestKey:key /Pattern:abc.txt

在这里执行的命令是:(×××高亮部分按照您的实际情况修改)(该存储账户没有开启共享访问签名(新建存储账户默认是未开启))

备注:当 /Source 是 blob 容器或 blob 虚拟目录时,AzCopy 使用区分大小写匹配,而在所有其他情况下则使用不区分大小写匹配。

PS C:\Program Files (x86)\Microsoft SDKs\Azure\AzCopy> .\AzCopy.exe /Source:D:\Hyper-V\CentOS64\Cent64OS.vhd /Dest:https://vmosimage.blob.core.chinacloudapi.cn/mydisk/CentOS64.vhd /DestKey:/eAKlZpIy7sWO0AT3Hi4DV895mwHubHDqe+wbz0vJnbyes0f9oB4pCdKELZ3yvrLfjrqGjJwEYzpiioCO0EiGQ== /BlobType:page

红色字体的CentOS64.vhd是上传到Azure容器里的保存名字;最后一定要加/BlobType:page否则上传上去就是block blob,而不是适用于vhd的page blob

57.创建自定义CentOS映像并上传到Azure创建虚拟机(21V)_第57张图片

57.创建自定义CentOS映像并上传到Azure创建虚拟机(21V)_第58张图片

执行等待上传完成,因为支持断点续传,如果中断就再执行一下这条命令就今天继续上传(如果你上传了一半突然发现又要修改源vhd的内容,别忘了执行通用化设置后重新执行命令上传时选择No开始全新上传,而不是Yes断点续传之前的

57.创建自定义CentOS映像并上传到Azure创建虚拟机(21V)_第59张图片

也可以利用Windows Admin Center查看上传的状态

57.创建自定义CentOS映像并上传到Azure创建虚拟机(21V)_第60张图片

上传完成

57.创建自定义CentOS映像并上传到Azure创建虚拟机(21V)_第61张图片

在Azure门户上也可以看到上传好的该vhd文件

57.创建自定义CentOS映像并上传到Azure创建虚拟机(21V)_第62张图片

接下来就可以创建自定义映像了,在所有服务中选择映像

57.创建自定义CentOS映像并上传到Azure创建虚拟机(21V)_第63张图片

点击添加

57.创建自定义CentOS映像并上传到Azure创建虚拟机(21V)_第64张图片

设置名称,选择OS类型是Linux,选择刚才上传的自定义映像所在位置

57.创建自定义CentOS映像并上传到Azure创建虚拟机(21V)_第65张图片

选择账户类型是标准HDD还是标准SSD或高级SSD,当然标准HDD只能创建不带SSD的虚拟机型号,标准SSD可以创建带SSD磁盘的虚拟机型号,如D4s v2这样的。

57.创建自定义CentOS映像并上传到Azure创建虚拟机(21V)_第66张图片

映像创建好以后,这就是模板映像了,点击它进去

57.创建自定义CentOS映像并上传到Azure创建虚拟机(21V)_第67张图片

点击创建VM,可以根据这个模板映像创建基于这个CentOS6.4的多个提供不同业务的系统服务了

57.创建自定义CentOS映像并上传到Azure创建虚拟机(21V)_第68张图片

设置虚拟机的名称,大小,虚拟网络等等,然后创建,(在创建VM时建议使用本地新建账户(这里是zjunsen)一直的账户名和密码)成功后就可以看到公网IP和内网IP

57.创建自定义CentOS映像并上传到Azure创建虚拟机(21V)_第69张图片

接着就入站网络安全组开放22端口即可连接

57.创建自定义CentOS映像并上传到Azure创建虚拟机(21V)_第70张图片

到这里我就介绍完如何自定义Linux映像并上传后基于该映像创建虚拟机的全过程了。

PS:整个过程有一个不完美的地方就是在利用映像创建VM部署进行时会持续半小时最后提示没有通用化而部署失败,但实际虚拟机已经创建出来可以连接使用了,我个人认为影响不大,仅供参考。