ARM平台NEON指令的编译和优化
ARM平台NEON指令的编译和优化
本文介绍了ARM平台基于ARM v7-A架构的ARM Cortex-A系列处理器(Cortex-A5, Cortex-A7,Cortex-A8, Cortex-A9, Cortex-A15)上的NEON多媒体处理硬件加速器针对C/C++语言、汇编语言和NEON intrinsics如何编译和优化，包含如何向量化、向量化的ARMCC和GCC编译器选项、NEON的汇编和EABI程序调用规范、如何在bare-metal和Linux操作系统上检测NEON硬件、如何指导编译器进行向量化NEON指令的优化等内容。
NEON向量化
基于ARM v7-A架构的ARM Cortex-A系列处理器(Cortex-A5, Cortex-A7, Cortex-A8, Cortex-A9, Cortex-A15)都可以选用NEON多媒体处理器加速程序运行，NEON是一种SIMD（Single Instruction Multiple Data）架构的协处理器，ARM的NEON处理器还可选配置成向量浮点VFPv3（Vector Floating-Point）指令集处理器。
常用的编译器选项配置
自动向量化选项
armcc编译器使用--vectorize选项来使能向量化编译，一般选择更高的优化等级如-O2或者-O3就能使能--vectorize选项。
gcc编译器的向量化选项-ftree-vectorize来使能向量化选项，使用-O3会自动使能-ftree-vectorize选项。
选择处理器类型
armcc编译器使--cpu 7-A或者--cpu Cortex-A8来指定指令集架构和CPU类型。
gcc编译器的处理器选项-mfpu=neon和-mcpu来指定cpu类型。如-mcpu=cortex-a5
选择NEON和VFP类型
gcc选择用-mfpu=vfpv3-fp16来指定为vfp协处理，而-mfpu=neon-vfpv4等就能指定为NEON+VFP结构。
选择浮点处理器和ABI接口类型
-mfloat-abi=soft使用软件浮点库，不是用VFP或者NEON指令；-mfloat-abi=softfp使用软件浮点的调用规则，而可以使用VFP和NEON指令，编译的目标代码和软件浮点库链接使用；
-mfloat-abi=hard使用VFP和NEON指令，并且改变ABI调用规则来产生更有效率的代码，如用vfp寄存器来进行浮点数据的参数传递，从而减少NEON寄存器和ARM寄存器的拷贝。
常用的CPU类型编译器选项
CPU类型
CPU类型选项
FP选项
FP + SIMD选项
备注
Cortex-A5
-mcpu=cortex-a5
-mfpu=vfpv3-fp16
-mfpu=vfpv3-d16-fp16
-mfpu=neon-fp16
-d16表明只有前16个浮点寄存器可用
Cortex-A7
-mcpu=cortex-a7
-mfpu=vfpv4
-mfpu=vfpv4-d16
-mfpu=neon-vfpv4
-fp16表明支持16bit半精度浮点操作
Cortex-A8
-mcpu=cortex-a8
-mfpu=vfpv3
-mfpu=neon
Cortex-A9
-mcpu=cortex-a9
-mfpu=vfpv3-fp16
-mfpu=vfpv3-d16-fp16
-mfpu=neon-fp16
Cortex-A15
-mcpu=cortex-a15
-mfpu=vfpv4
-mfpu=neon-vfpv4
常用的gcc组合编译器选项
Cortex-A15 with a NEON unit
arm-gcc -O3 -mcpu=cortex-a15 -mfpu=neon-vfpv4-mfloat-abi=hard -ffast-math -omyprog.exe myprog.c
Cortex-A9 with a NEON unit
arm-gcc -O3 -mcpu=cortex-a9 -mfpu=neon-vfpv3-fp16-mfloat-abi=hard -ffast-math -omyprog.exe myprog.c
Cortex-A7 without a NEON unit
arm-gcc -O3 -mcpu=cortex-a7 -mfpu=vfpv4-d16-mfloat-abi=softfp -ffast-math -omyprog2.exe myprog2.c
Cortex-A8 without a NEON unit
arm-gcc -O3 -mcpu=cortex-a8 -mfloat-abi=soft -c -o myfile.omyfile.c
NEON汇编和EABI程序调用规范
GNU assembler (gas) and ARM Compiler toolchain assembler(armasm)都支持NEON指令的汇编。但必须遵循ARMEmbedded Application Binary Interface (EABI)EABI的规范，即NEON寄存器的S0-S15 (D0-D7, Q0-Q3)用于传递参数和返回值，被调用函数内可以直接使用，不用保存；D16-D31 (Q8-Q15)则有调用函数来保存，被调用函数内可以不保存的随意使用；而S16-S31(D8-D15, Q4-Q7)则必须由被调用函数内部保存。对于调用传参规范则有，对于软件浮点，参数有R0~R3和堆栈stack传递，而硬件浮点，可以通过NEON寄存器来传递参数。
NEON硬件检测和使能
编译时指定NEON单元是否存在
ARM编译器(armcc)从4.0之后就支持在某些处理器和FPU的选项中预定义宏__ARM_NEON__， armasm的宏TARGET_FEATURE_NEON.
运行时指定检测NEON单元
OS内可以检测NEON单元是否存在，如Linux下cat /proc/cpuinfo看是否包含NEON或者VFP，如Tegra2 (双核 Cortex-A9 带 FPU), cat /proc/cpuinfo:
…
Features : swp half thumb fastmult vfp edsp thumbee vfpv3vfpv3d16
…
四核 Cortex-A9 带NEON单元
Features : swp half thumb fastmult vfp edsp thumbee neonvfpv3
…
另外可以查看/proc/self/auxv，这里会包含二进制格式的hwcap，可以通过AT_HWCAP来搜索到。HWCAP_NEON bit (4096).另外如Ubuntu的发布在路径/lib/neon/vfp下包含lib的NEON优化版本。
Bare-metal模式下使能NEON
#include
// Bare-minimum start-up code to run NEON code
__asm void EnableNEON(void)
{
MRC p15,0,r0,c1,c0,2 // Read CPAccess register
ORR r0,r0,#0x00f00000 // Enablefull access to NEON/VFP by enabling access to
// Coprocessors 10 and 11
MCR p15,0,r0,c1,c0,2 // Write CPAccess register
ISB
MOV r0,#0x40000000 // Switch onthe VFP and NEON hardware
MSR FPEXC,r0 // Set EN bit inFPEXC
}
下面的EnableNEON函数使能NEON协处理器；使用下面的编译选择就能在bare-metal下使能NEON
armcc -c --cpu=Cortex-A8 --debug hello.c -o hello.o
armlink --entry=EnableNEON hello.o -o hello.axf
系统运行时使能NEON
内核在遇到第一个NEON指令时会产生一个UndefinedInstruction的异常，这会让内核自动重启NEON协处理器，内核还可以在上下文切换时关闭NEON来省电。
Linux内核的NEON配置
图1. NEON的Linux内核配置
使能NEON，需要选择
Floating point emulation → VFP-format floating point maths
和 Floating pointemulation → Advanced SIMD (NEON) Extension
检查Linux的配置文件来确认内核是否使能NEON
zcat /proc/config.gz | grep NEON
看是否存在
CONFIG_NEON=y
确认处理器是否支持NEON
cat /proc/cpuinfo | grep neon
看是否有如下内容
Features : swp half thumb fastmult vfp edsp neon vfpv3 tlsvfpv4 idiva idivt
向量化NEON优化指南
避免指针混叠alias
C90不要求指针位置，不同指针可以指向相同的内存区域，C99中引入了__restrict关键字来表明只有这个指针能指向它工作的区域。
告诉编译器循环信息
如循环是否某个整数的整数倍，以方便向量化；如下表明循环次数是4的整数倍：
for(i=0 ; i < (len & ~3) ; i++)
{
。。。
}
for (i=0; i<(items*4); i+=1)
{
。。。
}
循环展开
#pragma unroll (n)
采用NEON Intrinsics
armcc, GCC/g++和llvm等编译器都支持 NEON C/C++ intrinsics，并且采用相同的语法规范。因而代码可以在各个编译器间共享。NEON Intrinsics的代码容易维护而且效率高。NEON Intrinsics采用新的数据类型，这些类型对应于D和Q寄存器。NEONIntrinsics写起来像是函数调用但对应于每一条NEON指令。编程NEON Intrinsics时不用考虑具体的寄存器分配和代码的schedule，pipeline流水安排等。但NEON Intrinsics往往不能产生想象的代码，性能上相比纯汇编要稍差一些。
减少循环内的相关性
如果当前迭代时使用的数据是上次迭代计算的结果，就产生了迭代间的相关性，可以拆分循环来减少相关。
向量化其他准则
短小的循环更容易让编译器实现自动向量化； 避免在循环内使用 break 退出循环 避免在循环内使用过多的条件语句，减少可能产生的条件跳转； 让循环次数尽可能是 2 的幂次 让编译器知晓循环次数，减少对循环次数为 0 等的判断； 循环内调用的函数尽量 inline 内联 使用数组 + 索引的方式访问比指针形式更容易向量化； 间接寻址 ( 多重索引 ) 不会向量化； 使用 restrict 关键字来告诉编译器没有重叠的内存区域；总结
本文介绍了ARM平台基于ARM v7-A架构的ARM Cortex-A系列处理器(Cortex-A5, Cortex-A7,Cortex-A8, Cortex-A9, Cortex-A15)上的NEON多媒体处理硬件加速器针对C/C++语言、汇编语言和NEON intrinsics如何编译和优化，包含如何向量化、向量化的ARMCC和GCC编译器选项、NEON的汇编和EABI程序调用规范、如何在bare-metal和Linux操作系统上检测NEON硬件、如何指导编译器进行向量化NEON指令的优化等内容。
参考
http://houh-1984.blog.163.com/
本文介绍了ARM平台基于ARM v7-A架构的ARM Cortex-A系列处理器(Cortex-A5, Cortex-A7,Cortex-A8, Cortex-A9, Cortex-A15)上的NEON多媒体处理硬件加速器针对C/C++语言、汇编语言和NEON intrinsics如何编译和优化，包含如何向量化、向量化的ARMCC和GCC编译器选项、NEON的汇编和EABI程序调用规范、如何在bare-metal和Linux操作系统上检测NEON硬件、如何指导编译器进行向量化NEON指令的优化等内容。