最开始,Ninja 是用于Chromium 浏览器中,Android 在SDK 7.0 中也引入了Ninja。
Ninja 其实就是一个编译系统,如同make ,使用Ninja 主要目的就是因为其编译速度快。
Ninja 除了用于Chromium browser 和Android,也用于LLVM 和依赖CMake的Ninja 后端项目。
Ninja 主要是一个注重速度的小型编译系统,Ninja 加入其他编译系统的海洋之中,主要目的就是更加的快速。
主要有两个有别与其他编译系统的特点:
如果把其他的编译系统看作高级语言(例如C 语言),那么Ninja 目标就是汇编。
Ninja 包含描述任意依赖关系的最基本的功能。由于语法简单而无法表达复杂的决策。为此,Ninja 用一个单独的程序来生成input files。该程序(如autotools 项目中的./configure) 能分析系统的依赖关系,而且尽可能提前多做出策略,以便增加编译速度。
下面是Ninja 设计的目标:
其中总结出来两句话:
- convenient syntax for writing build files by hand. You should generate your ninja files using another program. This is how we can sidestep many policy decisions.
- built-in rules. Out of the box, Ninja has no rules for e.g. compiling C code.
- build-time customization of the build. Options belong in the program that generates the ninja files.
- build-time decision-making ability such as conditionals or search paths. Making decisions is slow.
Makefile默认文件名为Makefile
或makefile
,也常用.make
或.mk
作为文件后缀。Ninja 的默认文件名是build.ninja,其它文件也以.ninja
为后缀。 执行Makefile的程序,默认是GNU make,也有一些其它的实现。Ninja 的执行程序,就是ninja
命令。
在Android项目中,make
需要编译主机上安装,作为环境的一部分。 而ninja 命令则是Android平台代码自带。
$ find prebuilts/ -name ninja
prebuilts/build-tools/linux-x86/asan/bin/ninja
prebuilts/build-tools/linux-x86/bin/ninja
prebuilts/build-tools/darwin-x86/bin/ninja
$ ninja -h
usage: ninja [options] [targets...]
if targets are unspecified, builds the 'default' target (see manual).
options:
--version print ninja version ("1.7.2")
-C DIR change to DIR before doing anything else
-f FILE specify input build file [default=build.ninja]
-j N run N jobs in parallel [default=6, derived from CPUs available]
-k N keep going until N jobs fail [default=1]
-l N do not start new jobs if the load average is greater than N
-n dry run (don't run commands but act like they succeeded)
-v show all command lines while building
-d MODE enable debugging (use -d list to list modes)
-t TOOL run a subtool (use -t list to list subtools)
terminates toplevel options; further flags are passed to the tool
-w FLAG adjust warnings (use -w list to list warnings)
很多参数,和make
是比较类似的,比如-f
、-j
等,不再赘述。 有趣的是-t
、-d
、-w
这三个参数,最有用的是-t
。
$ ninja -t list
ninja subtools:
browse browse dependency graph in a web browser
clean clean built files
commands list all commands required to rebuild given targets
deps show dependencies stored in the deps log
graph output graphviz dot file for targets
query show inputs/outputs for a path
targets list targets by their rule or depth in the DAG
compdb dump JSON compilation database to stdout
recompact recompacts ninja-internal data structures
ninja -t clean是清理产物,是自带的,而make clean往往需要自己实现。 其它都是查看编译过程信息的工具,各有作用,可以进行复杂的编译依赖分析。
从Android 7开始,编译时默认使用Ninja。 但是,Android项目里是没有.ninja文件的。 遵循Ninja的设计哲学,编译时,会先把Makefile通过kati转换成.ninja文件,然后使用ninja 命令进行编译。 这些.ninja 文件,都产生在out/ 目录下,共有三类。
一类是build-*.ninja文件,通常非常大,几十到几百MB。 对make全编译,命名是build-
这里Android有一个bug,或者说设计失误。 mm、mma的Ninja文件,命名是build-
这个设计本身就有一些问题了,为什么不同模块不能共用一个总的Ninja文件? 这大概还是为了兼容旧的Makefile设计。 在某些Android.mk中,单模块编译与全编译时,编译内容截然不同。 如果说这还只能算是设计失误的话,那么mm与mmm使用不同的编译文件,就是显然的bug了。 二者相差一个下划线_,通过mv或cp,可以通用。
第二类是combined-*.ninja文件。 在使用了Soong 后,除了build-*.ninja之外,还会产生对应的combined-*.ninja,二者的*内容相同。 以下以AOSP的aosp_arm64-eng为例,展示out/combined-aosp_arm64.ninja文件的内容。
builddir = out
include out/build-aosp_arm64.ninja
include out/soong/build.ninja
build out/combined-aosp_arm64.ninja: phony out/soong/build.ninja
这类是组合文件,是把build-*.ninja和out/soong/build.ninja组合起来。 所以,使用Soong后,combined-*.ninja是编译执行的真正入口。
第三类是out/soong/build.ninja文件,它是从所有的Android.bp 转换过来的。
build-*.ninja是从所有的Makefile,用Kati转换过来的,包括build/core/*.mk和所有的Android.mk。 所以,在不使用Soong时,它是唯一入口。 在使用了Soong以后,会新增源于Android.bp的out/soong/build.ninja,所以需要combined-*.ninja来组合一下。
可以通过以下命令,单独产生全编译的Ninja文件。
make nothing
文件组织如下图所示:(其中的aosp_arm为
在产生全编译的Ninja文件后,可以绕过Makefile,单独使用ninja进行编译。
全编译(7.0版本),相当于make:
ninja -f out/build-aosp_arm64.ninja
单独编译模块,比如Settings,相当于make Settings:
ninja -f out/build-aosp_arm64.ninja Settings
在8.0以上,上面的文件应该替换为out/combined-aosp_arm64.ninja,否则可能找不到某些Target。
另外,还有办法不用输入-f参数。 如前所述,如同Makefile之于make,ninja默认的编译文件是build.ninja。 所以,使用软链接,可以避免每次输入繁琐的-f。
ln -s out/combined-aosp_arm64.ninja build.ninja
ninja Settings
用ninja进行单模块编译的好处,除了更快以外,还不用生成单模块的Ninja文件,省了四五分钟。
在以Ninja在实际编译中替换Makefile以后,Android在编译时更快了一些。 不过,在首次生成、或重新生成Ninja文件时,往往额外耗时数分钟,反而比原先使用Makefile更慢了。
在增量编译方面,原先由于其Makefile编译系统的实现问题,是不完善的。 也就是说,在make编译完一个项目后,如果再执行make,会花费较长时间重新编译部分内容。 而使用Ninja以后,增量编译做得比较完善,第二次make将在一分钟内结束。
除此之外,由于Ninja的把编译流程集中到了一个文件,并且提供了一些工具命令。 所以编译信息的提取、编译依赖的分析,变得更加方便了。
参考:
https://ninja-build.org/
https://github.com/ninja-build/ninja
相关文章:
理解 Android Build 系统
Android中Kati简介
Android中的Android.bp、Blueprint 和Soong简介