Detection of Individual Tree Crowns in Airborne Lidar Data

Abstract

激光扫描提供了一种收集林分信息的好方法。本文介绍了一种在落叶林和混合温带森林中的小足迹光检测和测距(激光雷达)数据中自动描绘单棵树的方法。在光栅化激光数据中,可能的树顶用局部最大值滤波器检测。之后,结合浇注算法(pouring algorithm)、基于知识的树木形状假设以及通过从树顶开始搜索向量来最终检测树冠边缘来描绘树冠。通过与地面测量的树冠投影和摄影测量描绘的树木进行比较来评估分割结果。分割算法适用于针叶林。然而,所实施的方法往往会合并落叶乔木茂密林分中的树冠。

Introduction

对于可持续森林管理,需要大量信息来规划未来的森林管理和记录过去十年的活动。通常需要树种和树种分布、木材体积、木材体积增量、平均树高等参数。在许多欧洲国家,这些与树木相关的参数是每十年进行一次森林清查的基础。目前,这些变量中的大部分是通过在实地调查中手动测量样本地块来估算的,因此,森林清查相当昂贵。在过去的几年中,通过开发基于遥感的库存系统,在降低成本方面付出了更多的努力。

机载激光雷达(光探测和测距)正在成为一种很有前途的技术,用于模拟森林的冠层,从而完成多项清查任务。 Brandtberg (1999) 以及 Hyyppä 和 Inkinen (1999) 证明,北欧国家林分中的单棵树木轮廓可以通过高密度激光数据检测到。 Popescu 等人(2002 年)使用基于冠层高度的可变窗口大小的局部过滤的激光雷达数据估计地块级树高,取得了良好的成功。 Persson 等人 (2002), Leckie 等人(2003) 和 Hyyppä 等人 (2000) 证明,可以根据机载激光雷达数据高精度地测量树高。 Yu 等人 (2003) 是第一个展示使用激光扫描仪数据对北方森林中的单棵树进行变化检测评估的人。

几位作者主要针对针叶林表明,机载激光雷达也是一种使用平均林分方法估算其他林分参数(如体积或平均树高)的好方法(Naesset,1997 年;Magnussen 和 Boudewyn,1998 年;Lefsky等人,1999 年)。然而,在温带森林的典型条件下,采用标准方法会遇到很多困难。由于具有不同生长行为的几种树种可以出现在一个林分中,因此计算林分参数需要先验了解茎数和树种分布。此外,在多样化的森林中,林分结果通常不足以用于许多欧洲国家制定的森林管理规划。特别是出于采伐管理目的,需要有关单棵树的信息。因此,单树勾画和树种分类似乎是在温带森林典型条件下使用遥感技术进行大规模森林清查的先决条件,特别是在计算木材体积、采伐和营林处理方案方面。单树描绘的第一种方法显示,针叶林具有多光谱图像(Gougeon,1995 年;Pollock,1996 年)以及激光雷达数据(Hyyppä 和 Hyyppä,2001 年;Persson 等人,2002 年;Brandtberg 等人,2003 年)或通过融合两种类型的数据(Popescu 等人,2004 年;Popescu 和 Wynne,2004 年)。

本文的目的是开发一种稳健的算法来检测和描绘适用于针叶林以及落叶林和混合林、垂直结构的温带林的树冠和树高。树冠的正确描绘是其他衍生参数(如树位、树高、树冠直径或树冠体积)的先决条件。即使是从多光谱数据中提取树种类型,也需要正确描绘树冠才能获得良好的结果(Koch 等人,2002 年)。由于在温带森林中树冠描绘仍然是一个需要改进的主题,本研究的重点是改进算法以改进密集和多层林分的树冠描绘。

多光谱数据与激光扫描仪数据的融合也是一个重要的研究目标,但不是本文的主题。还必须考虑到,基于激光扫描仪数据的信息提取将为飞行计划提供更大的灵活性。因此,对于数据提供者和用户来说,仅基于激光扫描仪数据的知识具有很高的优先级。

Study Areas

Detection of Individual Tree Crowns in Airborne Lidar Data_第1张图片

图 1. 测试地点的位置。

这两个研究区位于德国西南部,靠近弗莱堡市/布赖斯高市(图 1)。选择它们是为了尽可能多地涵盖林分的不同特征。第一个区域(“Mooswald”)位于弗莱堡西北部,占地 20 公顷,海拔约 200 米。年平均气温为 10°C,年总降水量为 850 毫米。这片区域森林由橡木混交林和洪泛平原多层森林组成,只有一个树龄为 30 年的花旗松(Pseudotsuga menziesii) 林除外。主要树种是英国橡树 (Quercus robur) 和角树 (Carpinus betulus),其他落叶树种的比例也在不断变化,例如红橡 (Quereus rubra)、白蜡树 (Fraxinus excelsior) 或挪威枫树 (Acer pseudoplatanus)。大多数林分以前都是按照标准作为矮林管理的。因此,树木的年龄很不均匀,森林结构丰富;树冠间隙与紧密互锁的树冠的非常密集的双层部分交替出现。选择这个试验地点提供了多层混交林结构情况。文章中描述的机载激光扫描仪数据调查并未关注如此复杂的森林情况。

第二个试验场(“Günterstal”)位于弗莱堡东南部。这是一个海拔500米至800米的70公顷山区。这片位于山下地带的地带性森林由长着冷杉和无柄橡树的大西洋山下海滩组成。年平均温度在 5.1°C 和 9.4°C 之间,具体取决于海拔高度,海拔高度在测试地点内有所不同。此外,年总降水量在 950 毫米和 1,800 毫米之间变化,具体取决于海拔高度。在这个站点内,出现了非常陡峭的斜坡。具体来说,植被主要由混合山林组成,这是这种气候的特征。树种主要是山毛榉(Fagus sylvatica,约占 60%)、冷杉(Abies alba,占 25%)和云杉(Picea abies,占 10%)。大多数林分的年龄参差不齐,很多都有下层林木。

Data

激光扫描数据是由TopoSys公司在2002年春夏期间用Falcon系统(TopoSys,2003)获得的。春季飞行的数据(阔叶树没有叶子)被用于计算精确的数字地形模型(DTM),而夏季捕获的数据被用于树木的描绘和树高的估计。 Toposys 系统的激光雷达传感器通过 127 根光纤发出激光脉冲,总脉冲频率为 83 kHz。记录每个脉冲的第一个和最后一个回波。 Mooswald 的平均高度为 400 米,Günterstal 的平均高度为 850 米,导致每个激光束的地面横截面直径(足迹)分别为 40 厘米和 85 厘米,平均点采样密度为 5 至10 点/平方米。由于测试点覆盖有多个重叠的激光条,因此实现了高达 20 个点/m2 的密集点分布。然而,由于传感器的结构,这些点以线状图案不规则地间隔开。据 TopoSys, Inc. 称,每个激光点的位置相对水平精度小于 0.5 米,相对垂直精度小于 0.15 米。

对于所有回波,反射物点的 (x、y 和 z) 位置都被存储。地面点 (DTM) 和冠层表面点均使用类似于 Elmkvist (2000) 开发的活动表面算法进行识别。开发的算法基于能量最小化过程,该过程引入具有内力和外力的表面。这表面充当磁性物体,会被激光点吸引,激光点也充当小磁铁。此外,表面会受到重力的影响。最后引入弹性强度作为内力。通过同时最小化所有这些力,通过迭代最小化过程实现平衡。此过程的最终结果是数字表面模型 (DSM) 或 DTM,具体取决于参数设置、使用的激光点和力作用的方向。该过程是通过将表面采样到规则网格中来完成的。这两个模型存储在二维光栅图像中,其中灰度值表示高度。单独的高度分辨率为 1 厘米。

作为参考数据,98 棵样本树(49 棵花旗松和 49 棵阔叶树(主要是角树))的茎坐标、胸高直径和树冠投影已在 Opfingen 的五个均匀分布的地块中进行了地面测量。冠投影已被构造为来自八个正交投影冠边缘点的多边形。这些点代表典型的形状,但不考虑极端分支。因此,它是一种主观方法。两个数据集都被地理编码到相同的参考系统(高斯-克吕格坐标)。由于无法提供高海拔试验场“Günterstal”的地面投影数据,因此已使用立体 CIR 图像进行地面测绘。大约 80% 的面积被立体测量并用作参考数据。由于航空照片中的遮挡和阴影,以及不同数据类型之间的对象匹配,航空照片数据与激光扫描仪数据的比较问题是众所周知的,但没有其他方法可以验证。此外,基于航拍照片的单树勾画是一种公认​​的方法,可以很好地估计优势树的数量,因此至少有了这个数据库,就可以验证优势树的评估。在本节中,随机选择了五块地块(每块面积 10,000 平方米)进行进一步分析。

Data Processing and Analysis

使用图像处理系统 HALCON (MVTec, 2003) 的库,用 C++ 实现计算机分析。

Preprocessing

首先,通过从 DSM 的高度值中减去每个像素处 DTM 的高度值来计算数字树冠高度模型 (DCHM),以便可以直接从 DCHM 中获取树高。 DCHM 绘制了树冠的粗糙表面。特别是,大型阔叶树在其树冠地形中具有较大的高度变化。一个树冠可能有几个较小的顶部,这使得单棵树的检测变得困难。 DCHM 的高斯平滑消除了微小的高度偏差,但如果图像平滑得太强烈,小树也可能会丢失。

Detection of Individual Tree Crowns in Airborne Lidar Data_第2张图片

图 2. Digital Crown Height 模型分为两个高度等级,并使用调整后的强度进行平滑处理。

为了减少此类问题,平滑的强度适应树木的高度。使用阈值运算符,DCHM 分为两个高度等级(低 20 米的树木和高 20 米的树木)。一类区域内的较小孔被关闭以减少边缘效应。每个高度类分别用高斯函数过滤(较低的树分别为 σ = 0.81 \sigma=0.81 σ=0.81和较高的树分别为 σ = 2.0 \sigma=2.0 σ=2.0),然后合并两部分(图 2)。通过对初步分割结果的视觉判断,已经在当前数据的预测试中确定了最佳的高度等级数、高度阈值和平滑强度 (Heyder, 2003)。

Crown Delineation

在平滑的 DCHM 中,使用局部最大值过滤器检测树顶。如果一个像素的所有邻居(在 4 个连接的邻域中)都具有较低的高度值,或者如果具有相同高度(“高原”)的某些连接像素的所有邻居都具有较低的高度值,则像素计为局部最大值。从那些局部最大值开始,只要存在具有较低或相同高度值的相邻像素(“浇注”算法,已在 HALCON 中实现),就会扩展区域。 “高谷”中的重叠区域最终平均分配给所有涉及的树。该算法类似于将水倒在山上,因此类似于倒置的经典分水岭算法 (Soille, 1999)。浇注算法已经生成了树冠实际形状的第一个近似值(图 3)。

但是,仍然存在大量明显“错误”的片段。有些区域太小而不能成为一棵树,有些区域的形状不太可能属于一棵树,有些区域之间的空间关系不寻常,有些区域覆盖了一棵树以及相邻的树冠间隙。执行以下步骤以消除此类错误并改善分割结果。

为了根据每棵树的高度调整后续步骤的阈值,树冠区域首先根据树顶的高度分为两组。从现在开始,超过 22 米的树木被称为“高树”,低于 22 米的被称为“低树”。

从假设(森林清查指令)出发,树木具有特定的高度相关的最小面积,选择面积低于 3   m 2 3 \mathrm{~m}^2 3 m2 的高树和面积低于 1   m 2 1 \mathrm{~m}^2 1 m2 的低树。对于这些区域中的每一个,选择具有最长公共边界的相邻区域并将其与该相邻区域合并(图 4)。两棵树的较高顶端成为新树的顶端。

此外,我们假设树顶彼此之间有一定的最小距离。我们为低树选择了 1 m,为高树选择了 2 m。如果两个树顶在此距离内,则合并相应的树冠段(图 5)。为了避免在非常年轻的小树林中出现问题,在分割算法的每一步中只能将四个原始区域合并为一个新区域。

Detection of Individual Tree Crowns in Airborne Lidar Data_第3张图片

图 3.“倾倒”算法的结果。从局部最大值开始,只要存在较低的灰度值,就会扩展区域。树木区域内的微小区域是最大值或高原。

Detection of Individual Tree Crowns in Airborne Lidar Data_第4张图片

图 4. 一棵非常小的树(白色边界线)与具有最长公共边界的相邻树区域合并。结果是一棵新树,由标有黑色边框线的两个树区域组成。对于树顶,选择两个合并区域的较高顶部。

经过前面的划定步骤,仍然存在无法分离的树群。椭圆组是通过最小面积和区域的等值线(拟合椭圆的两个半径的商)的组合来识别。如果一个区域的长度至少是其宽度的2.5倍,并且至少是其高度等级的最小面积的3倍,它就被标记为一个群。这些群落被分解,类似于Straub和Heipke(2001)的方法,该方法是为定居点内的树群开发的(图6)。对于每个树群,检测出最大的内圈并从该区域中减去。然后,确定剩余区域的最大内圈并减去,以此类推,直到该圈的面积低于高度等级的双倍最小面积。随后,只要新旧边界像素之间没有超过60厘米的高度差异,圆圈就会扩大,直到新区域相互接触或达到原始组的边界。

Detection of Individual Tree Crowns in Airborne Lidar Data_第5张图片

图 5. 显示了四个区域,它们由深灰色线包围,中间由白线包围。四个非常小的黑点代表四个树顶。如果两个片段的局部最大值(黑点)靠得很近(低树小于 1 m,高树小于 2 m),则合并相应的区域(白色)。在这种特殊情况下,四个区域合并为一个新区域。选择最高的树顶作为合并树的树顶。

单一树木检测算法的最后一部分是确定实际的树冠边缘,将一棵树与邻近的树冠间隙或邻近的林下树木分开。它是基于弗莱堡大学HighScan项目(Hyyppä等人,2002年,Friedländer 2002年)中开发的算法,即用搜索矢量检测树冠的想法,但与这种方法相反,它只是用于确定基于先前分割结果的最终树冠边缘。它只减少了树的面积,并没有扩大它。图7给出了这种算法的一个例子。从树顶开始,计算到每个边界点的向量。在每个矢量上以一个像素宽的步骤进行,在这些点上的树冠的坡度被测量为两点之间的高度差。如果这个高度差每0.5米的距离超过2.5米,矢量就会中断,并产生一个新的边界点。冠状边缘被移到里面。偶尔出现的离群点随后被删除。图8总结了整个分割过程。

Assessment of the Segmentation and Tree Type

位于陆地或摄影测量地块之一内的每棵自动检测到的树都在视觉上分为以下类别之一(Leckie 等人,2003 年):

  • 正确描绘
  • 令人满意的描绘(一棵自动检测到的树对应一棵参考树,但两棵树的面积重叠不到 60%)
  • 合并的树(在自动描绘的树中有多个参考树)
  • 分割树(一个参考树中有多个自动描绘的树)
  • 未找到(存在参考树,但没有相应的自动描绘树)

每棵自动检测到的树只计算一次。

对于基于数字森林数据库的所有分段树,执行针叶树、年轻和老阔叶树三类的分配。

Results and Discussion

分割结果与参考树的比较给出了以下结果(表 1)。对于 49 棵地面测量的道格拉斯冷杉 (Pseudotsuga menziesii),发现了47棵自动检测到的树。其中 87.3% 的识别正确或至少令人满意(图 9)。主要错误是遗漏了一些非常小的树。树冠面积被高估:参考树的平均树冠面积为 8.2 m2,而分段树为 11 m2。对应49棵阔叶参考树(Carpinus betulus, Acer pseudoplatanus, Fraxinus excelsior),只找到30棵自动划定的树。其中,50%的描述良好或令人满意,43.3%包括多个合并的参考树。合并后的树主要将次优势树与相邻的优势树组合在一起。部分优势树构建了一个密集、紧密、均匀的树冠,无法分离。图10显示了一个示例图的结果。与摄影测量的参考树冠相比,61.7%的树木被描绘为正确或令人满意,25.6%合并了两棵或更多参考树,4.2%被分裂;未检测到39棵参考树 (8.5%)。

Detection of Individual Tree Crowns in Airborne Lidar Data_第6张图片

图 6. 椭圆树组 (a) 通过减去内圆 (b) 和结果区域的后续扩展 © 来分离。

Detection of Individual Tree Crowns in Airborne Lidar Data_第7张图片

图 7. 为了将树木与相邻的树冠间隙分开 (a),创建了从树顶到每个边界点的向量 (b)。如果此向量上两点之间的高度差超过固定阈值,则会生成一个新的边界点(黑色)(c)。

针叶树种的分割结果非常令人鼓舞。几乎所有优势树都被发现,树冠轮廓非常接近地面测量的树冠投影。与地面测量的树冠多边形相比,树冠的边缘有时甚至更精确,尽管树冠面积被高估了。必须考虑到,现场的树冠投影必须处理不确定性,因此树冠面积的真实值可能介于两个测量值之间。对于落叶树种,自动分割结果明显低估了树木数量;许多参考树被合并。这部分是由于没有找到次优势树(从林务员的角度来看这不是很重要),但也有一些优势树冠被合并了。无法分离具有均匀高度分布的非常密集生长的主要角树。然而,如果主要落叶树的树冠没有紧密互锁,分割结果会大大改善。可能更复杂地适应冠层条件的过滤器强度将改善分割结果。

Conclusions

激光雷达数据可以在小规模森林清查中发挥重要作用,尤其是在推导树高和林分体积方面。在混交林中,单棵树的描绘和分类是必要的。如本文所示,自动分割适用于针叶林和更开阔的落叶林。树冠面积略有高估,但正确找到了大多数树木的数量和位置。只有在检测非常小或被抑制的树木时才会出现问题。在茂密的落叶林中,树冠紧密相连、均匀,很难将树冠彼此分开。因此,茎数被低估了。先进的全波形激光雷达系统与多光谱相机相结合,例如 IGI Litemapper 5600(Hug 等人,2004 年),可以改善此类林分中的茎数。来自此类系统的数据信息的增加是巨大的,从数据中选择相关信息将是未来的挑战。另一种可能性是在冬季或春季进行激光雷达注册。优点是更多的激光点将从树冠和/或树干内反射,因此,更好的树木分离可能是可能的。随着描绘算法的进一步发展,也​​可能会有一些改进。但即使对所有树干的评估不完整,激光雷达也将成为未来几年支持小规模清查的有效手段,因为对所提供的主要树木信息的合理正确和快速评估已经为推导提供了宝贵的基础可持续森林管理框架所需的森林参数。此外,正确描绘景观中的单棵或散落树木对于许多管理任务也具有很高的价值。

表 1. 与陆地或摄影测量的参考树相比的分割结果

Detection of Individual Tree Crowns in Airborne Lidar Data_第8张图片
Detection of Individual Tree Crowns in Airborne Lidar Data_第9张图片

图 8. 分割步骤。

Detection of Individual Tree Crowns in Airborne Lidar Data_第10张图片

图 9. 地面测量的道格拉斯冷杉树冠投影(黑色)和相应的分割结果(白色)。

Detection of Individual Tree Crowns in Airborne Lidar Data_第11张图片

图 10. 落叶树(黑色)的树冠投影以及相应的分割结果(白色)。

论文链接

References

Brandtberg, T. 1999. Automatic Individual Tree-based Analysis of High Spatial Resolution Remotely Sensed Data, Ph.D. dissertation, Acta Universitatis, Agriculutae Sueciae, Silvestria 118, Swedish University of Agricultural Sciences, Uppsala, Sweden.

Brandtberg, T., T.A. Warner, R.E. Landenberger, and J.B. McGraw, 2003. Detection and analysis of individual leaf-off tree crowns in small footprint, high sampling density lidar data from the eastern deciduous forest in North America, Remote Sensing of Environment, 85:290–303.

Friedlaender, H., 2002. Die Anwendung von flugzeuggetragenen Laserscannerdaten zur Ansprache dreidimensionaler Strukturelemente von Waldbeständen, Ph.D. dissertation, University of Freiburg, Freiburg, Germany, 64 p.

Elmqvist, M., 2000. Automatic Ground Modelling using Laser Radar Data, Master thesis, Linköping University, Linköping, Sweden, 30 p.

Gougeon, F., 1995. A crown-following approach to the automatic delineation of individual tree crowns in high spatial resolution aerial images, Canadian Journal of Remote Sensing, 21(3): 274–284.

Heyder, U., 2003. Automatische Delinierung und Klassifizierung von Bäumen aus Laser- und Multispektraldaten, Diploma-Thesis, University of Freiburg, Freiburg, Germany, 87 p.

Hug, C., A. Ullrich, and A. Grimm, 2004. Litemapper 5600 - A waveform digitizing lidar terrain and vegetation mapping system, Proceedings of the ISPRS Working Group VIII/2, Laser Scanners for Forest and Landscape Assessment, Volume XXXVI, Part 8/W2:24–29 Hyyppa, J., and M. Inkinen, 1999. Detecting and estimating attributes for single trees using laser scanner, Laser Radar Technology and Applications IV, 3707:57–69.

Hyyppä, J., M. Schardt, H. Haggrén, B. Koch, U. Lohr, H.U.

Scherrer, R. Paananen, H. Luukkonen, M. Ziegler, H. Hyyppä, U. Pyysalo, H. Friedländer, J. Uuttera, S. Wagner, M. Inkinen, A. Wimmer, A. Kukko, E. Ahokas, and M. Karjalainen, 2001.

HIGH-SCAN: The first European-wide attempt to derive singletree information from laserscanner data, The Photogrammetric Journal of Finland, 17:58–68.

Hyyppä, J., and H. Hyyppä (editors), 2001. HIGH-SCAN – Assessing Forest Stand Attributes by Integrated Use of High Resolution Satellite Imagery and Laserscanner – Final Report, ENV4-CT980747, EU-Kommission, DG XII.

Detection of Individual Tree Crowns in Airborne Lidar Data_第12张图片

你可能感兴趣的:(3D实例分割,人工智能,python,算法,3D实例分割,树木分割)