GF1、2、6数据(批量)处理提速——RSD 3.0.5

GF1、2、6数据(批量)处理提速——RSD 3.0.5

 

事情起由于GF6庞大的数据体量,我发现GF6 WFV正射校正或者GF6 PMS融合的处理时间竟然达到以小时计。浪费了很多时间,所以做一下提速。

RSD是未经优化的,也没有打开多核和GPU处理。本次对GF1、2、6数据(批量)处理融合等打开了多核处理,提高了一些处理效率。

下面是提速后的3.0.5版批量处理GF数据的试验结果。使用的电脑是一台DELL笔记本,i7 7700 2.8 32G 2T。

1. 加载、正射校正一景GF1 MSS 用时17秒(未导出磁盘文件)

GF1、2、6数据(批量)处理提速——RSD 3.0.5_第1张图片

 

 

2. 正射校正一景GF1 B、C、D星数据用时约1分钟(未导出磁盘文件)

GF1、2、6数据(批量)处理提速——RSD 3.0.5_第2张图片

 

3. 批量大气校正/正射校正9景GF1A MSS用时18分钟,每景约2分钟

GF1、2、6数据(批量)处理提速——RSD 3.0.5_第3张图片

GF1、2、6数据(批量)处理提速——RSD 3.0.5_第4张图片

 

4. 批量正射校正12景高分2号多光谱数据用时22分钟,每景不到2分钟

GF1、2、6数据(批量)处理提速——RSD 3.0.5_第5张图片

 

5. 批量处理12景高分2号多光谱数据,正射校正+ 融合,用时7小时,每景约35分钟

GF1、2、6数据(批量)处理提速——RSD 3.0.5_第6张图片

 

6. 正射校正GF6 WFV 这个大怪物大约需要20分钟

GF1、2、6数据(批量)处理提速——RSD 3.0.5_第7张图片

 

7. 批量正射校正/融合2景GF6 PMS 用时3小时,平均每景1.5个小时。自3点03分开始至6点10分完成。这个太慢了!

GF1、2、6数据(批量)处理提速——RSD 3.0.5_第8张图片

 

 

说明:

  • 批量处理的大部分时间都浪费在磁盘存取上,有条件的建议上RAID0。速度有望进一步提升。
  • RSD对庞大的数据集是打碎分布式存储在LAN上的,单机时效率优势不明显。
  • RSD优化和增加GPU支持还能提高处理速度。

 

 

 

如何进行GF系列卫星数据的批量处理请参阅:

https://blog.csdn.net/gordon3000/article/details/88010069

https://blog.csdn.net/gordon3000/article/details/88048314

https://blog.csdn.net/gordon3000/article/details/88051717

https://blog.csdn.net/gordon3000/article/details/88071085

https://blog.csdn.net/gordon3000/article/details/88544810

 

 

RSD 软件下载在:https://pan.baidu.com/s/1T-LBvaD_zVCwJsGf_hCyCg

3.0.5版提供对上述支持。

 

欢迎大家实际验证和多提批评建议。

 

 

RSD新增了V3版本,这是为企业用户特别设计的。对于面向个人用户的免费V2版还仍然照常更新和维护,不影响大家使用。个人用户也可以下载和试用V3,只是在使用期限上对个人用户进行了一些限制。

 

 

详情加企鹅群136965427,在这里解答和讨论有关遥感数据处理和RSD平台的有关技术问题。

 

 

 

 

你可能感兴趣的:(GF1、2、6数据(批量)处理提速——RSD 3.0.5)