遥感大数据处理第23页

Airflow填坑 - 生产环境实战，开始时间与周期的设置（没看的小伙伴抓紧了）

首先，介绍一下需求在大数据处理阶段，也就是数据的ETL，我们通过公司自己开发的平台，将各个业务流程模型化，模型=输入算子+数据处理算子（SQL化，底层为sparksql）+输出算子，类似于这种模型，代表一个个的业务

冯JK·2023-10-03 05:20

大选择核网络在遥感目标检测中的应用

摘要论文链接：https://arxiv.org/pdf/2303.09030.pdf最近关于遥感目标检测的研究主要集中在改进有向边界框的表示，但忽略了遥感场景中呈现的独特先验知识。

AI浩·2023-10-03 01:08

Arcgis快速计算NDVI

二、操作步骤首先准备好影像打开窗口-影像分析点击左上角点击确定（发现自己使用的遥感影像不对劲，是计算好了的NDVI，然后下面的步骤中换了一张。）然后点击树叶按钮，生成NDVI

海绵波波107·2023-10-02 19:59

Arcgis提取玉米种植地分布，并以此为掩膜提取遥感影像

Arcgis提取玉米种植地分布上，并以此为掩膜提取遥感影像一、问题描述因为之前反演是整个研究区，然而土地利用类型有很多类，只在农田或者植被上进行反演，需要去除水体、建筑等其他类型，如何处理得到下图中只有耕地类型的效果图呢

海绵波波107·2023-10-02 19:27

消息队列RabbitMQ学习笔记

一些需要处理的信息缓存在消息队列，这样就不会导致一个子系统出现问题而整个系统异常3.异步处理2.MQ分类1.ActiveMq，2.KafKa,大数据处理常

junius9·2023-10-02 18:04

图像识别技术在不同场景下有哪些应用？

图像识别技术在不同场景下的应用包括：遥感图像识别：航空遥感和卫星遥感图像通常用图像识别技术进行加工以便提取有用的信息。

matlabgoodboy·2023-10-01 11:18

ICCV 2023 超分辨率（super-resolution）方向上接收论文总结

目录ICCV2023图像超分轻量化超分盲超分BurstSRReference-Based特殊场景遥感医学视频超分总结参考资料ICCV2023官网链接：https://iccv2023.thecvf.com

yyywxk·2023-10-01 10:33

1970年代末期（1980年）、1980年代末期（1990年）、1995年、2000年、2005年、2010年、2015年、2018年、2020年数据中国多时相土地利用现状数据库

简介中国土地利用遥感监测数据来源于中国多时相土地利用现状数据库，经过多年的积累而建立的覆盖全国陆地区域的数据库。

此星光明·2023-10-01 09:42

遥感图像分析：Seeing Beyond the Patch: Scale-Adaptive Semantic Segmentation of High-resolution Remote Sens

,SunanShi,JunjueWang,YanfeiZhong作者单位：WuhanUniversity论文链接：http://arxiv.org/abs/2309.15372v1内容简介：1）方向：遥感图像分析

学术菜鸟小晨·2023-09-30 16:33

道路分割：Leveraging Topology for Domain Adaptive Road Segmentation in Satellite and Aerial Imagery

3）背景：从遥感图像中准确分割道路的技术对于诸如自动驾驶汽车、城

学术菜鸟小晨·2023-09-30 16:03

【空间-光谱联合注意网络：多时相遥感图像】

ASpatial–SpectralJointAttentionNetworkforChangeDetectioninMultispectralImagery（一种用于多光谱图像变化检测的空间-光谱联合注意网络）变化检测是通过比较双时相图像来确定和评估变化，这是遥感领域的一项具有挑战性的任务

小郭同学要努力·2023-09-30 08:26

Spring | 事务原理与实践 - 声明式事务及编程式事务

引言在多用户并发操作和大数据处理的现代软件开发领域中，事务管理已成为确保数据一致性和完整性的关键技术之一。

Kfaino·2023-09-30 05:42

Elasticsearch数据存储机制及其在大数据中的应用

Elasticsearch是一款开源的分布式搜索和分析引擎，被广泛应用于大数据处理和实时数据分析场景。

雨中徜徉的思绪漫溢·2023-09-30 04:57

遥感图像匹配(高分4匹配Landsat8)-Python+Opencv/SIFT+GDAL

高分系列遥感影像的一个问题是难以进行精准的几何校正，通常是在专业软件（如ENVI）中处理，需要借助标准影像手动选择地面控制点来进行校正，操作比较复杂。

KilllerQueen·2023-09-30 00:26

地表温度反演

遥感可以提供二维陆面温度分布信息并且可以快速同步地获取大面积区域地表温度。

beryl511·2023-09-29 15:57

dom影像图形成数字地形图_基于MapMatrix的数字正射影像图制作

【关键词】MapMatrix数字高程模型数字正射影像图MapMatrix系统是基于航空摄影，卫星遥感，外业等数据进行多源空间信息综

qqc1024·2023-09-29 11:41

介绍大数据处理架构Hadoop以及其生态系统

Hadoop简介Hadoop是一个开源的、可运行于大规模集群上的分布式计算平台，它实现了MapReduce计算模型和分布式文件系统HDFS等功能，在业内得到了广泛的应用，同时也成为大数据的代名词，借助于Hadoop，程序员可以轻松的编写分布式并行程序，将其运行于计算机的集群上，完成海量数据的存储与处理分析。Hadoop的特点1.高可靠性采用冗余数据存储方式，Hadoop采用分布式存储方式，即使一个

转身丶即天涯·2023-09-29 04:40

中国沿海水产养殖空间分布数据集（1990-2022）

4年间隔的遥感信息提取中国沿海水产养殖空间分布数据集（1990-2022）人口增长引起水产品需求快速增加，而野生捕捞产量受环境承载力的限制趋于饱和，这使得水产养殖业在过去数十年间迅速发展。

地理探险家·2023-09-28 20:56

走心分享！天津诚筑说Java大数据培训我该如何选择？

而Java大数据则是基于Java语言来进行大数据处理和分析的技术，是在Java的基础上发展而来的。

qq_38453958·2023-09-28 04:55

Scala的小总结和计算信息熵

考虑到python的性能和java代码的繁复性,以及公司特有的jar包没有python版本，便开始使用scala进行大数据处理。

Dotartisan·2023-09-28 03:44

1992-2021年省市县经过矫正的夜间灯光数据（GNLD、VIIRS）

4、指标解释：夜间灯光是一种遥感数据，是在卫星上通过传感器探测到的夜晚地球的灯光、火光等图

m0_71334485·2023-09-28 03:51

目标检测算法改进系列之Backbone替换为LSKNet

LSKNetLargeSelectiveKernelNetwork（LSKNet）可以动态地调整其大空间感受野，以更好地建模遥感场景中各种物体的测距的场景。

我悟了-·2023-09-28 03:07

WRFDA资料同化实践技术应用

资料同化新方法的快速发展，气象常规资料、卫星遥感观测和大气环境等多种资料日益增加，为资料同化的有效应用奠定了坚实的科学基础，也导致许多新的复杂科学问题，增加了实际应用的难度。为有效提升广大科研、业务人

Mr.靳靳477302280·2023-09-27 23:47

基于MATLAB的数字图像处理（三）——地物提取与变化检测

在图像处理上，常常使用各种指数，例如：归一化差分植被指数归一化差分水体指数如何通过MATLAB实现通过各类指数提取对应地物，是遥感图像处理中常见的问题。

SkyStarfall·2023-09-27 12:19

MATLAB地理数据处理 25：植被物候提取及分析模型优化（Savitzky-Golay）

物候提取模型优化1.前提2.MATLAB代码1.前提之前我写过一篇使用Savitzky-Golay处理遥感数据，获取地面物候信息的MATLAB代码：Python地理数据处理十七：植被物候提取和分析（Savitzky-Golay

Amyniez·2023-09-27 12:49

常用遥感SIF和GPP数据集

]Remotesensingofsolar-inducedchlorophyllfluorescence(SIF)invegetation:50 yearsofprogress[2]日光诱导叶绿素荧光遥感反演及碳循环应用进展

柚柚柚子爱吃葡萄柚·2023-09-27 12:18

Spark集成ClickHouse(笔记)

前言：在大数据处理和分析领域，Spark是一个非常强大且广泛使用的开源分布式计算框架。而ClickHouse则是一个高性能、可扩展的列式数据库，特别适合用于实时分析和查询大规模数据。

小辉懂编程·2023-09-27 11:16

计算机竞赛深度学习卫星遥感图像检测与识别 -opencv python 目标检测

文章目录0前言1课题背景2实现效果3Yolov5算法4数据处理和训练5最后0前言优质竞赛项目系列，今天要分享的是**深度学习卫星遥感图像检测与识别**该项目较为新颖，适合作为竞赛课题方向，学长非常推荐！

Mr.D学长·2023-09-27 08:45

modis数据_基于OCO2、MODIS卫星数据以及再分析资料生产的全球0.05分辨率日光诱导叶绿素荧光产品...

估算全球GPP的方法主要包括遥感光能利用率模型、机理过程模型和数据驱动模型。目前用不同的方法估算全球GPP具有较大的不确定性，因此需要一个更独立有效的数据来校准这些模型。过去十年内，一个最新出现

weixin_39528366·2023-09-26 19:11

安卓intent跳转界面传递大数据处理

android.os.TransactionTooLargeException:dataparcelsize562012bytes传递大数据异常针对安卓intent传递大数据问题，我也是最近才遇到，网上找了各种方法，如今分享一下：首先新建一个数据类：importandroid.os.Binder;/***应对跳转考试答题页intent传递大数据时候*/publicclassBigBinderext

mawlAndroid·2023-09-26 13:29

遥感数字图像处理实习1：图像读写与直方图

编译环境：MATLAB2018B1、tiff文件（1）图像读取im=imread('D:\GF2.tif');%读取图像或[A,R]=geotiffread('D:\GF2.tif');%读取带地理参考的遥感影像读取结果

名字不长就七字·2023-09-26 11:19

支持向量机基本原理，Libsvm工具箱详细介绍，基于支持向量机SVM的遥感图像分类

目录支持向量机SVM的详细原理SVM的定义SVM理论Libsvm工具箱详解简介参数说明易错及常见问题完整代码和数据下载链接：基于SVM的遥感图像分类识别，基于支持向量机SVM的遥感图像分类识别（代码完整

神经网络机器学习智能算法画图绘图·2023-09-26 10:17

【多尺度无监督:Pansharpening】

Mun-GAN:AMultiscaleUnsupervisedNetworkforRemoteSensingImagePansharpening(Mun-GAN：一种多尺度无监督遥感图像泛锐化网络)在遥感图像融合中

小郭同学要努力·2023-09-26 09:01

PySpark简介、搭建以及使用

PySpark中使用匿名函数加载本地文件PySpark中使用SparkSQLSpark与Python第三方库混用PandasDF与SparkDF使用PySpark通过图形进行数据探索一、PySpark简介使用场景大数据处理或机器学习时的原型

菜鸟也学大数据·2023-09-26 08:59

【Python】PySpark 数据处理 ① ( PySpark 简介 | Apache Spark 简介 | Spark 的 Python 语言版本 PySpark | Python 语言场景 )

的Python语言版本PySpark3、PySpark应用场景4、Python语言使用场景一、PySpark简介1、ApacheSpark简介Spark是Apache软件基金会顶级项目,是开源的分布式大数据处理框架

韩曙亮·2023-09-26 08:25

python大数据书籍推荐-大数据入门书籍推荐《Python 大数据基础》

weixin_39527078·2023-09-25 21:53

气象数据免费下载网站汇总

本文对目前主要的气象数据获取网站加以整理与介绍，若需其它GIS领域数据（如遥感影像数据、土地土壤数据、农业数据等），大家可以点击上方专栏查看，也可以看这一篇汇总文章：https://bl

疯狂学习GIS·2023-09-25 19:30

大数据面试题：Flink延迟数据是怎么解决的

一、什么是延迟数据大数据处理过程中Join的场景太多太多了，几乎所有公司的APP都会涉及到两条流数据之间的维度拼接，将表变宽等场景，避免不了进行多流Join操作。

后季暖·2023-09-25 16:12

2019-4-17晨间日记

啊……任务清单今日完成的任务，最重要的三件事：①看了几篇老师发的论文，找到了一点头绪；②早上去听了讲座，感觉收获很多，是关于《农业遥感》的；③日更改进：无论如何都要日更，看书，长知识

紫薇忘了水葫芦·2023-09-24 17:24

从零基础到精通的Python学习路线（附教程）

像信息安全，大数据处理，数据可视化机器学习，物联网开发，各大软件的API，桌面应用，也都需要P

Python秒杀·2023-09-24 11:02

激光雷达技术详解：MATLAB代码实践与遥感测距原理通俗解析

第一部分：激光雷达技术简介激光雷达，也被称为LiDAR（LightDetectionandRanging），是一种遥感技术，通过发射激光脉冲并接收反射回来的信号来测量目标与雷达之间的距离。

m0_57781768·2023-09-24 06:28

目标检测YOLO实战应用案例100讲-基于YOLO的遥感目标检测（续）

目录3.4YOLOv33.5YOLOv43.6YOLOv5改进的YOLOv4算法4.1TripleLoss损失函数的应用

林聪木·2023-09-24 05:16

Python计算温度植被干旱指数（TVDI）

温度植被干旱指数TVDI(TemperatureVegetationDrynessIndex)是一种基于光学与热红外遥感通道数据进行植被覆盖区域表层土壤水分反演的方法。

Jason9510·2023-09-24 04:19

自主研究，开发并产业化的一套UWB精确定位系统源码 UWB源码

UWB定位系统研发团队依托在移动通信，雷达，微波电路，云计算与大数据处理等专业领域的多年积累，自主研究，开发并产业化的一套UWB精确定位系统，最高定位精度可达10cm，具有高精度，高动态，高容量，低功耗的优点

淘源码d·2023-09-24 04:34

在Arcgis及ArcgisPro中加载全国亚米级影像——星图影像

2月17日下午，由中国科学院空天信息创新研究院、国际数字地球学会中国国家委员会、中国地理信息产业协会、中国指挥与控制学会、中国软件行业协会、中国气象服务协会、中国卫星导航定位协会、中国遥感应用协会指导，

一笑凡尘·2023-09-24 03:04

AI_Frank·2023-09-24 01:14

spark技术架构、工作机制，及安装使用

Spark是基于内存计算的，分布式大数据分析引擎，用于管理文本、图表等不同性质数据集，批量和实时流运算的大数据处理的需求。

沉思的雨季·2023-09-23 18:26

[转载]iForest （Isolation Forest）孤立森林异常检测入门篇 #Anomaly Detection

iForest（IsolationForest）孤立森林是一个基于Ensemble的快速异常检测方法，具有线性时间复杂度和高精准度，是符合大数据处理要求的state-of-the-art算法（详见新版教材

Dan271828·2023-09-23 17:27

Python+gdal裁剪遥感图像出现“Warning 1: TIFFReadDirectory:Sum of Photometric type-related color channels ……”

1.错误描述运行环境：windows10、pycharm、python3.7、gdal等python使用GDAL裁剪遥感图像的时候出现以下警告：“Warning1:TIFFReadDirectory:SumofPhotometrictype-relatedcolorchannelsandExtraSamplesdoesn'tmatchSamplesPerPixel.Definingnon-colo

空中旋转篮球·2023-09-23 10:08

python gdal警告Warning无法关闭

问题描述：读取遥感图像时gdal一直警告Warning1:TIFFReadDirectory:SumofPhotometrictype-relatedcolorchannelsandExtraSamplesdoesn'tmatchSamplesPerPixel.Definingnon-colorchannelsasExtraSamples

Great_lid·2023-09-23 10:34

推荐频道

遥感大数据处理