遥感大数据处理

关于大数据工程师的基础知识

大数据是眼下非常时髦的技术名词，与此同时自然也催生出了一些与大数据处理相关的职业，通过对数据的挖掘分析来影响企业的商业决策。
xiaokaiabcde·2024-01-11 13:23

大数据工程师需要哪些基础知识？

大数据是眼下非常时髦的技术名词，与此同时自然也催生出了一些与大数据处理相关的职业，通过对数据的挖掘分析来影响企业的商业决策。
qunqun8889·2024-01-11 13:23

2023年“此星光明”的编程之旅——让技术分享成为你生活的一部分

所以整体的博客阅读量和点赞以及收藏都相对较少，过去一年产出的高质量文章超过300篇，共计307篇，这些文章大部分是关于GoogleEarthEngine、PIE-ENGINE以及AIEarth和中科星图的有关和遥感云计算相关的内
此星光明·2024-01-11 12:03

马萨诸塞州道路数据集预处理

今天我们将分享MassachusettsRoads遥感道路语义分割数据集,并会在下期使用FC-DenseNet进行遥感影像道路提取。
DataAssassin·2024-01-11 11:32

SENet实现遥感影像场景分类

今天我们分享SENet实现遥感影像场景分类。数据集本次实验我们使用的是NWPU-RESISC45Dataset。
DataAssassin·2024-01-11 11:32

基于arcgis的遥感深度学习数据集制作

由于很多时候，我们在研究过程中往往需要根据实际情况使用自己的影像数据来提取目标物，如果没有合适的公开数据集的话，为了满足实际需要，我们就需要制作符合自己要求的数据集。今天我们就根据实际情况来详细讲解如何利用arcgis，来制作属于自己的数据集。制作目标shp文件首先我们在arcgis中添加我们的影像文件。然后创建一个shp文件。注意坐标系与我们的影像文件保持一致。在创建过程中注意选择面矢量。创建完
DataAssassin·2024-01-11 11:56

卫星遥感影像数据免费下载网站汇总

本文对目前主要的遥感影像数据获取网站加以整理与介绍，若需其它GIS领域数据（如气象数据、土地土壤数据、农业数据等），大家可以点击上方专栏查看，也可以看这一篇汇总文章：https://bl
疯狂学习GIS·2024-01-11 11:35

无需专线，企业多分支机构、出差人员如何实现办公系统互访？

西安某企业致力于光谱成像技术与无人机遥感技术研发、系统集成及创新应用研究推广，高光谱成像技术、红外热成像技术、无人机遥感与近地遥感技术、多光谱荧光与高光谱荧光成像技术、光谱成像创新应用（SpectrAPP
贝锐·2024-01-11 10:02

苦行僧与火车的传说

这里讲的是心灵遥感的故
伍拾范儿·2024-01-11 07:31

遥感影像变化检测SemiCDNet，基于GAN的半监督方法；提出一个新的变化检测数据集

ASemisupervisedConvolutionalNeuralNetworkforChangeDetectioninHighResolutionRemote-SensingImages南京信息工程大学2020提出的VHR遥感影像变化检测数据集
Amberrr-L·2024-01-11 05:54

【AI】CycleGan对抗生成网络遥感影像生成地图效果测试

今天看到一个有趣的项目，CycleGan对抗生成网络把马生成成斑马，还有一个测试用例是用遥感影像生成平面地图的效果，效果如下图所示，我大学是遥感专业，看到遥感影像就触动了我的原神，于是原神启动，肝一个测试的玩玩
AI柱子哥·2024-01-11 05:23

Hadoop与Spark：大数据处理框架的比较与选择

Hadoop与Spark：大数据处理框架的比较与选择在大数据的时代背景下，数据处理和分析的需求日益增长。
乌龙饼干·2024-01-11 01:14

Hadoop简介：开启大数据处理之门

在此背景下，Hadoop作为一种分布式系统基础架构，应运而生，为大数据处理打开了新的大门。
乌龙饼干·2024-01-11 01:44

Hadoop在大数据分析中的应用与挑战

Hadoop在大数据分析中的应用与挑战随着数字化时代的来临，数据呈现爆炸性增长，大数据处理和分析成为了企业和研究机构不可或缺的一部分。
乌龙饼干·2024-01-11 01:44

如何搭建一个高效的Hadoop集群环境？

如何搭建一个高效的Hadoop集群环境在大数据处理和分析的领域中，Hadoop已经成为了一个非常流行的工具。
乌龙饼干·2024-01-11 01:44

遥感影像大气校正一:6S模型使用

6S介绍1986年，法国里尔科技大学大气光学实验室Tanré等人为了简化大气辐射传输方程，开发了太阳光谱波段卫星信号模拟程序5S（SIMULATIONOFTHESATELLITESIGNALINTHESOLARSPECTRUM），用来模拟地气系统中太阳辐射的传输过程并计算卫星入瞳处辐射亮度。1997年，EricVemote对5S进行了改进，发展到6S（SECONDSIMULATIONOFTHESA
刚上路DE小白·2024-01-11 01:28

插值、平稳假设、变异函数、基台、块金、克里格…地学计算概念及公式推导

1引言  最近的几篇博客，分别从多光谱与高光谱遥感的实际应用出发，对影像前期处理与相关算法、反演操作等加以详细介绍。
疯狂学习GIS·2024-01-11 01:06

遥感影像大气校正二:6s模拟结果提取并计算

上一篇总结了6s使用方法，这篇文章接着6s模拟结果介绍大气校正如何计算。6s输出介绍：输出第一节内容：输出第二节内容：输出第三节内容：输出第四节内容：大气校正计算公式：公式1：这里xa,xb,xc分别取0.00453，0.12291，0.14796，这个公式针对输入影像为辐亮度。公式2：这里xap,xb,xc分别取1.447298，0.12291，0.14796，这个公式针对输入影像为表观反射率。
刚上路DE小白·2024-01-11 01:24

战书：重新出发，做一个学会终身学习的人。

【【学习Googleearthengine的初衷】】【忏悔段】本人虽现为学生一名，遥感专业交叉其他专业，知道流行的基本平台和软件，但是没有立马投入行动学习，而今意识到其中的重要性。
07e5cc5603ca·2024-01-10 18:05

2021-07-13

新一代工业互联网平台之二——极简工业大数据云平台架构大海_WH工业互联网1.技术架构极简工业云端大数据平台主要包括云端分布式大数据处理系统（数据处理）、WEB用户管理应用系统（建模分析）、小程序应用系统
大海WH·2024-01-10 16:55

java 常⽤的线程池模式FixedThreadPool

使用场景：适用于执行大量计算任务的应用程序，如大数据处理、科学计算等。importjava.util.concurrent.ExecutorServ
zz_ll9023one·2024-01-10 09:33

Spark 初级编程实践

Spark是一个快速、通用、可扩展的大数据处理引擎，最初由加州大学伯克利分校的AMPLab开发。它提供了高级API，用于在大规模数据集上执行并行处理。
cwn_·2024-01-10 08:28

遥感影像-语义分割数据集：WHDLD数据集详细介绍及训练样本处理流程

原始数据集详情简介：WHDLD是一个密集的标签数据集，可用于多标签任务，例如遥感图像检索（RSIR）和分类，以及其他基于像素的任务，例如语义分割（在遥感中也称为分类）。
ly_0624·2024-01-10 08:12

遥感影像-语义分割数据集：云数据集详细介绍及训练样本处理流程

原始数据集详情简介：该云数据集包括150张RGB三通道的高分辨率图像，在全球不同区域的分辨率从0.5米到15米不等。这些图像采集自谷歌Earth的五种主要土地覆盖类型，即水、植被、湿地、城市、冰雪和贫瘠土地。KeyValue卫星类型谷歌Earth覆盖区域未知场景水、植被、湿地、城市、冰雪和贫瘠土地分辨率0.5-15m数量150张单张尺寸1280*720原始影像位深8位标签图片位深8位原始影像通道数
ly_0624·2024-01-10 08:10

基础篇—测绘航空摄影、摄影测量与遥感

按照现行测绘资质标准分类，第二、三项就是测绘航空摄影（专业子项分为：一般航摄、无人飞行器航摄、倾斜航摄）、摄影测量与遥感（专业子项分为：摄影测量与遥感外业、摄影测量与遥感内业、摄影测量与遥感监理）概念区别测绘航空摄影概念测绘航空摄影是指在航空器
CtrlQuasar·2024-01-10 07:08

高光谱分类论文解读分享之基于多模态融合Transformer的遥感图像分类方法

IEEETGRS2023：基于多模态融合Transformer的遥感图像分类方法题目MultimodalFusionTransformerforRemoteSensingImageClassification
曦曦逆风·2024-01-10 07:57

编程 | 将栅格数据裁剪为规则小块的几种方法

背景如果是做遥感在深度学习中应用的同学，会遇到将大范围遥感影像，按顺序裁剪为规则小范围的影像。由于之前做过类似的，我分享一下自己是怎么规则裁剪大范围栅格影像的。
锐多宝的地理空间·2024-01-10 04:31

开源大数据一周精彩回放【荐】：推动数据开放，助力产业发展

01）2013-2016年全国逐月NDVI数据下载归一化植被指数NDVI的遥感反演是以晴空状态下的地表反射为输入，因此预先合成多天晴空状态的地表反射率，并进行去云及其它噪音处理，采用
数据禾·2024-01-10 03:29

笔记：分布式大数据技术原理（三）Spark

ApacheSpark是一个围绕速度、易用性和复杂分析构建的大数据处理框架，最初在2009年由加州大学伯克利分校的AMPLab开发，并于2010年成为Apache的开源项目之一，与Hadoop和Storm
WeeeicheN·2024-01-09 22:17

大数据技术原理与应用笔记

Hbase入门NoSql入门文章目录一、大数据概述1.1大数据时代1.2大数据的概念和影响1.3大数据的应用1.4大数据的关键技术1.5大数据,物联网和云计算1.5.1云计算1.5.2物联网检测题二、大数据处理架构
Moliay·2024-01-09 22:16

6种遥感卫星影像样例数据下载

其实遥感卫星影像除了有光学影像，还有很多其它种类的卫星影像，以满足在不同行业和领域中的研究与应用。这里为大家分享6种遥感卫星影像，并在文末为你分享这些数据样例的下载地址。
水经注GIS·2024-01-09 14:02

Spark与HBase的集成与数据访问

ApacheSpark和ApacheHBase分别是大数据处理和分布式NoSQL数据库领域的两个重要工具。
晓之以理的喵~~·2024-01-09 11:24

图像匹配几种常见算法与实践

应用：遥感（制图更新），计算机视觉应用程序，医疗用图像注册。图像匹配主要可分为以灰度为基础的匹配和以特征为基础的匹配。
霍格沃兹测试开发学社·2024-01-09 11:36

spark-sql字段血缘实现

spark-sql字段血缘实现背景ApacheSpark是一个开源的大数据处理框架，它提供了一种高效、易于使用的方式来处理大规模数据集。
王糍粑的小夕·2024-01-09 07:32

遥感技术应用于信息提取

遥感信息提取与遥感数字图像处理及及分类密切相关，近几年也有广泛应用，粗略来看，大概有以下几类：1.地形.如DEM、坡度、坡向等。2.植被.如植被种类、长势情况、病虫害等。
角砾岩队长·2024-01-09 04:25

2024年第七届数据存储与数据工程国际会议（DSDE 2024）即将召开

DSDE2024是一个展示和讨论最新存储和数据工程技术如云存储、大数据处理和分析、以及人工智能在数据处理中应用的国际学术交流平台。
爱科会易·2024-01-09 03:55

【稳定检索、投稿优惠】2024年航空航天工程与遥感科学技术国际会议(ICAERSST 2024)

2024年航空航天工程与遥感科学技术国际会议(ICAERSST2024)2024InternationalConferenceonAerospaceEngineeringandRemoteSensingScienceandTechnology
论文发表-征稿咨询·2024-01-09 01:10

AI时代Python大数据分析

Python作为一种高级编程语言，具有易读性、语法简洁和强大的科学计算能力等特点，使其成为大数据处理和分析的理想选择。
桃花键神·2024-01-08 10:14

2019-01-29 大数据处理学习

训练大的数据集存在计算量的问题。假设要训练一个线性回归模型或者是逻辑回归模型，当m是一个亿的时候，用求一亿个项目总和的计算量来计算仅仅一步的梯度下降，这显然效率不高。在我们训练一个上亿条数据的模型之前，也许可以随机从上亿条的数据集里选个一千条的子集用算法计算，画学习曲线检查小一些的数据集是不是好用。学习曲线结果示例：高方差的学习算法（左图）：增加训练集的大小来提高性能高偏差的学习算法（右图）：增加
奈何qiao·2024-01-08 10:55

Spark基础知识

1.1定义ApacheSpark是用于大数据处理的统一分析引擎;1.2Spark与MapReduce对比MapReduce的主要缺点:①MapReduce是基于进程进行数据处理,进程相对与线程来说,创造和销毁的过程比较耗费资源
MSJ3917·2024-01-08 07:21

Anaconda安装教程及注意事项

一、Anaconda简介Anaconda是一个大数据处理、科学计算领域的Python发行版。
卷到起飞的数分·2024-01-08 05:37

Hive实战：网址去重

HiveMetastore服务2、启动Hive客户端3、基于HDFS数据文件创建Hive外部表4、利用HiveSQL实现去重5、检查是否实现去重四、实战总结一、实战概述在本次实战任务中，我们利用Hive大数据处理框架对三个文本文件
howard2005·2024-01-07 17:03

Day 43 40 年岷山地区白河自然保护区川金丝猴的生境格局动态

以岷山白河自然保护区为例，利用陆地资源卫星的MSS/TM/OLI遥感影像，并基于专家知识的决策树分类方法对遥感影
Elvira1021·2024-01-07 16:21

Make sense(5) 数据库内存储三维模型的思考

三维模型数据在某种程度介乎矢量数据与遥感影像数据之间:既像影像数据,具有整体性意义:往往以整个场景的形式出现又像矢量数据一样可以拆分为若干单个部件(影像则一般不会拆为单个像素)也就是说,三维模型可以被入库
默而识之者·2024-01-07 15:43

Spark大数据分析与实战笔记（第二章 Spark基础-05）

前言在大数据处理和分析领域，Spark被广泛应用于解决海量数据处理和实时计算的挑战。作为一个快速、可扩展且易于使用的分布式计算框架，Spark为开发人员提供了丰富的API和工具来处理和分析大规
想你依然心痛·2024-01-07 06:33

一些图像分割数据集

medical-image-segmentation/data脑和胃cthttps://www.kaggle.com/datasets/humansintheloop/semantic-segmentation-of-aerial-imagery遥感图
even蛋黄酱·2024-01-07 03:25

基于Springboot的宠物医院管理系统-JAVA【毕业设计、论文、源码、开题报告】

1绪论1.1课题背景在信息技术高速发展的今天，新知识、新技术层出不穷，计算机技术早已广泛的应用于各行各业之中，利用计算机的强大数据处理能力和辅助决策能力叫，实现行业管理的规范化、标准化、效率化。
程序设计合作_itrjxxs·2024-01-06 23:25

遥感在森林水分胁迫检测与监测中的应用

ApplicationofRemoteSensinginDetectingandMonitoringWaterStressinForestsAbstract:Inthecontextofclimatechange,theoccurrenceofwaterstressinforestecosystems,whicharesolelydependentonprecipitation,hasexhibi
lihongli000·2024-01-06 23:11

微波遥感用于农业干旱监测:最新进展与挑战

Microwaveremotesensingforagriculturaldroughtmonitoring:RecentdevelopmentsandchallengesMariette微波遥感用于农业干旱监测
lihongli000·2024-01-06 23:40

Spark MLlib简介与机器学习流程

ApacheSparkMLlib是一个强大的机器学习库，可以在分布式大数据处理环境中进行机器学习任务。本文将深入介绍SparkMLlib的基本概念、机器学习流程以及提供详细的示例代码。
晓之以理的喵~~·2024-01-06 16:34
上一页 5 6 7 8 9 10 11 12 下一页
按字母分类： ABCDEFGHIJKLMNOPQRSTUVWXYZ其他