E-COM-NET
首页
在线工具
Layui镜像站
SUI文档
联系我们
推荐频道
Java
PHP
C++
C
C#
Python
Ruby
go语言
Scala
Servlet
Vue
MySQL
NoSQL
Redis
CSS
Oracle
SQL Server
DB2
HBase
Http
HTML5
Spring
Ajax
Jquery
JavaScript
Json
XML
NodeJs
mybatis
Hibernate
算法
设计模式
shell
数据结构
大数据
JS
消息中间件
正则表达式
Tomcat
SQL
Nginx
Shiro
Maven
Linux
Robert算子
OpenCV中Canny、Sobel和Laplacian边界检测算法原理和使用示例
以下是OpenCV中几种常见的边缘检测算法及其原理、使用方法:一、Canny边缘检测(最常用)原理:Canny是一种多阶段边缘检测算法,步骤如下:高斯滤波(降噪)计算梯度(Sobel
算子
)非极大值抑制(
点云SLAM
·
2025-05-16 21:29
算法
opencv
算法
人工智能
计算机视觉
边界检测算法
Canny
边缘检测
Laplacian
算子
spark中的转换
算子
{SparkConf,SparkContext}objectMain{defmain(args:Array[String]):Unit={//学习sparkRDD中的转换
算子
//1.map//2.filter
只因只因爆
·
2025-05-16 04:24
spark
大数据
分布式
Spark笔记四之RDD处理过程
2DAGscheduler细分RDD中partition的依赖关系确定那些是宽依赖那些是窄依赖,生成更详细的DAG图,将DAG图封装成TaskSet任务集合当触发计算时(执行action型
算子
)将其提交给集群
臭小优
·
2025-05-16 01:01
Spark
spark
任务调度
Spark处理过程-转换
算子
转换
算子
转换
算子
用于对RDD进行转换操作,生成一个新的RDD。转换操作是惰性的,即当调用转换
算子
时,Spark并不会立即执行计算,而是记录下操作步骤,直到遇到行动
算子
时才会触发实际的计算。
漂流瓶666666
·
2025-05-15 23:12
spark
大数据
分布式
Spark RDD简介以及
算子
使用大全
目录一、sparkRDD(1)RDD简介(2)
算子
简介二、RDD的使用(基于Linux系统)(1)RDD创建①基于数据集合创建②基于外部数据源创建(2)transformation
算子
——map()(3
Sheenky
·
2025-05-15 22:37
大数据
大数据
spark
python
模型部署 - onnx 的导出和分析 - PyTorch 导出 ONNX - 学习记录
一个简单的例子--将线性模型转成onnx1.2、导出多个输出头的模型1.3、导出含有动态维度的模型二、pytorch导出onnx不成功的时候如何解决2.1、修改opset的版本2.2、替换pytorch中的
算子
组合
Nice_cool.
·
2025-05-15 13:33
Onnx与TensorRT
pytorch
学习
人工智能
Spark的RDD转换
算子
-map、mapPartitions、mapPartitionsWithIndex
Spark的RDD转换
算子
-map、mapPartitions、mapPartitionsWithIndexRDD
算子
包括RDD转换
算子
和RDD行动
算子
,其实
算子
就相当于一种方法,在方法中封装想要实现所需结果的逻辑
牧码文
·
2025-05-14 16:45
Spark
spark
scala
big
data
SparkSQL入门学习
同SparkRDD不同地方在于SparkSQL的API可以给Spark计算引擎提供更多的信息(计算数据结构、转换
算子
),Spark计算引擎可以根据SparkSQL提供的信息优化底层计算任务。
田晓彬
·
2025-05-14 16:12
SparkSQL
尚硅谷大数据Spark之RDD转换
算子
学习笔记及面试题
1.Spark
算子
从功能上可以分为以下两类:1)Transformation变换/转换
算子
:这种变换并不触发提交作业,完成作业中间过程处理。
qq_25127933
·
2025-05-14 16:11
大数据
面试
spark
big
data
RDD转换
算子
sortByKey详解
sortByKey()格式:sortByKey(ascending=True|False默认为True)说明:根据key进行排序操作,默认按照key进行升序排序,如果需要倒序设置ascending为Falserdd=sc.parallelize([('c05','张三'),('c02','李四'),('c07','王五'),('c01','赵六'),('c03','田七'),('c08','周八'
留不住的人
·
2025-05-14 16:40
Spark分布式离线计算引擎
数学建模
matlab
算法
Spark(26)Spark处理过程-转换
算子
和行动
算子
(一)RDD的处理过程【老师讲授,画图】Spark使用Scala语言实现了RDD的API,程序开发者可以通过调用API对RDD进行操作处理。RDD的处理过程如图所示;RDD经过一系列的“转换”操作,每一次转换都会产生不同的RDD,以供给下一次“转换”操作使用,直到最后一个RDD经过“行动”操作才会真正被计算处理。这里有两点注意:【强调】延迟。RDD中所有的转换都是延迟的,它们并不会直接计算结果。相
北随琛烬入
·
2025-05-13 18:51
spark
大数据
分布式
RDD
算子
-行动
算子
//学习sparkRDD中的行动
算子
//1.collect:把发布在集群中的各个节点上的RDD元素收集,以数组的形式返回//2.c
枕上书446
·
2025-05-13 10:27
spark
Spark-Core(双Value类型)
一、RDD转换
算子
(双Value类型)1、intersection函数签名:defintersection(other:RDD[T]):RDD[T]函数说明:对源RDD和参数RDD求交集后返回一个新的RDD
бесплатно
·
2025-05-12 13:36
spark
大数据
分布式
Spark处理过程-行动
算子
行动
算子
(Action)是一种触发RDD计算的操作。与转换
算子
(Transformation)不同,行动
算子
会返回一个结果给驱动程序(DriverProgram),或者将结果写入外部存储系统。
睎zyl
·
2025-05-12 09:37
spark
大数据
分布式
怎么理解RDD中的
算子
在Spark的RDD(弹性分布式数据集)中,
算子
是对RDD进行操作的函数,可分为转化
算子
和行动
算子
,以下是对它们的理解:转化
算子
-特点:这类
算子
会返回一个新的RDD,并且是惰性求值的,即不会立即执行计算
晴空下小雨.
·
2025-05-12 01:46
spark
RDD转换
算子
除了前面提到的常见RDD转换
算子
,还有一些其他的转换
算子
,以下是部分
算子
的介绍:mapPartitions与map类似,但它是对RDD的每个分区进行操作,传入的函数接收一个分区的迭代器,返回一个新的迭代器
晴空下小雨.
·
2025-05-12 01:46
spark
【C# + HALCON 机器视觉】HALCON经典
算子
:圆形膨胀(dilation_circle)与圆形腐蚀(erosion_circle)
摘要:本文聚焦C#与HALCON在机器视觉领域的应用,深入阐述圆形膨胀(dilation_circle)与圆形腐蚀(erosion_circle)
算子
原理,以PCB焊点缺陷检测为案例,展示对二值化图像进行膨胀填补断裂
AI_DL_CODE
·
2025-05-11 23:35
c#
开发语言
halcon
机器视觉
圆形膨胀
圆形腐蚀
PCB焊点检测
在 Flink + Kafka 实时数仓中,如何确保端到端的 Exactly-Once
以下是具体实现方法及示例配置:1.核心机制(1)FlinkCheckpoint作用:定期将
算子
的状态(State)和Kafka消费偏移量(Of
静听山水
·
2025-05-11 12:58
大数据
大数据
spark转换
算子
在ApacheSpark中,转换
算子
(Transformation)是用于对RDD(弹性分布式数据集)进行转换操作的函数。
lqlj2233
·
2025-05-10 17:52
spark
大数据
分布式
遗传算法GA
一般的遗传算法由四个部分组成:编码机制、控制参数、适应度函数、遗传
算子
。编码机制:GA的基础,GA不是对研究对象直接进行讨论,而是通过某种编码机制把对象统一赋于由特定符号(字母)按一定顺序拍成的串。
白炎灵
·
2025-05-10 12:21
数据分析
算法
Flink 系列之十三 - Data Stream API的输出
算子
底层原理
之前做过数据平台,对于实时数据采集,使用了Flink。现在想想,在数据开发平台中,Flink的身影几乎无处不在,由于之前是边用边学,总体有点混乱,借此空隙,整理一下Flink的内容,算是一个知识积累,同时也分享给大家。注意:由于框架不同版本改造会有些使用的不同,因此本次系列中使用基本框架是Flink-1.19.x,Flink支持多种语言,这里的所有代码都是使用java,JDK版本使用的是19。代码
linmoo1986
·
2025-05-10 10:06
flink
flink
大数据
输出算子
底层原理
SparkStreaming之persist缓存
DSstream中的数据缓存在内存中,这对需要多次计算的DStream数据是一个很好的优化,对于window操作「比如reduceByWindow,reduceByKeyAndWindow」和state操作
算子
如
稳哥的哥
·
2025-05-10 09:26
SparkStreaming
Spark Core -- CheckPoint && Cache && Lineage血统
1、Cache缓存:因为Spark中对每一个RDD执行的
算子
操作的时候,都需要从数据源头计算一遍,就会导致RDD被重复计算,浪费资源,消耗时间,影响整体的性能。
新手小农
·
2025-05-10 09:55
Spark
3.1.3
spark
大数据
分布式
1024程序员节
AI编译器对比:TVM vs MLIR vs Triton在大模型部署中的工程选择
本文基于NVIDIAA100与GoogleTPUv4平台,通过BERT-base(110M)和GPT-2(1.5B)的实测数据,对比TVM、MLIR、Triton三大编译框架在动态shape支持、
算子
融合效率
学术猿之吻
·
2025-05-09 04:14
人工智能
mlir
量子计算
pytorch
深度学习
分布式
flink常用
算子
整理
文章目录前言1.重新分配(即打散)2.合并流的
算子
3.
算子
链操作4.侧边输出(目前只有一种)5.键控进行分区6.输出
算子
7.其他基础操作
算子
8.其他常用的
算子
9.Flink窗口等情况10.窗口举例前言提示
工作中的程序员
·
2025-05-09 02:59
flink
flink
【C# + HALCON 机器视觉】HALCON经典
算子
:形状匹配(create_shape_model 与 find_shape_model)
详细阐述create_shape_model与find_shape_model
算子
原理,以汽车内饰板装配定位安装孔位为例,展示从图像读取、模板创建、实时匹配到控制机械臂抓取的完整流程,同时介绍WinForm
AI_DL_CODE
·
2025-05-08 11:55
c#
halcon
机器视觉
形状匹配
halcon算子
机器学习
工业自动化
深入探索 Spark RDD 行动
算子
:功能解析与实战应用
行动
算子
(Action)是触发RDD实际计算的关键,它将分布在集群中的数据经过一系列转换后,最终以具体的形式返回结果或保存数据。
麻芝汤圆
·
2025-05-07 23:16
spark大数据分析
spark
大数据
分布式
hadoop
mapreduce
TensorRT plugin插件编写
TensorRT教程笔记–Plugin学习目标TensorRT自定义插件的使用方式如何添加自己的自定义
算子
注意:本文中主要用来对函数的作用和意义进行说明,故参考函数的编写并非只针对一个插件。
Darchan
·
2025-05-07 11:55
算法
人工智能
国产算力平台 × NVIDIA GPU 混合部署全流程实战:昇腾 / 寒武纪与异构推理系统集成解析
寒武纪与异构推理系统集成解析关键词昇腾310、寒武纪MLU370、NVIDIAA100、异构算力平台、混合部署、AI推理调度、多框架支持、MindX、MagicMind、TensorRT、Kubernetes、
算子
融合
观熵
·
2025-05-07 07:02
大模型高阶优化技术专题
人工智能
kubernetes
昇腾310
异构算力平台
【金仓数据库征文】- 破界者宣言:金仓数据库的下一代AI-Native架构演进路线
“三层堆叠”到“神经脉络”1.传统架构的桎梏计算-存储分离的物理割裂事务处理与AI计算的资源墙结构化数据与非结构化数据的存储鸿沟2.金仓的神经脉络架构AI-Native内核层:向量化执行引擎与机器学习
算子
的深度耦合基于强化学习的自适应索引
末声i
·
2025-05-06 07:05
金仓数据库
2025
征文
数据库平替用金仓
对比 TensorFlow 和 PyTorch 的性能和效率
这种方式在编译时可以对计算图进行优化,例如进行
算子
融合、内存分配优化等,从而在大规模分布式训练和生产环境中能获得较高的性能。不过,静态图的构建过程相
qq_44233281
·
2025-05-05 18:09
tensorflow
pytorch
人工智能
缺陷检测解决策略之一blob分析+特征分析-01(破碎饼干检测)
缺陷检测解决策略之一blob分析+特征分析-01(破碎饼干检测)明星
算子
:area_holesrectangularity*读取图像*blob分析+特征分析解决策略*明星
算子
*area_holes:计算区域内空的面积总和
*Major*
·
2025-05-05 12:28
机器视觉
Halcon
Flink 的状态机制
一、
算子
状态(OperatorState):无Key的全局共享状态
算子
状态是与并行子任务(Subtask)绑定的状态,适用于需要在整个算
方二华
·
2025-05-04 16:19
大数据
flink
大数据
逻辑与和短路与的区别
&逻辑与,|逻辑或&&短路与,||短路或1、逻辑运算符要求两边的
算子
都是布尔类型,并且逻辑运算符最终的运算结果也是一个布尔类型。2、短路与和逻辑与最终的运算结果是相同的,只不过短路与存在短路现象。
薰衣草2333
·
2025-05-04 12:52
C#将Mat或Byte快速转换为Bitmap格式
但是在封装VisionMaster的
算子
时候,因为要适配原有的框架和数据结构,所以必须有一个可以从现有格式转换为Bitmap格式。一般来说Bitmap格式都是从Byte数组中转换而来的。
爱炸薯条的小朋友
·
2025-05-03 17:24
C#
c#
开发语言
opencv
博士生存指南:如何用3个月从PyTorch进阶CUDA核函数开发?
第1个月:理解GPU计算范式,从PyTorch到CUDA的平滑过渡目标:掌握CUDA基础语法,实现首个性能超过PyTorch原生
算子
的自定义核函
学术猿之吻
·
2025-05-02 12:07
高校
GPU
人工智能
pytorch
人工智能
python
机器学习
ai
gpu算力
深度学习
RISC-V NPU语音转换实战指南:从芯片选型到代码优化
本项目将探索如何在国产RISC-V服务器上实现语音转换模型的NPU适配与优化,涉及端到端模型设计、硬件驱动开发、INT8量化
算子
实现及深度学习框架集成等核心技术。
Android洋芋
·
2025-05-02 09:14
RISC-V架构
EIC7700X芯片
RISC-V
NPU语音
DSP/NPU加速器
TensorFlow框架
PyTorch
Spark和Hadoop之间的对比和联系
Spark基于内存的分布式计算框架,提供了丰富的
算子
,如map、filter、reduceByKey等,能以DAG(有向无环图)的方式进行复杂的计算,适用于实时计算、交互式查询和机器学习等场景。
祈533
·
2025-05-02 06:57
虚拟机
Radar Forward-Looking Super-Resolution Imaging Algorithm of ITR-DTV Based on Renyi Entropy论文阅读
RadarForward-LookingSuper-ResolutionImagingAlgorithmofITR-DTVBasedonRenyiEntropy1.研究目标与实际问题意义1.1研究目标1.2实际意义2.创新方法、模型与公式分析2.1方法框架2.1.1方向总变差(DTV)
算子
青铜锁00
·
2025-04-30 20:50
论文阅读
Radar
论文阅读
手写 CPU 卷积核加速神经网络计算(2)——OpenCL 简单实现卷积、池化、激活、全连接、批归一化(python 实现)
这里使用pyopencl这个支持在python环境下跑opencl的库,用opencl简单实现了卷积、池化、激活、全连接、批归一化这五个
算子
,没有做其他的算法和内存上的优化。
哦豁灬
·
2025-04-29 21:04
深度学习
ai
compiler
学习笔记
神经网络
python
深度学习
Flink TaskManager详解
它与JobManager协同工作,接受其调度指令,管理本地资源(如CPU、内存、网络),并执行具体的
算子
(Operator)逻辑。TaskManager的性能和配置直接影响作业的吞吐量、延迟和稳定性。
24k小善
·
2025-04-28 05:34
flink
java
大数据
云计算
opencv入门:十类常用基础指令
库一、图像读取与显示1.读取图像2.显示图像3.图像保存4.读取视频二、图像基本操作1.数值运算2.颜色通道处理边界填充3.图像阈值4.图像滤波去噪5.形态学处理卷积核腐蚀与膨胀6.边缘检测Sobel
算子
陈卿然
·
2025-04-28 03:18
opencv
人工智能
计算机视觉
Spark课程总结
基于内存与磁盘进程与线程二、1、rdd的概念2、rdd的五大属性3、rdd的创建方式4、rdd的
算子
操作分类1、transformation(转换)2、action(动作)5、RDD常见的
算子
操作说明重点需要掌握三
2301_81170993
·
2025-04-27 13:53
spark
大数据
分布式
Halcon模版匹配
记录下自己遇到的一次模板匹配的难题.方便以后举一反三.遇到的是两颗螺丝,受环境光影响,轮廓非常复杂.思考逻辑如下:1.减少轮廓复杂程度,使用到的
算子
edges_sub_pixedges_sub_pix(
威威当爸了
·
2025-04-27 10:03
Halcon
模版匹配
Flink反压问题解析
当下游
算子
处理速度低于上游数据生产速度时,系统会向上游传递压力信号,迫使上游降低数据发送速率,避免数据堆积和系统崩溃。
Debug_TheWorld
·
2025-04-27 01:06
大数据学习
flink
MATLAB算法实战应用案例精讲-【图像处理】图像特征提取(附MATLAB代码实现)
Featureextraction)灰度共生矩阵GLCM兴趣点提取BRIEF算法Harris角点算法Harris和Shi-Tomas算法SIFT/SURF算法SIFT原理SURF原理LBP和HOG特征
算子
林聪木
·
2025-04-26 17:43
图像处理
计算机视觉
人工智能
眼底图像预处理-渗出物边缘增强
增强公式:I_end=I_g+I_wr+I_wd-(I_br+I_bd)其中:增强最优亮区域
算子
I_wr=max(I_g-I_g_top);增强最优亮细节
算子
I_wd=max(I_g_top-I_g_top
ytkml2016
·
2025-04-26 16:02
Halcon系列教程
Halcon系列教程Halcon安装和语法基础Halcon的安装Halcon基础入门案例Halcon之提取猴子的眼睛函数封装halcon之函数的封装(扩展
算子
area_center)AOI通用流程halcon
Jumy_S
·
2025-04-25 20:47
halcon
机器视觉
day33和day34图像处理OpenCV
文章目录一、图像预处理12图像梯度处理12.3Sobel
算子
12.4Laplacian
算子
1.原理:2.语法:13图像边缘检测思路13.1高斯滤波去噪点13.2计算图像的梯度与方向13.3非极大值抑制13.4
zhuyixiangyyds
·
2025-04-22 13:33
学习
笔记
图像处理
Halcon
算子
应用和技巧7
提示:若没有查找的
算子
,可以评论区留言,会尽快更新Halcon
算子
应用和技巧7前言一、Halcon应用?
勤奋的小懒猪
·
2025-04-22 05:16
Halcon算子应用
计算机视觉
图像处理
opencv
视觉检测
上一页
1
2
3
4
5
6
7
8
下一页
按字母分类:
A
B
C
D
E
F
G
H
I
J
K
L
M
N
O
P
Q
R
S
T
U
V
W
X
Y
Z
其他