.....DAG

2022年Docker安装Apache Airflow2.2分布式任务调度框架

一、ApacheAirflow介绍ApacheAirflow是一个提供基于DAG有向无环图来编排工作流的、可视
无处不在的海贼·2023-11-13 23:05

AirFlow 如何传参数给DAG

可以直接跳过进入正题）：最近需要使用airflow去调度任务，平常使用airflow都是调度的定时任务，这次不需要定时任务，只需要条件满足时主动触发airflow执行任务调度即可，同时将任务必要的外界参数传给DAG
YF_Li123·2023-11-13 23:04

Apache Airflow (五) ：DAG调度触发时间

博主个人B栈地址：豹哥教你大数据的个人空间-豹哥教你大数据个人主页-哔哩哔哩视频在Airflow中，调度程序会根据DAG文件中指定的“start_date”和“schedule_interval”来运行
IT贫道·2023-11-13 23:33

拓扑排序基础详解，附有练习题

介绍拓扑排序是一种对有向无环图（DAG）进行排序的算法。在一个有向图中，如果存在一条从节点A到节点B的路径，那么节点A就依赖于节点B。有向无环图如下什么是入度，出度？
clmm_·2023-11-13 05:29

Spark 简介

Spark实现了高效的DAG执行引擎，可以通过基于内存来高效的处理数据流。计算的中间结果是存
Six Gods·2023-11-12 10:47

数据结构与算法（图论系列）------拓扑排序详解

定义在图论中，拓扑排序（TopologicalSorting）是一个有向无环图（DAG,DirectedAcyclicGraph）的所有顶点的线性序列。
All_In_gzx_cc·2023-11-12 01:55

算法进阶指南图论 道路与航线

想法就是和强连通分量有关，我们很容易发现，题目中所说的双向边，就构成了一个强连通分量，而所谓的单向边，则相当于把强连通分量进行缩点，然后整个图成为了一个DAG，众所周知，对于DAG,我们可以在O(n)的时间复杂度内处理很多东西
Unlimitedz·2023-11-11 14:53

Apache Airflow 示例dag中的命令注入(CVE-2020-11978)

ApacheAirflow示例dag中的命令注入(CVE-2020-11978)0x01漏洞简介Airflow是一个使用python语言编写的datapipeline调度和监控工作流的平台。
吉吉_大王·2023-11-11 09:23

Apache Airflow (三) ：Airflow WebUI操作介绍

博主个人B栈地址：豹哥教你大数据的个人空间-豹哥教你大数据个人主页-哔哩哔哩视频目录1.DAG2.Security3.Browse4.Admin5.Docs1.DAGDAG有对应的id,其id全局唯一，
IT贫道·2023-11-11 09:19

漏洞复现——Apache Airflow 示例dag中的命令注入（CVE-2020-11978）

在其1.10.10版本及以前的示例DAG中存在一处命令注入漏洞，未授权的访问者可以通过这个漏洞在Worker中执行任意命令。
EVTboy_666·2023-11-11 09:49

操作系统·进程管理

2.1前趋图和程序执行2.1.1前趋图前趋图是一个有向无循环图，记为DAG，可用于描述程序/进程之间执行的前后关系，无循环关系可实现顺序执行。
Yhan涵涵·2023-11-10 22:01

Introduction to Apache Airflow-Airflow简介

Airflowisaplatformtoprogrammaticallyauthor,scheduleandmonitorworkflows.ThesefunctionsachievedwithDirectedAcyclicGraphs(DAG
DevOps云学堂·2023-11-08 06:40

airflow mysql_Airflow 使用及原理分析

Airflow是通过DAG(Directedacyclicgraph有向无环图)来管理任务流程的任务调度工具，不需要知道业务数据的具体内容，设置任务的依赖关系即可实现任务调度。
weixin_39549110·2023-11-08 06:40

airflow初探（一）-- 安装和部署

airflow搭建分布式流程控制Airflow是一个可编程，调度和监控的工作流平台，基于有向无环图(DAG)，airflow可以定义一组有依赖的任务，按照依赖依次执行。
hpugym·2023-11-08 06:35

Rasa课程、Rasa培训、Rasa面试系列之： Rasa NLU意图和实体-分词器

它由一系列组件组成，可以由开发人员配置和定制，Rasa3.0在训练期间的计算框架表示为一个有向图DAG.NLU管道在config.yml配置中定义，描述了管道中的所有步骤，这些步骤将被Rasa用来检测意图和实体
StarSpaceNLP·2023-11-08 05:06

Rasa NLU中的组件

RasaNLP是一个基于DAG的通用框架，图中的顶点即组件。组件特征包括有顺序关系、可相互替换、可互斥和可同时使用。有向无环图（DAG）在很多地方都有用到，比如Spark中等。
NLP工程化·2023-11-08 05:04

Spark知识点概要

Spark知识点一、基本特性1、spark与MapReduce的不同①计算中间结果：mapreduce是基于磁盘维护，磁盘IO及序列化代价大；而spark是基于内存的维护，基于DAG计算模型，会减少Shaffer
TUJC·2023-11-07 05:31

拓扑排序入门详解&&Educational Codeforces Round 72 (Rated for Div. 2)-----D

了解一个概念:DAG-->有向无环图，一个有向图的任意顶点都无法通过一些有向边回到自身，称之为DAG算法过程:
谁抢了我的昵称？·2023-11-06 21:38

LeetCode算法心得——找到冠军（反向推理）

每支队伍也是有向无环图（DAG）上的一个节点。
晴天学长·2023-11-06 09:03

力扣周赛 -- 370周赛

先更新前两道题目，下午更新后两道两道模板题(拓扑排序)拓扑排序拓扑排序（TopologicalSorting）：一种对有向无环图（DAG）的所有顶点进行线性排序的方法，使得图中任意一点$u$和$v$，如果存在有向边
乖的小肥羊·2023-11-06 06:50

【Java】拓扑排序

文章目录1.什么是拓扑排序2.java实现思路3.代码实现4.运行结果测试用例1（无环）输入输出测试用例2（有环）输入输出1.什么是拓扑排序对一个有向无环图(DirectedAcyclicGraph简称DAG
rellvera·2023-11-06 05:55

拓扑排序详解 Java 模版代码实现

拓扑排序对一个有向无环图(DirectedAcyclicGraph简称DAG)G进行拓扑排序，是将G中所有顶点排成一个线性序列，使得图中任意一对顶点u和v，若边∈E(G)，则u在线性序列中出现在v之前。
Code-CHAN·2023-11-06 05:25

拓扑排序 JAVA实现

问题描述假设给我们一个任意的图，它可能是也可能不是DAG（有向无圈图），推广拓扑排序算法，以使得给定有向图G的输入，它的输出是以下两者之一：(a)一个拓扑排序，于是确定了G为DAG；或者(b)G中的一个圈
Kepp·2023-11-06 05:19

拓扑排序（Java实现）

一、基本思想拓扑排序是一种对有向无环图（DAG）进行排序的算法，它将所有顶点排成一个线性序列，使得对于任意一条有向边（u,v），u在序列中都出现在v之前。
努力的Zane·2023-11-06 05:42

【LeetCode】第 370 场周赛

每支队伍也是有向无环图（DAG）上的一个节点。给你一个整数n和一个下标从0开始、长度为m的二维整数数组edges表示这个有向无环图
P.H. Infinity·2023-11-06 02:09

Spark系列—spark简介

具有如下特性：1、高效性体现在内存存储中间计算结果，基于DAG图执行引擎的优化，减少多次中间结果写HDFS开销。
数据小白的进阶之路·2023-11-05 23:19

多式联运路径优化问题：基于拓扑排序的遗传算法染色体编码

一、什么是拓扑排序在图论中，拓扑排序（TopologicalSorting）是一个有向无环图（DAG,DirectedAcyclicGraph）的所有顶点的线性序列。
嘿嘻哈呀·2023-11-05 03:11

spark程序中调用shell脚本

因此必须在spark的DAG引擎开始或者结束以及两个job之间调用shell脚本。根据以上前提，spark执行shell脚本代码只能在以下几个位置：Spark
寇寇寇先森·2023-11-04 23:25

使用c++实现拓扑排序

拓扑排序是图论中的一种排序方式，用于对有向无环图(DAG)中的顶点进行排序。在C语言中，可以使用邻接表来存储图的数据结构，然后使用入度数组记录每个顶点的入度数，再利用队列实现拓扑排序。
Waiyuet Fung·2023-11-04 10:16

拓扑排序详解及C++实现

拓扑排序详解及C++实现定义百度百科定义如下：拓扑排序，是对一个有向无环图(DirectedAcyclicGraph简称DAG)G进行拓扑排序，是将G中所有顶点排成一个线性序列，使得图中任意一对顶点u和
一只爱算法的猫·2023-11-04 10:37

拓扑排序--C++实现

1.定义前置知识DAG:DirectedAcyclicGraph有向无环图拓扑序：像先修课程一样，即任意课程的前置课程都在其前面。举个例子在这个图中，1234或者1324是拓扑序。
_不会dp不改名_·2023-11-04 10:04

海豚调度（dolphinsheduler）离线安装

1.简介1.1DolphinScheduler是什么ApacheDolphinScheduler是一个分布式易扩展的可视化DAG工作流任务调度开源系统。
shangjg3·2023-11-03 08:41

长安链DAG并行调度源码解析

简绍一下用到的算法及其作用DAG(有向无环图)DAG的结构能够用来描述节点之间的依赖关系，如果节点之间没有依赖，则就可以并行执行，这里的节点指代就是交易DAG拓扑排序当DAG结构创建完成后，可以根据其结构来确定节点顺序
冰冰大象·2023-11-03 07:34

AtCoder Educational DP Contest 题解

G「DAG上的DP」入门。H二维DP入门。I-Coins简单概率DP，设f[i][j]表示前i枚硬币中有jj枚朝上的概率。比较容易推出转移方程J-Sushi一看题，发现不那么好设计状态。
Alaso_shuang·2023-11-03 00:35

操作系统——期末复习

文章目录第一章操作系统引论操作系统基本特性并发共享虚拟异步操作系统主要功能处理机管理功能存储器管理功能设备管理功能文件管理功能操作系统与用户之间的接口微内核第二章进程进程的特征和生命周期进程的三种定义进程的特征（教材P39）进程控制块PCB进程的状态转换前趋图DAG
Ss7est·2023-11-02 09:21

spark 源码阅读RDD（一）

（2）根据DAG分析结果讲一个作业分为多个stage，划分stage主要依据当前的计算因子输入是否是确定的，如果是则划分
line_book·2023-11-02 04:55

vue使用antv-x6 绘制流程图DAG图

注册节点两种方法：import{Graph,Node,Path,Cell,Addon}from"@antv/x6";import{register}from"@antv/x6-vue-shape";1.x的写法：registerCustomNode(){//demoGraph.registerNode("custom-polygon",{inherit:"polygon",width:66,hei
小贵子的博客·2023-11-01 14:54

编译原理实训（一个简单语言的编译程序设计与实现）

1、内容  本次设计主要实现了词法分析、语法分析、中间代码生成、DAG优化、目标代码生成5部分，词法分析主要是对源程序的字符串进行分解和扫描，区分出关键字、标识符、常数、操作符。
努力学习 !·2023-10-31 22:33

【Flink入门】centos上flink安装部署(standalone模式)

可以看到，在一个DAG图中不能被Chain在一起的Opera
浮云6363·2023-10-29 22:36

TensorFlow pb模型修改和优化

GraphDef本质上是一个DAG有向无环图，里面主要是存放了一个算子nodelist，每个算子具有名称，attr等内容，以及通过input包含了node之间的连接关系。
Luchang-Li·2023-10-29 04:21

airlfow的BashOperator传递参数到shell文件

python的dag脚本如下：fromairflowimportDAGfromairflow.operators.bash_operatorimportBashOperatorfromdatetimeimportdatetime
似水之星·2023-10-28 18:37

cypress笔记04-构建项目自动化测试目录

1、根目录：E:\Autotesting\DAG_Autotesting2、测试用例按模块划分，一个模块一个文件夹，E:\Autotesting\DAG_Autotesting\cypress\integration3
天天向上的小M·2023-10-28 15:48

操作系统第二章-进程的描述与控制

前趋图和程序执行1、前趋图所谓前趋图（PG），是指一个有向无环图，可记为DAG，用于描述进程之间执行的先后顺序，具体见书上P35。
真的不会只会暴力了·2023-10-28 12:56

1 Airflow简介

Airflow用户可以定义一组有依赖关系的任务，即邮箱无环图（DAG），按照依赖依次执行。Airflow提供了丰富的命令行和强大的WebUI，可以方便地管控调度任务以及实时监控运行状态。
大白猿学习笔记·2023-10-28 09:49

Apache Dolphinscheduler 最新 3.1.4 概述和安装（1）

ApacheDolphinscheduler最新3.1.4概述ApacheDolphinScheduler是一个分布式易扩展的可视化DAG工作流任务调度开源系统。
像风一般·2023-10-28 07:24

Flink 源码笔记 — execute 后发生了什么？

事实上，我们在编写业务代码时，是在勾勒程序执行的DAG图，当调用execute时这些逻辑才会开始工作，那么在我们调用execute函数后到底发生了什么？
飞不高的老鸟·2023-10-27 07:54

24-Storm的介绍、物理架构和计算架构以及Storm的数据分发策略

十四、Storm14.1DAG理解有向无环图DirectedAcyclicGraph（DAG）DAG是一个没有有向循环的、有限的有向图。
大数据下的画像人·2023-10-26 15:11

Storm大数据实时计算框架

StormDAG有向无环图DirectedAcyclicGraph（DAG）它由有限个顶点和有向边组成，每条有向边都从一个顶点指向另一个顶点；从任意一个顶点出发都不能通过这些有向边回到原来的顶点。
进击的-小胖子·2023-10-26 15:40

IOTA挖矿指南

现在能挖矿的DAG不就只有xDag吗？其实IOTA也能挖矿，具体方法请听小编慢慢道来。
区块链Wakanda·2023-10-24 17:27

15、指针三剑客之三：图（结合LeetCode 785、210、1059、1135、797学习）（1059、1135需Plus会员）

常见的图为有向无环图（DirectedAcyclicGraph，DAG）一、二
_神仙鱼_·2023-10-23 19:13
上一页 1 2 3 4 5 6 7 8 下一页
按字母分类： ABCDEFGHIJKLMNOPQRSTUVWXYZ其他