深度优先搜索（DFS）

ambari 开启hdfs回收站机制

hdfs回收站类似于我们常用的windows中的回收站，被删除的文件会被暂时存储于此，和回收站相关的参数有两个：fs.trash.interval：默认值为0代表禁用回收站，其他值为回收站保存文件时间，
dogplays·2023-12-16 00:01

hue的安装和hadoop集群整合

通过使用Hue我们可以在浏览器端的Web控制台上与Hadoop集群进行交互来分析处理数据，例如操作HDFS上的数据，运行Map
五块兰州拉面·2023-12-16 00:15

大数据学习（一）-------- HDFS

2、hadoophadoop有三个核心组件：hdfs：分布式文件系统mapreduce：分布式运算编程框架yarn：分布式资源调度平台3
大数据流动·2023-12-15 21:01

Hadoop在mac上的安装与配置

adoptopenjdk8安装指导，指导里面把java换成8：https://medium.com/beeranddiapers/installing-hadoop-on-mac-a9a3649dbc4d验证hdfs
大红豆小薏米·2023-12-15 20:45

Hadoop和Spark的区别

SparkSpark模型是对Mapreduce模型的改进，可以说没有HDFS、Mapreduce就没有Spark。Spark可以使用Yarn作为他的资源管理器，并且可以处理HDFS数据。
旅僧·2023-12-15 20:12

割点（tarjan算法）

文章目录割点(无向图).总结：割点算法实现模拟题解思考再来一题割点(无向图).P3388【模板】割点（割顶）题目链接:洛谷tarjan遍历过程视频链接总结：1.图用dfs的遍历。
axtices·2023-12-15 19:57

芭芭拉冲鸭~(dfs树两点最大距离)

树上两节点的最大距离牛客网：题目链接：感悟：1.dfs的再理解，对树的遍历，用深度标记到根节点的距离。2.树两点的最大距离的求解。题意：给定一棵无根树，树上每个节点被染成了红色或绿色或蓝色。
axtices·2023-12-15 19:57

bzoj1935 [Shoi2007]Tree 园丁的烦恼

有一天国王漫步在花园里，若有所思，他问一个园丁道：“最近我在思索一个问题，如果我们把花坛摆成六个六角形，那么……”“那么本质上它是一个深度优先搜索，陛下”，园丁深深地向国王鞠了一躬。
weixin_30740581·2023-12-15 19:16

【Hadoop】执行start-dfs.sh启动hadoop集群时，datenode没有启动怎么办

执行start-dfs.sh后，datenode没有启动，很大一部分原因是因为在第一次格式化dfs后又重新执行了格式化命令（hdfsnamenode-format)，这时主节点namenode的clusterID
不怕娜·2023-12-15 19:13

spark链接hive时踩的坑

中也可以看到这个数据库，建表插入数据也没有问题，但是当我们去查询数据库中的数据时，发现查不到数据，去查hive的元数据，发现，spark在创建数据库的时候将数据库创建在了本地文件系统中而我们的hive数据是存放在hdfs
YuPangZa·2023-12-15 18:00

【数据结构第 6 章 ④】- 用 C 语言实现图的深度优先搜索遍历和广度优先搜索遍历

目录一、深度优先搜索1.1-深度优先搜索遍历的过程1.2-深度优先搜索遍历的算法实现二、广度优先搜索2.1-广度优先搜索遍历的过程2.2-广度优先搜索遍历的算法实现和树的遍历类似，图的遍历也是从图中某一顶点出发
melonyzzZ·2023-12-15 17:48

大数据基础知识

为了一场紧急考试，没有正经系统学习过大数据知识的我开始恶补概念涉及Hadoop、Hbase、Spark、Flink、Flume、Kafka、Sqoop、HDFS、Hive、Mapreduce、Impala
偶余杭·2023-12-15 17:22

HBase

HBase是一个基于列式存储的分布式数据库，其核心架构由五部分组成：HBaseClient、HMaster、RegionServer、ZooKeeper以及HDFS。
编织幻境的妖·2023-12-15 17:35

HBase 详细图文介绍

2.3.1NameSpace2.3.2Table2.3.3Row2.3.4Column2.3.5TimeStamp2.3.6Cell三、HBase基本架构架构角色3.1Master3.2RegionServer3.3Zookeeper3.4HDFS
Stars.Sky·2023-12-15 16:24

LintCode 123 · Word Search (DFS字符处理经典题！)

123·WordSearchAlgorithmsMediumDescriptionGivena2Dboardandastringword,findifthestringwordexistsinthegrid.Thestringwordcanbeconstructedfromlettersofsequentiallyadjacentcell,where“adjacent”cellsarethoseh
纸上得来终觉浅 绝知此事要躬行·2023-12-15 16:23

【树+前缀和】437. 路径总和 III——思路解释

【树+前缀和】437.路径总和III——思路解释437.路径总和III1.暴力法——深度优先搜索思路：逐个遍历树的每个节点从该节点开始遍历其左右子树，并累加求和如果当前的和等于targetSum，则ans
Yozu_Roo·2023-12-15 15:50

【搜索与图论】1002-走出迷宫

：2021秋季算法入门班第六章习题：搜索与搜索剪枝1002-走出迷宫链接：1002-走出迷宫样例输入：33S....E...33S#######E输出：YesNo思路数据范围500*500可以直接暴力dfs
脑瓜上长蘑菇·2023-12-15 13:44

kudu由来、架构、数据存储结构、注意事项

1.1一方面：在KUDU之前，大数据主要以两种方式存储；（1）静态数据：以HDFS引擎作为存储引擎，适用于高吞吐量的离线大数据分析场景。这类存储的局限性是数据无法进行随机的读写。（2）动
AllenGd·2023-12-15 13:32

Knowledge Graph知识图谱—8. Web Ontology Language (OWL)

8.WebOntologyLanguage(OWL)在RDFs不可能实现：Propertycardinalities,Functionalproperties,Classdisjointness,wecannotproducecontradictions
大白要努力啊·2023-12-15 12:40

【基础知识】Hadoop生态系统

关键词——容灾主从结构、多副本主要特点分布式存储-Hadoop采用HDFS文件系统,可以将大数据分布式存储在集群中的多台服务器上。
偏振万花筒·2023-12-15 12:40

【基础知识】大数据概述

发展历程中国开源生态图谱2023参考内容中国开源生态图谱2023.pdf技术组件说明数据集成sqoop、dataX、flume数据存储hdfs、kafka数据处理mapreduce、hive、impala
偏振万花筒·2023-12-15 12:39

hadoop-hdfs简介及常用命令详解（超详细）

文章目录前言一、HDFS概述1.HDFS简介2.HDFS架构3.HDFS文件操作二、HDFS命令介绍1.hdfs命令简介2.HDFS命令的基本语法3.常用的HDFS命令选项三、HDFS常用命令1.列出指定路径下的文件和目录
大数据魔法师·2023-12-15 11:22

数据结构：图的存储和遍历

文章目录图的存储结构邻接矩阵邻接矩阵的存储模拟实现邻接表邻接表的模拟实现图的遍历DFS和BFS遍历图的存储结构和遍历的实现图也是一种数据结构，在实际生活中有广泛运用，因此本篇总结的就是图的存储等图的存储结构在图中既有节点
海绵宝宝de派小星·2023-12-15 08:49

hadoop使用内置包进行性能测试TestDFSIO、NNBench、MRBench、SliveTest

hadoop使用内置包进行性能测试hadoop使用内置包进行性能测试hadoop使用内置包进行性能测试TestDFSIOread&writeNNBenchMRBenchSliveTestTestDFSIOread
何亚告·2023-12-15 07:51

大数据技术13：HBase分布式列式数据库

Hadoop可以通过HDFS来存储结构化、半
Java架构何哥·2023-12-15 07:05

【Spark精讲】Spark存储原理

目录类比HDFS的存储架构Spark的存储架构存储级别RDD的持久化机制RDD缓存的过程Block淘汰和落盘类比HDFS的存储架构  HDFS集群有两类节点以管理节点-工作节点模式运行，即一个NameNode
话数Science·2023-12-15 07:29

【Hadoop】

Hadoop是一个开源的分布式离线数据处理框架，底层是用Java语言编写的，包含了HDFS、MapReduce、Yarn三大部分。
想当运维的程序猿·2023-12-15 07:43

Python中栈的概念和使用

目录一、引言二、栈的概念三、栈的使用1、创建栈2、入栈操作3、出栈操作4、查看栈顶元素5、判断栈是否为空四、应用场景1、函数调用2、表达式求值3、深度优先搜索4、括号匹配五、总结一、引言栈是一种重要的数据结构
傻啦嘿哟·2023-12-15 07:07

hive聚合函数之JOIN原理及案例

1.数据准备原始数据创建dept.txt文件，并赋值如下内容，上传HDFS。
Appreciate(欣赏)·2023-12-15 06:03

07用户行为日志数据采集

用户行为数据由Flume从Kafka直接同步到HDFS，由于离线数仓采用Hive的分区表按天统计，所以目标路径要包含一层日期。具体数据流向如下图所示。
kk_io·2023-12-15 06:22

hive的load报错Error: EXECUTION FAILED: Task MOVE error HiveException: [Error 20531] Unable to move sour

Error:EXECUTIONFAILED:TaskMOVEerrorHiveException:[Error20531]Unabletomovesourcehdfs://nameservice1/tmp
五月天的尾巴·2023-12-15 03:12

acwing-蓝桥杯C++ AB组辅导课Day1-递归

感谢梦翔老哥的蓝桥杯C++AB组辅导课~省一刷200题国赛拿成绩300题比赛考察的是各种模型的熟练度，可以从dfs的角度比较各个模型与当前问题的匹配程度。
向来痴_·2023-12-15 02:57

2.CENTOS安装CDH和Kudu-1

Cloudera企业级数据中心的安装主要分为4个步骤：集群服务器配置，包括安装操作系统、关闭防火墙、同步服务器时钟等；外部数据库安装安装Cloudera管理器；安装CDH集群；集群完整性检查，包括HDFS
大勇任卷舒·2023-12-15 01:40

数据结构 图的广度优先搜索和深度优先搜索

一、广度优先搜索广度优先搜索等价于树的层次遍历，将起点的每一层进行遍历当这一层结点全部被遍历完时，再遍历下一层次，从图中可以根据距离遍历起点的长度进行层次选择例：以a结点作为开始结点a的下一层次有bce三个结点所以遍历完a结点遍历下一层次也就是b、c、e结点将下一层次bce结点全部遍历完再遍历a的下两个层次的结点也就是d结点a->b->c->eb->c->d->ec->d->ed->ee最终广度优
L_cl·2023-12-15 00:22

【Hadoop_03】HDFS概述与Shell操作

1、集群配置（1）集群启动/停止方式总结（2）编写Hadoop集群常用脚本（3）常考面试题【1】常用端口号【2】常用配置-文件2、HDFS概述（1）HDFS产出背景及定义（2）HDFS优缺点（3）HDFS
温欣2030·2023-12-14 23:04

处理合并目录下的Excel文件数据并指定列去重

Python代码实现importosimportpandasaspdimportwarningsimporttimefromtqdmimporttqdm#进度条展示defread_excel(path):dfs
IT-例子·2023-12-14 23:27

【Java】图论笔记【有代码】

已含dfs和bfs，相关算法正在研究代码importjava.util.
Urf_read·2023-12-14 23:23

《算法竞赛入门到进阶》——图论

10.1图的基本概念（P214）10.2图的存储（P215）10.3图的遍历和连通性（P217）bfs和dfs。10.4拓扑排序（P219）一个图能进行拓扑排序的充要条件是它是一个有向无环图。
MaTF_·2023-12-14 20:30

外部文件数据写入hive

hive数据库是基于HDFS的一个数据库，是对hdfs数据的一个映射关系。注意：hive数据库存入数据的时候不建议使用insertinto语句来进行插入，这样的的操作方式在效率上会很低效。
小赵要加油·2023-12-14 19:24

Hive：从HDFS回收站恢复被删的表

1.确认HDFS是否开启回收站功能2.查看回收站中的数据被删除的数据会放在删除数据时使用的用户目录下，如：使用pgxl删除的，那么删除的数据会放在如下目录：/user/pgxl/.Trash该目录下会有多个文件夹
有语忆语·2023-12-14 19:49

LeetCode 每日一题 Day 6（DFS+BFS)

1466.重新规划路线n座城市，从0到n-1编号，其间共有n-1条路线。因此，要想在两座不同城市之间旅行只有唯一一条路线可供选择（路线网形成一颗树）。去年，交通运输部决定重新规划路线，以改变交通拥堵的状况。路线用connections表示，其中connections[i]=[a,b]表示从城市a到b的一条有向路线。今年，城市0将会举办一场大型比赛，很多游客都想前往城市0。请你帮助重新规划路线方向，
XforeverZ·2023-12-14 19:16

大数据存储技术（1）—— Hadoop简介及安装配置

概念（二）Hadoop发展历史（三）Hadoop三大发行版本（四）Hadoop的优势二、Hadoop的组成（一）Hadoop1.x和Hadoop2.x的区别编辑（二）Hadoop的三种运行模式（三）HDFS
Francek Chen·2023-12-14 19:08

Scala-初学

前提，已经安装好Scala在Linux终端准备资料：a.txt内容HIVE底层是hdfs和mapreduce实现存储和计算的。
Logan_addoil·2023-12-14 19:07

MapReduce的执行过程（以及其中排序）

(ReduceTask):拷贝数据(copy)------排序(sort)-----合并(reduce)-----写出(write)1、Maptask读取：框架调用InputFormat类的子类读取HDFS
Logan_addoil·2023-12-14 19:29

【重点】【DFS】124.二叉树中的最大路径和

classSolution{privateintmax=Integer.MIN_VALUE;publicintmaxPathSum(TreeNoderoot){if(root==null){return0;}dfs
Allenlzcoder·2023-12-14 17:26

栈解决迷宫问题

这种解决思路类似DFS，从起点开始向前走，每走一步，就向四周探寻可走方向，如果找到一个可走方向，首先“保存现场”（将走向的是哪一个方向保存下来），再向找到的方向走一步，重复上述过程。
小YI在努力变强·2023-12-14 17:51

[数据结构] python 栈解决迷宫问题

栈——深度优先搜索（回溯法）思路：使用栈存储当前路径。从一个节点开始，任意找下一个能走的点，当找不到能走的点时，退回上一个点寻找是否有其他方向的点。
Trick fairy·2023-12-14 17:44

用栈解决迷宫问题

思想使用栈来解决迷宫问题的思想是通过深度优先搜索算法来探索迷宫中的路径。栈的特点是后进先出，这正好符合深度优先搜索的思想，即先探索一个方向直到无法继续为止，然后回溯到上一个节点，再探索其他方向。
励志成为大佬的小杨·2023-12-14 16:50

datax的mysql 到hdfs文件系统 --- 支持高可用

datax的mysql到hdfs文件系统上！
Java页大数据·2023-12-14 16:27

ros2+gazebo建立机器人

BuildingyourownrobotInthistutorialwewilllearnhowtobuildourownrobotinSDFormat.Wewillbuildasimpletwowheeledrobot.本文用SDF文件建立一个2轮机器人YoucanfindthefinishedSDFfileforthetutorialhere.SDF文件点击下载WhatisSDFSDForma
geniusNMRobot·2023-12-14 16:56
上一页 41 42 43 44 45 46 47 48 下一页
按字母分类： ABCDEFGHIJKLMNOPQRSTUVWXYZ其他