--------DFS

66.管理Hive外部表——Sentry

66.1演示环境介绍操作系统：CentOS6.5CM和CDH版本：5.12.1采用root用户操作集群运行正常，Kerberos/HDFS/Hive/Impala/Hue服务已与Sentry集成，Hive
大勇任卷舒·2024-01-28 11:57

leetcode-二叉树层序遍历

question：层序遍历和前中后序遍历的不同在与，后面三者用栈实现，二层序遍历则用队列实现比较块这里引出深度优先搜索DFS和广度优先搜索BFS解题:广度优先搜索BFSclassSolution:#广度优先搜索
白舟的博客·2024-01-28 11:15

HBase入门、基础原理介绍

1.2HBase架构二、HBase的读写删流程2.1HBase的写入流程2.2HBase的读流程2.3HBase的数据删除一、HBase介绍HBase是一个面向列式存储的分布式数据库，HBase底层存储基于HDFS
幸福右手牵·2024-01-28 09:07

HBase入门：运行机制

服务器工作原理用户读写数据的过程缓存的刷新StoreFile合并Store的工作原理HLog的工作原理HBase系统架构HBase的系统架构包括客户端、ZooKeeper服务器、Master主服务器、Region服务器HBase一般采用HDFS
缘友一世·2024-01-28 09:07

mac上搭建hbase伪集群

https://blog.csdn.net/a15835774652/article/details/135569456)但是为了模拟一把集群环境我们还是尝试搭建一个伪集群版2.环境准备jdk环境1.8+hdfs
寂夜了无痕·2024-01-28 08:15

Hive面试题

1）数据存储位置Hive存储在HDFS。数据库将数据保存在块设备或者本地文件系统中。2）数据更新Hive中不建议对数据的改写。
肿么肥四啊哈·2024-01-28 07:34

hive面试题

本质上是将SQL转换为MapReduce或者spark来进行计算，数据是存储在hdfs上，简单理解来说hive就是MapReduce的一个客户端工具。补充1：你可以说一下HQL转换为MR的任务流程吗？
韩顺平的小迷弟·2024-01-28 07:29

【HDFS】一天一个RPC系列--updateBlockForPipeline

本文目标是：弄清updateBlockForPipeline这个RPC的作用。弄清updateBlockForPipelineRPC的使用场景，代码里的调用点。一、updateBlockForPipeline的作用其定义在ClientProtocol接口里，是Client与NameNode之间的接口。看其代码注释描述：为一个underconstruction状态下的block获取一个新的GS与ac
叹了口丶气·2024-01-28 06:03

【BugFix】java.lang.NoSuchMethodError: java.nio.ByteBuffer.position(I)Ljava/nio/ByteBuffer；

2022-10-2010:43:59,633ERRORorg.apache.hadoop.hdfs.server.namenode.FSEditLog:Error:startinglogsegment946759failedfor
叹了口丶气·2024-01-28 06:02

【HDFS】EC写数据时checkStreamerFailures逻辑

本文试图弄清楚以下问题：checkStreamerFailures方法主要目的是做什么的？checkStreamerFailures方法的调用点（调用时机、条件）？checkStreamerFailures及其周边函数的逻辑。RQ1：checkStreamerFailures方法主要目的是做什么的？此方法的目的是在close流或者每次写完一整个stripe时，对streamer做健康判断。因为ce
叹了口丶气·2024-01-28 06:02

【HDFS】一天一个RPC系列--updatePipeline

建议先阅读【HDFS】一天一个RPC系列–updateBlockForPipeline本文目标是弄清楚以下问题：弄清updatePipeline这个RPC的作用。
叹了口丶气·2024-01-28 06:27

Ubuntu22.04三台虚拟机Hadoop集群安装和搭建（全面详细的过程）

Ubuntu22.04Hadoop集群安装和搭建（全面详细的过程）环境配置安装安装JDK安装Hadoop三台虚拟机设置克隆三台虚拟机设置静态IP修改虚拟机hostssh免密登录关闭防火墙Hadoop配置core-site.xmlhdfs-site.xmlyarn-site.xmlmapred-site.xmlworkers
WuRobb·2024-01-28 06:41

图论第一天|797.所有可能的路径 200. 岛屿数量

所有可能的路径文章链接：代码随想录题目链接：797.所有可能的路径思路：深搜入门，注意邻接表和邻接矩阵的形式classSolution{public:vector>result;vectorpath;voiddfs
啊就赵得柱·2024-01-28 06:00

leetcode hot100岛屿数量

那么这种类型题都是需要依靠深度优先搜索（DFS）或者广度优先搜索（BFS）来做的。这两种搜索，实际上都是利用了递归和回溯！
buptlzl·2024-01-28 03:23

1.25学习总结

今天学习了二叉树，了解了二叉树的创建和遍历的过程今天所了解的遍历过程主要分为三种，前序中序和后序，都是DFS的想法前序遍历：先输出在遍历左节点和右节点（输出->左->右）中序遍历：先遍历左节点，再输出和遍历右节点
啊这泪目了·2024-01-28 03:45

1.26学习总结

连通性判断DFS连通性判断步骤：1.从图上任意一点u开始遍历，标记u已经走过2.递归u的所有符合连通条件的邻居点3.递归结束，找到了的所有与u的连通点，就是一个连通块4.然后重复这个步骤找到所有的连通块
啊这泪目了·2024-01-28 03:15

LC101-200

欢迎点赞+收藏+关注~~LC101对称二叉树funcdfs(p,q*TreeNode)bool{ifp==nil&&q==nil{returntrue}ifp==ni
卷心菜不卷Iris·2024-01-28 02:02

acwing周赛36 B(经典不读题直接搜模板)

（无重边和自环）思路:首先dfs判断一下是否连通。如果m==n-1，是一棵树，没法有环。m==n，恰好一环。m>n，不止一环。
想出成果的acmer·2024-01-28 01:26

每日一题leetcode199-二叉树的右视图

二叉树的右视图https://leetcode-cn.com/problems/binary-tree-right-side-view/思路：优先从左边dfs，每次直接覆盖就好了。
一个酷酷的男子·2024-01-28 01:09

蓝桥杯真题：全球变暖（BFS、DFS连通性问题）

全球变暖你有一张某海域N×N像素的照片，”.”表示海洋、”#”表示陆地，如下所示：........##.....##........##...####....###........其中”上下左右”四个方向上连在一起的一片陆地组成一座岛屿，例如上图就有2座岛屿。由于全球变暖导致了海面上升，科学家预测未来几十年，岛屿边缘一个像素的范围会被海水淹没。具体来说如果一块陆地像素与海洋相邻(上下左右四个相邻像
sutr·2024-01-28 00:40

蓝桥杯真题讲解【大臣的旅费】（树的直径、DFS）

大臣的旅费很久以前，T王国空前繁荣。为了更好地管理国家，王国修建了大量的快速路，用于连接首都和王国内的各大城市。为节省经费，T国的大臣们经过思考，制定了一套优秀的修建方案，使得任何一个大城市都能从首都直接或者通过其他大城市间接到达。同时，如果不重复经过大城市，从首都到达每个大城市的方案都是唯一的。J是T国重要大臣，他巡查于各大城市之间，体察民情。所以，从一个城市马不停蹄地到另一个城市成了J最常做的
sutr·2024-01-28 00:38

＜＜ ＞＞ 快速使用二进制

使用>>和>4&1)当我要给一个数加1000（二进制）时a+=1usingnamespacestd;intn;voiddfs(intu,intstate){if(u==n){for(inti
陈琦煜·2024-01-28 00:33

迷宫问题（DFS）

用使用DFS解答该题。Input前8行输入一个8*8的int二维数组，其中0表示通路，1表示墙。第9行输入入口坐标。第10行输入出口坐标。
某个勤劳的孩子·2024-01-28 00:29

[蓝桥杯]真题讲解：岛屿个数（BFS遍历图）

[蓝桥杯]真题讲解：岛屿个数（BFS遍历图）一、视频讲解二、暴力代码（也是正解代码）一、视频讲解视频讲解二、暴力代码（也是正解代码）//岛屿个数：搜索（BFS/DFS）#includeusingnamespacestd
Turing_Sheep·2024-01-27 23:41

[蓝桥杯]真题讲解：景区导游（DFS遍历、图的存储、树上前缀和与LCA）

蓝桥杯真题讲解：一、视频讲解二、暴力代码三、正解代码一、视频讲解视频讲解二、暴力代码//暴力代码：DFS#include#defineendl'\n'#definedeb(x)coutpii;mapst
Turing_Sheep·2024-01-27 23:41

[蓝桥杯]真题讲解：飞机降落（DFS枚举）

[蓝桥杯]真题讲解：飞机降落（DFS枚举）一、视频讲解二、暴力代码（也是正解代码）一、视频讲解视频讲解二、暴力代码（也是正解代码）//飞机降落：暴力枚举DFS#include#defineintlonglongusingnamespacestd
Turing_Sheep·2024-01-27 23:39

蓝桥杯算法入门_27 (2016真题)

+通分---*模板*)寒假作业:(全排列+check)冰雹数(*大数处理*大数-加法|减法|乘法|除法--模板)卡片换位（BFS：从一个状态到达另一个状态的步数）密码脱落（还原回文串--朴素解法-模拟dfs
violet~evergarden·2024-01-27 23:39

ElasticSearch 开发总结（九）——SearchType：DFS_QUERY_THEN_FETCH和QUERY_THEN_FETCH

1.SearchTypeES的搜索类型有一个类SearchType（如下图示），关于该类的描述：Searchtyperepresentthemanneratwhichthesearchoperationisexecuted.ES的搜索分scatter/gather两个步骤：scatter阶段:客户端向10个分片发起搜索请求；gather阶段:10个分片完成搜索，符合条件的结果返回；客户端，将返回的
腊八粥2018·2024-01-27 22:14

ElasticSearch 开发总结（九）——SearchType：DFS_QUERY_THEN_FETCH和QUERY_THEN_FETCH

ElasticSearch开发总结（九）——SearchType：DFS_QUERY_THEN_FETCH和QUERY_THEN_FETCH-CSDN博客1.SearchTypeES的搜索类型有一个类SearchType
大叶子不小·2024-01-27 22:44

矩阵遍历-Java

对于矩阵，直观上可以想象的遍历方式按行、列，有些题目还有螺旋遍历，实际题目很多是需要BFS或者DFS的。技巧是结果空间遍历其实是4个方向的选择。
open_the_windows·2024-01-27 20:12

排序算法——拓扑排序(卡恩算法（广度优先）、dfs+深度搜索算法)

文章目录前言一、拓扑排序规则二、卡恩算法实现1.卡恩算法思想2.代码实现三、dfs+深度优先1.算法思想2.代码实现总结前言本篇博客主要记录拓扑排序的实现。包括卡恩算法实现和dfs+深度搜索算法实现。
孟小胖_H·2024-01-27 18:04

广度优先搜索和深度优先搜索（c++）

深度优先搜索（DFS）：从起点开始，沿着一条路径一直搜索到底，直到找到目标节点或者无法继续搜索为止。DFS一般使用递归或栈来实现。
渴望成长的旅行鼠·2024-01-27 18:02

ClickHouse(22)ClickHouse集成HDFS表引擎详细解析

文章目录HDFS用法实施细节配置可选配置选项及其默认值的列表libhdfs3支持的ClickHouse额外的配置限制Kerberos支持虚拟列资料分享系列文章clickhouse系列文章知乎系列文章HDFS
张飞的猪大数据·2024-01-27 17:35

AWS EKS搭建Redis集群

-5f5bd3ba://tmpmkdir-p/tmp/{redis1,redis2,redis3,redis4,redis5,redis6}umount/tmp安装持久化存储这里使用AWSEFS文件IDfs-b035f655redis-pv.yamlapiVersion
jcrose2580·2024-01-27 15:22

代码随想录算法训练营第15天 | 二叉树part02：●层序遍历和10道题● 226.翻转二叉树 ● 101.对称二叉树 2

尽管层序遍历的recursion方法能够生成按层级组织的输出，但它的遍历方式实际上是dfs在开头总结下这10道题：基础模板:102，107，199，429适合用bfs迭代，不推荐用dfs/递归（因为要同层内操作
weixin_51674457·2024-01-27 14:04

GBase 8a 数据迁移工具2---数据加载 “SQL 接口 LOAD DATA INFILE”

支持如下功能：支持本地文件加载支持从通用数据服务器拉取数据加载；支持FTP/HTTP/HDFS/SFTP等多种协议；支持多加载机对单表的并行加载，最大化加载性能；支持普通文本、gzip压缩、snappy
Linux有意思吗·2024-01-27 14:03

ES 分布式搜索的运行机制

ES分布式搜索的运行机制-腾讯云开发者社区-腾讯云ES分布式搜索的运行机制ES有两种search_type即搜索类型：•query_then_fetch（默认）•dfs_query_then_fetchquery_then_fetchquery_then_fetch1
大叶子不小·2024-01-27 13:27

搭建大数据平台常用的端口号

50070：HDFSwebUI的端口号8485:journalnode默认的端口号9000：非高可用访问数rpc端口8020：高可用访问数据rpc8088：yarn的webUI的端口号8080：master
修勾勾L·2024-01-27 13:51

YARN 工作原理

1、Hadoop2新增了YARN，YARN的引入主要有两个方面的变更：其一、HDFS的NameNode可以以集群的方式部署，增强了NameNode的水平扩展能力和高可靠性，水平扩展能力对应HDFSFederation
无羡爱诗诗·2024-01-27 13:43

Vue 前端实现 pdf 文件预览（无插件版）

Vue前端实现pdf文件预览（无插件版）一、template中的内容二、script中的内容data(){return{pdfSrc:''}}methods:{showPDF(){//请求方式：原生、ajax
wenjin_Deng·2024-01-27 13:41

vue Pdf 预览控制台把pdf的url暴露出来了

这是我原先的代码逻辑loadPdfStream(){constparams={bookUr
菜菜爱吃菜c·2024-01-27 12:35

数据结构之图的遍历

数据结构之图的遍历1、深度优先搜索(DepthFirstSearch，DFS)2、广度优先搜索(BreadthFirstSearch，BFS)  数据结构是程序设计的重要基础，它所讨论的内容和技术对从事软件项目的开发有重要作用
yysh_001·2024-01-27 12:27

深入浅出hdfs源码

1、hadoop基本介绍2、周边生态图3、hdfs读源码解析4、hdfs写源码解析5、hdfs副本机制解读6、hdfs常见管理源码解析7、hdfs高可用源码解析-ha8、hdfs监控源码解析-dnmetrics-nnmetrics
大数据之家·2024-01-27 10:39

2021-03-07

HDFS=====>解决存储问题·MapReduce=====>解决计算问题·Yarn=====>资源协调者·Zookeeper=====>分布式应用程序协调服务·Flume=====>日志收集系统·Hive
残月冷无声·2024-01-27 10:39

深入浅出hdfs-hadoop基本介绍

一、Hadoop基本介绍hadoop最开始是起源于ApacheNutch项目，这个是由DougCutting开发的开源网络搜索引擎，这个项目刚开始的目标是为了更好的做搜索引擎，后来Google发表了三篇未来持续影响大数据领域的三架马车论文：GoogleFileSystem、BigTable、Mapreduce开始掀起来了大数据的浪潮，paper原文可以参考我的这篇文章CSDN。这三篇论文介绍了如何
大数据之家·2024-01-27 10:03

Hadoop三大核心组件，hadoop原理

Hadoop的三大核心组件分别是：HDFS（HadoopDistributeFileSystem）：hadoop的数据存储工具。
你敢和我比剑吗·2024-01-27 09:03

Hadoop2.0架构及其运行机制，HA原理

文章目录一、Hadoop2.0架构1.架构图2.HA1)NameNode主备切换2)watcher监听3)脑裂问题3.组件1.HDFS2.MapReduce3.Yarn1.组件2.调度流程一、Hadoop2.0
Toner_唐纳·2024-01-27 09:30

Hadoop 原理及架构详解

视频网址：01-课程内容大纲与学习目标_哔哩哔哩_bilibili一、基础概念1、版本架构变迁2、集群简介主要包括两个集群：HDFS、YARN（MapReduce是计算框架，是代码层面的）这两个集群逻辑上分离
Should·L·2024-01-27 09:25

Hive实战 —— 电商数据分析(全流程详解 真实数据)

目录前言需求概述数据清洗数据分析一、前期准备二、项目1.数据准备和了解2.确定数据粒度和有效列3.HDFS创建用于上传数据的目录4.建库数仓分层5.建表5.1近源层建表5.2.明细层建表为什么要构建时间维度表
Byyyi耀·2024-01-27 08:25

力扣hot100 岛屿数量 dfs 图论

Problem:200.岛屿数量文章目录思路复杂度Code思路复杂度时间复杂度:O(n)O(n)O(n)空间复杂度:O(1)O(1)O(1)CodeclassSolution{intn,m;publicintnumIslands(char[][]grid){n=grid.length;if(n==0)return0;m=grid[0].length;intans=0;for(inti=0;i=n|
兑生·2024-01-27 06:40
上一页 13 14 15 16 17 18 19 20 下一页
按字母分类： ABCDEFGHIJKLMNOPQRSTUVWXYZ其他