DFS（深度搜索）

推荐系统lambda架构学习笔记之Hadoop、HDFS、YARN&MapReduce（三）

HadoopHadoop介绍Hadoop名字的由来作者：DougcuttingHadoop项目作者的孩子给一个棕黄色的大象样子的填充玩具的命名Hadoop的概念:Apache™Hadoop®是一个开源的,可靠的(reliable),可扩展的(scalable)分布式计算框架允许使用简单的编程模型跨计算机集群分布式处理大型数据集可扩展:从单个服务器扩展到数千台计算机，每台计算机都提供本地计算和存储可
吃一口桃酥·2023-12-02 19:50

Hadoop之MapReduce学习笔记（一）

1、mapreduce整体工作机制介绍回顾第HDFS第一天单词统计实例（HDFS版wordcount）：统计HDFS的/wordcount/input/a.txt文件中的每个单词出现的次数——wordcount
weixin_30752377·2023-12-02 19:50

hadoop学习笔记——NO.4_HADOOP集群搭建与使用初步

HADOOP集群搭建与使用初步HADOOP集群搭建集群简介HADOOP集群具体来说包含两个集群：HDFS集群和YARN集群，两者逻辑上分离，但物理上常在一起HDFS集群：负责海量数据的存储，集群中的角色主要有
蔡茂昌·2023-12-02 19:20

Hdoop学习笔记（HDP）-Part.20 安装Flume

.06安装OracleJDKPart.07安装MySQLPart.08部署Ambari集群Part.09安装OpenLDAPPart.10创建集群Part.11安装KerberosPart.12安装HDFSPart
这啥命啊·2023-12-02 19:46

Hdoop学习笔记（HDP）-Part.17 安装Spark2

.06安装OracleJDKPart.07安装MySQLPart.08部署Ambari集群Part.09安装OpenLDAPPart.10创建集群Part.11安装KerberosPart.12安装HDFSPart
这啥命啊·2023-12-02 19:45

Hdoop学习笔记（HDP）-Part.18 安装Flink

.06安装OracleJDKPart.07安装MySQLPart.08部署Ambari集群Part.09安装OpenLDAPPart.10创建集群Part.11安装KerberosPart.12安装HDFSPart
这啥命啊·2023-12-02 19:45

Hdoop学习笔记（HDP）-Part.11 安装Kerberos

.06安装OracleJDKPart.07安装MySQLPart.08部署Ambari集群Part.09安装OpenLDAPPart.10创建集群Part.11安装KerberosPart.12安装HDFSPart
这啥命啊·2023-12-02 19:15

Hdoop学习笔记（HDP）-Part.12 安装HDFS

.06安装OracleJDKPart.07安装MySQLPart.08部署Ambari集群Part.09安装OpenLDAPPart.10创建集群Part.11安装KerberosPart.12安装HDFSPart
这啥命啊·2023-12-02 19:15

Hdoop学习笔记（HDP）-Part.19 安装Kafka

.06安装OracleJDKPart.07安装MySQLPart.08部署Ambari集群Part.09安装OpenLDAPPart.10创建集群Part.11安装KerberosPart.12安装HDFSPart
这啥命啊·2023-12-02 19:15

Hdoop学习笔记（HDP）-Part.10 创建集群

.06安装OracleJDKPart.07安装MySQLPart.08部署Ambari集群Part.09安装OpenLDAPPart.10创建集群Part.11安装KerberosPart.12安装HDFSPart
这啥命啊·2023-12-02 19:14

Hdoop学习笔记（HDP）-Part.09 安装OpenLDAP

.06安装OracleJDKPart.07安装MySQLPart.08部署Ambari集群Part.09安装OpenLDAPPart.10创建集群Part.11安装KerberosPart.12安装HDFSPart
这啥命啊·2023-12-02 19:44

Hdoop学习笔记（HDP）-Part.02 核心组件原理

.06安装OracleJDKPart.07安装MySQLPart.08部署Ambari集群Part.09安装OpenLDAPPart.10创建集群Part.11安装KerberosPart.12安装HDFSPart
这啥命啊·2023-12-02 19:14

Hdoop学习笔记（HDP）-Part.05 Yum源配置

.06安装OracleJDKPart.07安装MySQLPart.08部署Ambari集群Part.09安装OpenLDAPPart.10创建集群Part.11安装KerberosPart.12安装HDFSPart
这啥命啊·2023-12-02 19:14

Hdoop学习笔记（HDP）-Part.07 安装MySQL

.06安装OracleJDKPart.07安装MySQLPart.08部署Ambari集群Part.09安装OpenLDAPPart.10创建集群Part.11安装KerberosPart.12安装HDFSPart
这啥命啊·2023-12-02 19:14

Hdoop学习笔记（HDP）-Part.08 部署Ambari集群

.06安装OracleJDKPart.07安装MySQLPart.08部署Ambari集群Part.09安装OpenLDAPPart.10创建集群Part.11安装KerberosPart.12安装HDFSPart
这啥命啊·2023-12-02 19:14

Hadoop Core - HDFS, MapReduce, YARN

HadoopCore-HDFS,MapReduce,YARN参加拉勾教育大数据训练营课程笔记引用：《Hadoop-TheDefinitiveGuide,4thEdition》,《拉勾导师笔记》简介大数据特性
DataPeak·2023-12-02 19:13

Hdoop学习笔记（HDP）-Part.03 资源规划

.06安装OracleJDKPart.07安装MySQLPart.08部署Ambari集群Part.09安装OpenLDAPPart.10创建集群Part.11安装KerberosPart.12安装HDFSPart
这啥命啊·2023-12-02 19:43

Hdoop学习笔记（HDP）-Part.06 安装OracleJDK

.06安装OracleJDKPart.07安装MySQLPart.08部署Ambari集群Part.09安装OpenLDAPPart.10创建集群Part.11安装KerberosPart.12安装HDFSPart
这啥命啊·2023-12-02 19:43

Hdoop学习笔记（HDP）-Part.04 基础环境配置

.06安装OracleJDKPart.07安装MySQLPart.08部署Ambari集群Part.09安装OpenLDAPPart.10创建集群Part.11安装KerberosPart.12安装HDFSPart
这啥命啊·2023-12-02 18:40

Android 技能图谱学习路线，flutter登录界面设计

Hash表，及Hash冲突的解决二叉树B+B-树基础排序算法：重点快排、归并排序、堆排序（大根堆、小根堆）快排的优化二分查找与变种二分查找哈夫曼树、红黑树字符串操作，字符串查找，KMP算法图的BFS、DFS
m0_66145114·2023-12-02 16:02

HDFS JAVA API的应用

(简答题)使用HDFS的JAVAAPI进行编程：（1）获取自己HDFS集群下的所有文件和目录；//获取自己HDFS集群下的所有文件和目录；importorg.apache.hadoop.conf.Configuration
星星失眠️·2023-12-02 16:28

【c++算法篇】--30分钟从0到精通讲解算法--搜索

c++搜索算法---详解搜索算法概念具体实现深度优先搜索（dfs）原理/思路实现过程例题题目1题目2题目3题目4AC代码+思路详解题目1题目2题目3题目4广度优先搜索（bfs）原理/思路实现过程例题题目
贤鱼不闲·2023-12-02 16:27

MAC【已解决】使用Docker部署的FastDFS踩过的坑

一.gettingconnection[-]Error:connectto172.17.0.1:23000.timedout如图：用MAC配置docker下的fastdfs的时候，绝对不要使用network
牛排烧鸡·2023-12-02 15:51

Mac docker 部署fastdfs服务（总结）

分别启动tracker、storagedockerrun-d--nametracker-p22122:22122-v/Users/longchen/Users/longchen/docker/fastdfs
斜月三·2023-12-02 15:17

HIVE SQL 、Hive MR参数设置

1、知识点回顾hive数据库是hdfs上的文件夹，表也是文件夹，表里的数据是文件hive建表createtable表名(字段1类型1,字段2类型2……)rowformatdelimitedfieldsterminatedby
故里良田·2023-12-02 15:39

P1219 [USACO1.5] 八皇后 Checker Challenge(dfs，搜索斜杠上的点的方法)

斜杠\和反斜杠/的英文名称，它们分别是"slash"和"backslash"解题思路使用dfs从深度1开始一层一层的向下搜索（y轴），所以定义x轴，斜杠，反斜杠三个bool数组判断是否搜索过，若深度到n
柏箱·2023-12-02 13:45

146173 Gold Rush（map，pair，dfs）

#includeusingnamespacestd;usingll=longlong;map,int>mp;booldfs(intn,intm){if(n==m)returntrue;if(n>
柏箱·2023-12-02 13:43

LeetCode 669 修剪二叉搜索树[二叉树 dfs] HERODING的LeetCode之路

解题思路：提及二叉树并且不是逐层处理，大部分都是用dfs解决，对于每个节点，为null直接返回，再看其是否在范围内，由于二叉搜索树的性质，如果不在范围内，小了，那么直接判断右子树（左子树只会更小），大了直接判断左子树
HERODING77·2023-12-02 12:05

hbase thrift2 jar包冲突导致启动失败问题排查记录

1、启动命令${HBASE_HOME}/bin/hbase-daemon.shstartthrift22、异常情况hbase-root-thrift2-hdfs-test07.yingzi.com.out
Java小田·2023-12-02 12:53

java: 通过URL读取hadoop HDFS

packagetju;importorg.apache.hadoop.fs.FsUrlStreamHandlerFactory;importorg.apache.hadoop.io.IOUtils;importjava.io.InputStream;importjava.net.MalformedURLException;importjava.net.URL;importjava.net.URLS
amadeus_liu2·2023-12-02 11:28

hadoop:通过Configuration读取hdfs

packagetju;importorg.apache.hadoop.conf.Configuration;importorg.apache.hadoop.fs.FSDataInputStream;importorg.apache.hadoop.fs.FSDataOutputStream;importorg.apache.hadoop.fs.FileSystem;importorg.apache.
amadeus_liu2·2023-12-02 11:28

HBase之HBCK2

HBCK2hbck2的使用方法reportMissingRegionsInMetaaddFsRegionsMissingInMetaassignsunassignsextraRegionsInMetafilesystemfixMetasetRegionStatesetTableStatebypassgenerateMissingTableDescriptorFileregionInfoMismat
zincooo·2023-12-02 11:43

【Spark数仓项目】需求八：MySQL的DataX全量导入和增量导入Hive

.增量导入的第一种实现方法2.另一种方法是时间字段3.dataX脚本三、利用Python自动生成Datax的json脚本1.创建mysql和hive数据库2.修改python脚本里面的密码(2处)和hdfs
程序终结者·2023-12-02 10:22

Hive中parquet压缩格式分区表的跨集群迁移记录

文章目录环境与需求集群环境需求描述操作步骤STEP1STEP2STEP3STEP4STEP5STEP6环境与需求集群环境华为FushionInsightA华为FushionInsightB华为集群管理机localHive3.1.0HDFS3.3.1
程序终结者·2023-12-02 10:17

SparkSQL 学习笔记----将RDD转换成DataFrame

一、RDD转换成DataFrame1、为什么要将RDD转换成DataFrame转换成DataFrame之后就可以直接针对HDFS等任何可以构建为RDD的数据，进行SparkSQL进行SQL查询了。
PZ~浪味仙·2023-12-02 10:46

Hadoop -- hadoop介绍

特性优点hadoop发展hadoop介绍hadoop底层是Java语言实现是Apache软件基金会的一款开源软件允许用户使用简单的编程模型实现跨机器集群对海量数据进行分布式计算处理hadoop核心组件hdfs
小陈菜奈-·2023-12-02 07:07

Hdoop学习笔记（HDP）-Part.14 安装YARN+MR

十四、安装YARN+MR1.MR中间结果存储权限使用Yarn提交MapReduce任务的时候，中间结果会保存在HDFS，/user/username/，如果/user目录下用户目录下不存在，则被创建，当
这啥命啊·2023-12-02 07:35

Hdoop学习笔记（HDP）-Part.1 关于HDP

Part.6安装OracleJDKPart.7安装MySQLPart.8部署Ambari集群Part.9安装OpenLDAPPart.10创建集群Part.11安装KerberosPart.12安装HDFSPart
这啥命啊·2023-12-02 07:35

hadoop的几个接口

8088接口：MapReduce50070接口：HDFS19888接口：jobhistoryseverjob历史服务器端口9000：namenode50090：secondarynamenode
Stephen6Yang·2023-12-02 04:03

HDFS

SecondaryNameNode监控HDFS状态的辅助后台程序，合并fsimage与edits。
歌哥居士·2023-12-02 02:22

主要分布式文件系统架构对比分析：GFS vs. Tectonic vs. JuiceFS

GFS开创了商品硬件的使用，并影响了大数据领域的Hadoop分布式文件系统(HDFS)等系统。Tectoni
沃趣数据库管理平台·2023-12-02 00:34

【算法每日一练]-图论（保姆级教程篇8 最小生成树 ，并查集篇）#修复道路 #口袋的天空 #搭配购买

目录题目：修复道路思路：题目：口袋的天空思路：题目：搭配购买思路：题目：修复道路思路：判断图的连通性可以用最小生成树，并查集，dfs和bfs。
亦歌希望你变强啊·2023-12-01 22:18

Codeforces Round 911 (Div. 2)（C~E）（DFS、数论（容斥）、SCC缩点 + DAG图上DP）

1900C-Anji'sBinaryTree题意：凯克西奇一直被安吉冷落。通过一个共同的朋友，他发现安吉非常喜欢二叉树，于是决定解决她的问题，以引起她的注意。Anji给了Keksic一棵有n个顶点的二叉树。顶点1是根，没有父顶点。所有其他顶点都有一个父顶点。每个顶点最多可以有2个子顶点、一个左子顶点和一个右子顶点。对于每个顶点，安吉都会告诉凯西奇它的左子和右子的索引，或者告诉他它们不存在。此外，每
fzzf592·2023-12-01 21:17

Leetcode 第 109 场双周赛 Problem D 将一个数字表示成幂的和的方案数（dfs+dp、01背包）

Leetcode第109场双周赛ProblemD将一个数字表示成幂的和的方案数（dfs+dp、01背包）题目给你两个正整数n和x。请你返回将n表示成一些互不相同正整数的x次幂之和的方案数。
专注如一·2023-12-01 19:59

大数据基础设施搭建 - Sqoop

文章目录一、上传压缩包二、解压压缩包三、配置环境变量（TODO）四、修改配置文件五、拷贝MySQL驱动六、测试能否连接数据库七、importMySQLtoHDFS一、上传压缩包官网：http://mirrors.hust.edu.cn
m0_46218511·2023-12-01 19:52

蓝桥杯每日一题2023.11.30

题目描述九数组分数-蓝桥云课(lanqiao.cn)题目分析此题目实际上是使用dfs进行数字确定，每次循环中将当前数字与剩下的数字进行交换eg.1与2、3、4、、、进行交换2与3、4、、、进行交换填空位置将其恢复原来位置即可
Akct·2023-12-01 18:27

Java核心知识点整理大全25-笔记

目录25.Hadoop25.1.1.概念25.1.2.HDFS25.1.2.1.Client25.1.2.2.NameNode25.1.2.3.SecondaryNameNode25.1.2.4.DataNode25.1.3
希斯奎·2023-12-01 17:31

textfilestream_Spark从本地文件流式传输到hdfs。textFileStream-问答-阿里云开发者社区-阿里云...

我正在尝试将本地目录内容流式传输到HDFS。脚本将修改此本地目录，并且每5秒添加一次内容。我的spark程序将流式传输本地目录内容并将其保存到HDFS。但是，当我开始流式传输时，没有任何事情发生。
十吾十吾·2023-12-01 16:20

蓝桥杯算法心得——仙界诅咒（dfs）

大家好，我是晴天学长，搜索型的dfs，差点开二维矩阵了，仔细一想，没那么夸张啊，哈哈哈，需要的小伙伴可以关注支持一下哦！后续会继续更新的。
晴天学长·2023-12-01 16:49

hadoop完全分布式搭建

文章目录集群部署规划服务器准备Mobaxterm远程登录实验前准备安装软件工具关闭防火墙安装JDK和Hadoop创建软件包目录解压软件包配置环境变量集群搭建先创建HDFS工作目录和LOG目录配置集群配置环境配置
撕得失败的标签·2023-12-01 12:24
上一页 43 44 45 46 47 48 49 50 下一页
按字母分类： ABCDEFGHIJKLMNOPQRSTUVWXYZ其他