Hadoop博文

[H滑动窗口] lc239. 滑动窗口最大值(模拟+数据结构+单调队列+滑动窗口模板题)

文章目录1.题目来源2.题目解析1.题目来源链接：239.滑动窗口最大值相关博文：[单调队列+模板]单调队列模板题单：待补充2.题目解析一道单调队列模板题，不赘述了吧。
Ypuyu·2025-03-02 01:26

使用宝塔大家Java项目遇到的问题

记录一下使用宝塔大家Java项目遇到的问题：1.没有那个文件或目录/var/tmp/springboot/vhost/scripts/system-service.sh:没有那个文件或目录Feb2811:13:01hadoop05spring_system-service
LOVE_DDZ·2025-03-01 10:45

如何用Python 3调用ArXiv API查询ArXiv论文元数据

诸神缄默不语-个人CSDN博文目录ArXivAPI文档：arXivAPIAccess-arXivinfoarXivAPIBasics-arXivinfoarXivAPIUser’sManual-arXivinfo
诸神缄默不语·2025-03-01 09:37

如何使用Spark Streaming将数据写入HBase

Spark：确保Spark已经安装，并且Spark版本与HBase的Hadoop版本兼容。HBaseConnectorforSpark：你需要使用HBase的SparkConnecto
Java资深爱好者·2025-03-01 05:02

项目经验之LZO压缩？思维导图 代码示例（java 架构)

在Hadoop生态系统中，使用LZO压缩可以显著减少存储空间，并且由于其快速的解压速度，对于大规模数据处理任务来说是非常有利的。以下是关于LZO压缩的项目经验总结、思维导图描述以及Java代码示例。
用心去追梦·2025-03-01 05:31

Partition架构

优质博文：IT-BLOG-CNPartition架构【1】结构：Region至少3个Zone，Zone内至少两个Partition，Partition内至少1个K8SMemberCluster；【2】故障域
m0_74825656·2025-03-01 02:14

【Docker】Linux部署web版Firefox

于是为了让它回归正常，命运的齿轮开始转动~这篇博文的标题又叫：如何正确下载google插件1.创建外部挂载目录mkdir -p /data/firefox/config2.
流情·2025-02-28 19:00

Tomcat 都有哪些核心组件

优质博文：IT-BLOG-CN【1】Server：Server元素在最顶层，代表整个Tomcat容器，因此他必须是server.xml中唯一一个最外层的元素。
web14786210723·2025-02-28 19:27

【贪心+二分+双指针】P9559 [SDCPC2023] Fast and Fat|普及

本文涉及知识点本博文代码打包下载C++贪心C++二分查找C++算法：滑动窗口及双指针总结[SDCPC2023]FastandFat题面翻译【题目描述】您正在参加一场团体越野比赛。
软件架构师何志丹·2025-02-28 16:38

HIVE 面试题总结

Hive依赖于HDFS存储数据，Hive将HQL转换成MapReduce执行，所以说Hive是基于Hadoop的一个数据仓库工具，实质就是一款基于HDFS的MapReduce计算框架，对存储在HDFS中的数据进行分析和管理
小余真旺财·2025-02-28 11:00

Linux C多人网络聊天室

经过好几天的日夜奋斗，总算把这个聊天室给做出来了，虽然说不上多好，但也是这几天从早到晚劳动的成功，所以就写这篇博文来记录一下啦。
HWY_猿·2025-02-28 11:30

Hive 面试题

Hive是基于Hadoop的一个数据仓库工具，用来进行数据提取、转化、加载，这是一种可以存储、查询和分析存储在Hadoop中的大规模数据的机制。
昨夜为你摘星·2025-02-28 11:59

python调用kafka

先启动hadoop，zookeeper，kafka启动命令hadoop启动命令sbin/start-all.shzookeeper启动命令.
smile__su·2025-02-28 06:47

第五篇 普通人的编辑利器EmEditor——Vim的替代者（一）

现在polaris的博客基本搞定，原计划是接着完善它然后把之前的博文导进去（没有找到好的方法，只能一篇篇复制，调格式了），今天得知一位网友很“期待”文本编辑器序列的第五篇，于是决定停下其他的事情，钻心写这篇文章
weixin_34236497·2025-02-28 05:40

大模型专栏博文汇总和索引

大模型专栏主要是汇总了我在学习大模型相关技术期间所做的一些总结和笔记，主要包括以下几个子专栏：DeepSeek-R1AIGC大模型实践Transformer多模态系统视频理解对比学习目标检测目标跟踪图神经网络大模型专栏汇总了以上所有子专栏的论文，目前暂时先按照不同的技术领域划分子专栏，子专栏之间的内容可能会有交集，不完全是独立的。为了方便查阅相关模块的内容，故以此文章进行汇总与索引。一、DeepS
Donvink·2025-02-28 03:53

【二分查找 图论】P10050 [CCO2022] Alternating Heights|普及

本文涉及的基础知识点本博文代码打包下载C++二分查找C++图论C++算法：滑动窗口及双指针总结[CCO2022]AlternatingHeights题目描述Troy计划给CCO的学生拍一张合影，他向你寻求帮助
闻缺陷则喜何志丹·2025-02-28 03:20

【二分查找】P9698 [GDCPC2023] Path Planning|普及

本文涉及的基础知识点本博文代码打包下载C++二分查找[GDCPC2023]PathPlanning题面翻译【题目描述】有一个nnn行mmm列的网格。
闻缺陷则喜何志丹·2025-02-28 03:19

AI加Python零代码输入实现微博文本数据实体挖掘（零基础）

今天，我打算以一个对文本挖掘完全陌生的研究者为例，进行他行本篇文章的写作。关于文本实体挖掘，我大概规划如下：一是了解一下什么是文本数据实体挖掘，二是这个实体挖掘有哪些评价指标，三是python能否干这个事，有那些可视化的方法，需要哪些依赖库，四是让AI帮我生成代码，五是调试实现，六是总结方法。1.了解一下什么是文本数据实体挖掘**AI提供的概念：**文本数据实体挖掘（EntityExtractio
智享食事·2025-02-27 19:10

Python大数据可视化：基于Python的王者荣耀战队的数据分析系统设计与实现_flask+hadoop+spider

开发语言：Python框架：flaskPython版本：python3.7.7数据库：mysql5.7数据库工具：Navicat11开发软件：PyCharm系统展示管理员登录管理员功能界面比赛信息管理看板展示系统管理摘要本文使用Python与MYSQL技术搭建了一个王者荣耀战队的数据分析系统。对用户提出的功能进行合理分析，然后搭建开发平台以及配置计算机软硬件；通过对数据流图以及系统结构的设计，创建
m0_74823490·2025-02-27 12:47

git基本使用方法

git基本用法新建远程仓库并克隆到本地关于git库的分支问题版本切换记录自己的第一次博文！（有问题欢迎指正，感谢！）
他们说眼睛也会笑·2025-02-27 10:36

华为MRS产品组件

MRS：MRS是一个在华为云上部署和管理Hadoop系统的服务，一键即可部署Hadoop集群。
QianJin_zixuan·2025-02-27 06:59

Hive SQL 使用及进阶详解

一、Hive简介Hive是建立在Hadoop之上的数据仓库基础架构，它提供了类似于SQL的查询语言HiveSQL（也称为HQL），用于对存储在Hadoop分布式文件系统（HDFS）中的大规模数据进行数据查询和分析
小四的快乐生活·2025-02-27 03:37

docker-compose -volumes 两种不同定义方式

学习docker-compose部署hadoop集群、看到docker-compose一种不同volumes定义方式version:"3"services:namenode:image:bde2020/
胖胖胖胖胖虎·2025-02-26 14:34

初识hadoop

关于hadoop的写入（存入）nn里面维护了一份元数据。
西门吹水之城·2025-02-26 12:45

HDFS是如何存储和管理大数据

HDFS（HadoopDistributedFileSystem，Hadoop分布式文件系统）是专为大数据处理而设计的分布式文件系统，具有高吞吐量、高容错性等特点，适用于大规模数据存储和管理。
python资深爱好者·2025-02-26 11:38

Hadoop 基础原理

Hadoop基础原理基本介绍Hadoop的必要性Hadoop核心组件Hadoop生态系统中的附加组件HDFSHDFS集群架构HDFS读写流程HDFS写流程HDFS读流程NameNode持久化机制MapReduce
disgare·2025-02-26 11:38

kl散度度量分布_解读KL散度：从定义到优化方法

引言这篇博文将介绍KL散度，即相对熵。这篇博文给出了一个理解相对熵的简单例子，因此这里不会试图重写原作者的内容。除了阅读原博客文章之外，这里还会根据我在信息论方面的工作经验给出一些基于原博文的额外
weixin_39846364·2025-02-26 08:20

Spark集群架构介绍

据SparkCertifiedExperts显示，在内存中运行时，Sparks性能要比Hadoop快一百倍，在磁盘上运行，Sparks比Hadoop快达十倍。
olifchou·2025-02-25 20:23

Spark Standalone集群架构

北风网spark学习笔记SparkStandalone集群架构SparkStandalone集群集群管理器，clustermanager：Master进程，工作节点：Worker进程搭建了一套Hadoop
htfenght·2025-02-25 20:22

Hadoop--NameSpace（名称空间）

1.名称空间的定义  HDFS的名称空间是一个逻辑上的文件系统目录树，类似于传统文件系统的目录结构。组成目录：用于组织文件的逻辑容器。文件：存储在HDFS中的实际数据单元。元数据：包括文件名、权限、所有者、文件大小、创建时间、修改时间等信息。2.名称空间的作用名称空间的主要作用是：组织文件通过目录树的形式组织文件，方便用户管理和访问。维护元数据记录文件和目录的元数据信息（如权限、所有者、大小等）。
Cynthiaaaaalxy·2025-02-25 18:42

spark程序提交到集群上_Spark集群模式&Spark程序提交

ApacheMesos—通用的集群管理，可以在其上运行HadoopMapReduce和一些服务应用。HadoopYARN—Hadoop2中的资源管理器。
毫无特色·2025-02-25 16:25

4.3 QVariant 类功能详解、应用示例与类型转换

4.3QVariant类功能详解、应用示例与类型转换本系列博文旨在为Qt开发者提供一站式的学习资源，内容涵盖从基础控件使用到高级特性如多线程与图形编程等。
Hello Miss.DJ·2025-02-25 15:24

【GoLang】【算法模板】2、GoLang 算法模板整理

可能有些板子、博文是
Ypuyu·2025-02-25 15:45

Hadoop--Secondary NameNode工作机制，作用及与NameNode HA的区别

  SecondaryNameNode主要用于辅助NameNode进行元数据的管理和检查点（Checkpoint）的生成。1.SecondaryNameNode的工作机制详解SecondaryNameNode的工作机制可以分为以下步骤：①SecondaryNameNode询问NameNode是否需要CheckpointSecondaryNameNode会定期（由dfs.namenode.check
Cynthiaaaaalxy·2025-02-25 08:32

【二分查找】P11201 [JOIG 2024] たくさんの数字 / Many Digits|普及

本文涉及的基础知识点本博文代码打包下载C++二分查找[JOIG2024]たくさんの数字/ManyDigits题目描述JOI高中的Aoi决定在N×NN\timesNN×N的表格中写下N2N^2N2个非负整数
闻缺陷则喜何志丹·2025-02-25 08:01

数据结构——栈的实现

今天，我们来写一下关于栈的博文。1.首先我们先了解一下什么是栈？一：概念：栈：一种特殊的线性表，其只允许在固定的一端进行插入和删除元素操作。进行数据插入和删除操作的一端称为栈顶，另一端称为栈底。
go_bai·2025-02-25 06:43

Hadoop之jdk的安装

【实验目的】1.安装配置JDK1.五台独立PC机或虚拟机主机之间有有效的网络连接2.每台主机内存2G以上，磁盘剩余空间500M以上所有主机上已安装CentOS7.4操作系统3.所有主机已完成网络属性配置1.卸载原有JDK该项的所有操作步骤需要使用root用户进行。并且在集群中每台主机操作一次，发现没有，不必卸载因为我的查看没有jdk，所以不需要卸载原有的，只需直接安装即可。2.安装此项的所有操作步
快来削我吖·2025-02-25 01:11

从嵌入式到 AI：如何从零开始进入人工智能行业

本篇博文将从零开始，详细讲解如何从嵌入式软件工程转向AI，并提供实战建议，让你更顺畅地进入AI领域。1.为什么嵌入式开发者适合进入AI领域？
嵌入式Jerry·2025-02-24 19:25

Hadoop HDFS基准测试

一、测试写入速度确保HDFS集群和YARN集群成功启动hadoopjar/export/server/hadoop-3.1.4/share/hadoop/mapreduce/hadoop-mapreduce-client-jobclient
Yvonne978·2025-02-24 14:22

jmeter 与大数据生态圈中的服务进行集成

以下为你详细介绍JMeter与大数据生态圈中几种常见服务（HadoopHDFS、Spark、Kafka、Elasticsearch）集成的方法：与HadoopHDFS集成实现思路HDFS是Hadoop的分布式文件系统
小赖同学啊·2025-02-24 13:40

数据质量管理工具（Trifacta Wrangler）

2015年10月：正式推出TrifactaWrangler，让非技术用户也能通过直观的可视化工作流程来探索、转换和丰富数据，同时其旗舰产品、专注于Hadoop的Trifacta数据处理解决方案更名为TrifactaWranglerEnterprise
deepdata_cn·2025-02-24 09:46

Hadoop常用操作命令

启动HDFSsbin/start-dfs.sh启动yarnsbin/start-yarn.sh启动NodeManageryarn-daemon.shstartnodemanager启动DataNodehadoop-daemon.shstartdatanode
hzw0510·2025-02-24 07:02

垂类大模型微调（二）：使用LLaMA-Factory

上一篇博文和大家一起安装了LLaMA-Factory工具，并下载了大模型在上面进行了简单的加载和推理，今天尝试通过LoRa技术对大模型进行微调；一、训练集准备1.1介绍训练集结构这里演示对Qwen2.5
CITY_OF_MO_GY·2025-02-24 07:00

【Python爬虫(45)】Python爬虫新境界：分布式与大数据框架的融合之旅

目录一、大数据处理框架初印象1.1Hadoop：大数据处理的基石1.2
奔跑吧邓邓子·2025-02-24 05:18

hive运维

showlocks;查看锁unlocktable表名;释放锁发现释放不了锁，执行下面sethive.support.concurrency=false;sethive.txn.manager=org.apache.hadoop.hive.ql.lockmgr.DummyTxnManager
花泽啸·2025-02-23 23:04

Ansible PlayBook的中清单变量优先级分析及清单变量如何分离总结

写在前面嗯，学习Ansible高级特性，整理这部分笔记博文内容涉及Ansibleploybook中变量定义的基本原则不同位置定义变量的优先级Demo如何实现变量和清单解耦食用方式：大量Demo,所以适合收藏温习查阅变量优先级需要有
山河已无恙·2025-02-23 22:33

SQL 稍复杂一点语法的学习笔记

最近整理我手写的笔记,其中有不少内容随着时代的变化,用得越来越少了,抑或是电子化了发到了我的博文中。然而我发现我当年学习的SQL笔记,只电子化了特别基础和简单的一篇,后面还有一些躺在纸上。
·2025-02-23 21:10

Hadoop~HDFS的Block块

一、HDFS的block块1.介绍block块是HDFS的最小存储单位，每个256MB(可以修改)2.文件在HDFS中的存储方式文件分成多个block块，block块分三份存入对应服务器，每个block块都有2个(可修改)备份，每个副本都复制到其他服务器一份，每个block块都有两个备份在其他服务器上，这使得安全性极大提高3.修改默认文件上传到HDFS中的副本数量hdfs-site.xml默认为3
飞Link·2025-02-23 11:37

庖丁解java(一篇文章学java)

请看下文...关于决定开始写博文的介绍(一切故事的起点源于这一次反省)中小技术公司的软扩展(微服务扩展是否有必要?)-CSDN博客SpringCloud(
庖丁解java·2025-02-23 09:51

庖丁解java(一篇文章学java)

请看下文...关于决定开始写博文的介绍(一切故事的起点源于这一次反省)中小技术公司的软扩展(微服务扩展是否有必要?)-CSDN博客SpringCloud(
庖丁解java·2025-02-23 09:51
上一页 1 2 3 4 5 6 7 8 下一页
按字母分类： ABCDEFGHIJKLMNOPQRSTUVWXYZ其他