oop

【hadoop】hadoop-daemon.sh

开启：hadoop-daemon.shstartnamenode关闭：hadoop-daemon.shstopnamenode
火龙谷·2025-05-09 10:56

【Spring】Spring AOP

会显得非常冗余因此我们可以通过代理模式来解决附加功能代码对核心代码的干扰和不方便维护的问题代理模式包括静态代理和动态代理（jdk，dglib）但是需要自己编写代理工厂等，工作比较繁琐而我们可以使用SpringAOP框架来简化动态代理的实现SpringAOP面向切面编程AOP可以说是OOP
triticale·2025-05-09 10:54

《spark》

这是一篇关于Spark概述的文章，主要介绍了Spark的基本概念、与Hadoop的关系、核心模块以及运行模式。
快乐的蛋挞·2025-05-09 09:11

hadoop的序列化

Hadoop中的序列化是指将数据转换为字节流的过程，以便在网络上传输或存储。Hadoop使用自定义的序列化和反序列化机制来处理大量的数据，这有助于在分布式环境中高效地进行数据传输和处理。
嘟嘟嘟嘟嘟嘟嘟.·2025-05-09 05:18

Java 与大数据：Hadoop 和 Spark 的完美集成

今天我们要一起探索Java世界里的大数据处理技术，特别是Hadoop和Spark如何集成在一起。无论你是初学者还是有经验的大数据开发者，这篇充满趣味和知识的文章都会让你收获满满！
墨瑾轩·2025-05-08 20:23

Spark和Hadoop之间的区别

1、HadoopHadoop是一个由Apache基金会所开发的分布式系统基础架构。用户可以在不了解分布式底层细节的情况下，开发分布式程序。充分利用集群的威力进行高速运算和存储。
lucky_syq·2025-05-08 20:52

Spark和Hadoop之间的联系

（二）Hadoop概述Hadoop是一个由Apache基金会开发的开源的分布式系统基础架构，旨在处理大规
古拉拉明亮之神·2025-05-08 19:48

【Spark】【第三章】 Spark运行环境

作为一个分布式数据处理框架和计算引擎，被设计在所有常见的集群环境中运行:1.本地模式所谓的Local模式，就是不需要其他任何节点资源就可以在本地执行Spark代码的环境1.1本地模式的安装配置将spark-3.0.0-bin-hadoop3.2
败给你的黑色幽默丶·2025-05-08 14:41

大数据处理利器：Hadoop 入门指南

一、Hadoop是什么？——分布式计算的基石在大数据时代，处理海量数据需要强大的技术支撑，Hadoop应运而生。
widder_·2025-05-08 12:04

Hadoop集群配置（三节点）&& Hbase集群配置（三节点）保姆级步骤

️1.所有节点安装Hadoop虽然不使用完整的Hadoop，但HDFS仍然属于Hadoop组件，因此需要下载Hadoop并配置HDFS。
海洋猿·2025-05-08 12:33

如何对比某个表在Hive和Doris磁盘空间大小和Doris表如何优化存储空间保姆级教程(亲试可用）

目录一、如何查看某个表在Hive占用的磁盘空间大小1.使用DESCRIBEFORMATTED查询2.使用HDFS命令查看目录大小3.使用hadoopfs-du命令二、如何查看某个表在Doris占用的磁盘空间大小
大模型大数据攻城狮·2025-05-08 12:32

大数据技术全景解析：Spark、Hadoop、Hive与SQL的协作与实战

本文将通过通俗类比+场景化拆解，带你深入理解四大关键技术：Hadoop、Hive、Spark和SQL，揭秘它们如何像“仓储-物流-管理”系统一样协同工作。
V文宝·2025-05-08 12:32

hadoop中的序列化和反序列化（2）

2.为什么需要序列化序列化在分布式系统中非常重要，尤其是在Hadoop这样的大数据处理框架中。以下是序列化的主要用途：数据存储：将对象持久化到磁盘文件中。网络传输：将对象通过网络发送到其他节点。
洋芋爱吃芋头·2025-05-08 12:31

spark读取mongodb数据配置

omrapollo/article/details/66968147引入依赖创建方法见上一篇博客：Spark+IntelliJIDEA创建项目引入如下依赖：实现代码importorg.apache.hadoop.conf.Configurationimportorg.apache.log4j
Maximilian_M·2025-05-08 09:41

数据分析项目中的关键技术与工具

大数据技术：涵盖Hadoop（HDFS）、Hive、Spark、Fli
王子良.·2025-05-08 03:12

Python 类的 @staticmethod 和 @classmethod

在Python面向对象编程（OOP）中，类通常包含实例方法（instancemethod），它们依赖于对象本身来调用和操作实例属性。
莫比乌斯之梦·2025-05-08 02:29

大数据毕业设计PySpark+Hadoop航班延误预测系统 航班可视化

（2）意义提高乘客购票决策：基于Hadoop的飞机票价格预测能够提供乘客准确的价格预测信息，帮助他们选择合适的购票时间和最优的价
QQ21503882·2025-05-08 01:24

《大数据： Spark Standalone 模式配置历史服务器》

8081虽然能看到日志和结果，但是体验非常差2.spark-shell本身就是客户端模式，这个是改不了为cluster模式，并且运行时候日志打印是有，但是一旦退出了再也没地方看到日志了yexiang@hadoop2
HarkerYX·2025-05-08 00:52

Spark 配置历史服务器

类似Hadoop，Spark也有自己的historyserver，这里我们就来配置下：修改spark-defaults.conf.template文件名为spark-defaults.confmvspark-defaults.conf.templatespark-defaults.conf
涵sir·2025-05-08 00:51

spark配置历史服务

Logcpspark-defaults.conf.templatespark-defaults.conf在spark-defaults.conf文件中,添加如下内容:spark.eventLog.enabledtruespark.eventLog.dirhdfs://hadoop213
都教授2000·2025-05-08 00:51

Spark集群搭建之Yarn模式

什么是SparkONYarn模式SparkonYARN（YetAnotherResourceNegotiator）是Spark框架在Hadoop集群中运行的一种部署模式，它借助HadoopYARN来管理资源和调度任务
lix的小鱼·2025-05-07 23:46

C++面向对象设计类的核心知识详解总述（1）

C++中的类是面向对象编程（OOP）的核心，用于封装数据和操作这些数据的函数。
点云SLAM·2025-05-07 22:38

_python eventloop任务切换机制

一、Python所有方向的学习路线Python所有方向的技术点做的整理，形成各个领域的知识点汇总，它的用处就在于，你可以按照下面的知识点去找对应的学习资源，保证自己学得较为全面。二、Python必备开发工具工具都帮大家整理好了，安装就可直接上手！三、最新Python学习笔记当我学到一定基础，有自己的理解能力的时候，会去阅读一些前辈整理的书籍或者手写的笔记资料，这些笔记详细记载了他们对一些技术点的理
Java极客1024·2025-05-07 20:53

Spark应用部署模式实例

模式新启动一个终端SparkSubmit#pyspark命令启动的进程，实际上就是启动了一个Spark应用程序SparkStandalone模式讲解：6321SecondaryNameNode#hadoop
qrh_yogurt·2025-05-07 14:43

Spark读取HDFS加密区数据乱码问题解决

spark程序代码如下System.setProperty("HADOOP_USER_NAME","user1")valspark=SparkSession.builder().master("local
蹩脚法师·2025-05-07 11:58

虚拟机启动hdfs、spark命令

说明：用的案例是一个master，两个worker，开启三台虚拟机的情况，已配置好hadoop和spark。
一只菜鸟A·2025-05-07 11:28

通过proxy实现外部网络访问Docker集群内部服务

由于在本地搭建了dockerhadoop集群，要想通过docker容器端口映射的方式访问多个服务节点的状态实在麻烦，并且需要为每个服务分配唯一的端口。
楓葉也·2025-05-07 10:50

揭秘大数据 | 16、OLAP 那些事儿

OLAP阵营主要有两大主流，一大主流是基于MapReduce而构建的Hadoop生态圈，另一大主流是MPP数据库阵营。
XAI嬴图·2025-05-07 09:44

【大数据】服务器上部署Apache Paimon

Hadoop或对象存储（可选）:如果需要将数据存储到分布式文件系统（如HDFS）或云存储（如AWSS3），请提前配
大数据追光猿·2025-05-07 09:43

Spark，所用几个网页地址

hadoop的三大组成：1.HDFS：存储。文件上传，下载2.MapReduce：计算。
Amu_Yalo·2025-05-07 07:33

Java面向对象编程：从基础到高级的全面指南

Java面向对象编程：从基础到高级的全面指南前言面向对象编程（OOP）是Java语言的核心特性。本文将系统讲解Java面向对象的基础和高级特性，帮助读者构建完整的知识体系。
2301_80883570·2025-05-07 07:59

C#中的设计模式：构建更加优雅的代码

C#在面向对象编程（OOP）方面的强大支持，我们可以探讨“C#中的设计模式”。这不仅有助于理解如何更好地组织代码，还能提高代码的可维护性和可扩展性。
Envyᥫᩣᩚ·2025-05-06 23:44

二、Hadoop狭义和广义的理解

作者：IvanCodes日期：2025年5月6日专栏：Hadoop教程Hadoop的双重身份：核心框架与生态系统在大数据领域，Hadoop是一个广为人知的概念，但它并非单指某一个软件，而是涵盖了两个层面的含义
IvanCodes·2025-05-06 20:55

30个小时搞定Python网络爬虫

学习资料结构概览第一章：Python网络爬虫之基础包含Python入门知识、语法、控制流、文件操作、异常处理与OOP基础。第二章：工作原理详解深入讲解爬虫的基本概念、抓取流程与网页结构。第三
企鹅侠客·2025-05-06 15:58

Hive安装与配置教程

Hive安装与配置教程1.环境准备1.1系统要求Java8或更高版本Hadoop2.x或更高版本MySQL或其他关系型数据库（用于存储元数据）1.2安装依赖#安装Javasudoaptupdatesudoaptinstallopenjdk
爱编程的王小美·2025-05-06 14:55

本地连接hive

第一步:我们要将相对应集群的三个文件拷贝到本地来,就这三个位置在/etc/hadoop/conf和/etc/hive/conf下第二步:要注意core-site.xml中的fs.defaulfFs这个配置项是默认文件系统的名称
向往太空的鱼·2025-05-06 14:24

Hadoop总结

目录大数据概述Hadoop大数据开发平台资源管理YARN分布式文件系统HDFS非关系型数据库NOSQL分布式数据库HBASE批处理和MapReduce数据仓库查询分析和Hive基于内存计算的Spark流计算和
Ajekseg·2025-05-06 14:52

android开发中的多线程、数据存储同步功能实现方案和应用场景

HandlerThread：是带有Looper的线程，可与Handler配合实现线程间消息传递
三思而后行，慎承诺·2025-05-06 12:10

Python 之面向对象编程的基本使用及原理(57)

面向对象编程（Object-OrientedProgramming，OOP）是其中一种广泛使用且非常强大的编程范式。Python作为一门高级编程语言，对面向对象编程提供了全面而深入的支持。
Android 小码蜂·2025-05-06 09:47

libuv学习-事件循环

includevoidtimer_callback(uv_timer_t*timer){//Callbacklogicherestd::cout<<"Timercallback"<oop_t
wgq_code·2025-05-06 06:58

小白也能懂！一步步教你用FPGA加速YOLO目标检测（入门篇）

步骤四：配置PYNQ开发板的IP步骤五：配置网关步骤六：测试联网3.安装pip4.TinyYOLO上板测试参考大神项目步骤一：安装QNN-MO-PYNQ库步骤二：直接运行tiny-yolo-image-loop.ipynb1
博导ai君·2025-05-06 04:43

HDFS与云计算：部署HDFSonAWSAzure和GCP

Hadoop分布式文件系统（HDFS）作为一种高效、可靠的分布式存储系统，已经被广泛应用于大数据处理。然而，随着云计算的普及，越来越多的企业选择将HDFS部署在云平台上，以利用云计算的弹性和高可用性。
AI天才研究院·2025-05-06 03:36

基于Hive + Spark离线数仓大数据实战项目（视频+课件+代码+资料+笔记）

项目介绍项目中docker使用项目环境搭建项目数仓分层项目业务分析sqoop数据采集python数据采集项目ODS层创建DWD层构建DWS层构建项目回顾（一）DWB层构建项目回顾（二）ST层构建AirFlow
AI方案2025·2025-05-05 16:32

Hadoop 1.x设计理念解析

Hadoop1.x虽然是二十年前的，但hadoop生态系统中的一些组件如今还在广泛使用，如hdfs和yarn，当今流行spark和flink都依赖这些组件通过学习它们的历史设计，首先可以让我们对它们的了解更加深刻
逆袭的小学生·2025-05-05 15:49

Cannot find a valid baseurl for repo: centos-sclo-rh

[root@hadoop1redis-6.0.10]#sudoyuminstalldevtoolset-7-gcc*已加载插件：fastestmirror,refresh-packagekit,security
努力的Java开发者·2025-05-05 13:11

LLM论文笔记 27: Looped Transformers for Length Generalization

Arxiv日期：2024.9.25关键词长度泛化transformer结构优化核心结论1.RASP-L限制transformer无法处理包含循环的任务的长度泛化2.LoopTransformer显著提升了长度泛化能力
Zhouqi_Hua·2025-05-05 10:49

2.4 操作系统死锁（死锁的概念、产生、防止、预防、避免）

文章目录一、死锁的概念1.1死锁、饥饿、死循环对比1.1.1死锁（Deadlock）1.1.2饥饿（Starvation）1.1.3死循环（InfiniteLoop）1.2死锁产生的条件二、预防死锁三、
Q1Hang的AI学习小屋·2025-05-05 10:19

iOS之深入解析Runtime的Method-Swizzling方法交换的妙用和底层原理

在OC中就是利用method-swizzling实现AOP，其中AOP（AspectOrientedProgramming，面向切面编程）是一种编程的思想，区别于OOP（面向对象编程）；OOP和AOP都是一种编程的思想
╰つ栺尖篴夢ゞ·2025-05-05 10:48

【Java】2025 年 Java 学习路线：从入门到精通

文章目录一、Java基础阶段（4-8周）1.开发环境搭建2.核心语法基础3.面向对象编程（OOP）4.核心类库二、Java进阶阶段（6-10周）1.JVM深度理解2.并发编程3.新特性掌握4.设计模式三
RumIV·2025-05-04 13:00

T113/A40i平台QT界面更新频繁遇到界面卡顿问题解决

平台底层驱动已经支持到双缓冲机制，具体代码如下3.应用写一个测试demointmain(){intfb=open("/dev/fb0",O_RDWR);if(fb==-1){perror("Unabletoopenframebuffer
墨眉非攻·2025-05-04 11:19
上一页 7 8 9 10 11 12 13 14 下一页
按字母分类： ABCDEFGHIJKLMNOPQRSTUVWXYZ其他