MR（Hadoop）

总结-常见缓存替换算法

简单实现可能移除重要数据嵌入式系统，简单场景LRU局部性原理良好维护成本高，占用更多存储空间内存管理，浏览器缓存LFU保留高频数据更新频率高，适应动态性差数据库缓存，文件系统Random实现简单命中率不稳定快速开发，实验性场景MRU
w_w方圆·2025-02-22 10:19

计算机毕业设计吊炸天Python+Spark地铁客流数据分析与预测系统 地铁大数据 地铁流量预测

开发技术SparkHadoopPython爬虫Vue.jsSpringBoot机器学习/深度学习人工智能创新点Spark大屏可视化爬虫预测算法功能1、登录注册界面，用户登录注册，修改信息2、管理员用户：
qq_80213251·2025-02-22 08:35

阿里云通过docker安装skywalking及elasticsearch操作流程

系统本文使用系统为AlibabaCloudLinux3.2104LTS64位配置为4核8GPS：最低配置应为2核4G，配置过低无法启动安装docker1.卸载旧版本dockeryumremovedocker
stone.eye·2025-02-22 07:29

ESC8：NTLM Relay 中继到 Web 证书注册服务

NTLMRelay的常见攻击场景：攻击域控：域控机器账户有DCSync权限，可以到处域内任意用户hash。攻击Exchange服务器：这个服务器的机器账户能用于远程连接登录，也可以配置DCsync权
anddddoooo·2025-02-22 06:52

过tls ja3浏览器指纹方法总结

tls校验程度从小到大排序：一、原生python层面修改tls套件例题比赛平台191.requests中ssl修改#-*-coding:utf-8-*-#例题比赛平台19importrequestsfromrequests.adaptersimportHTTPAdapterfromrequests.packages.urllib3
尼古拉斯 吴彦祖·2025-02-22 05:11

Python 的 WebSocket 实现详解

大数据技术：涵盖Hadoop（HDFS）、Hive、Spark、Fli
王子良.·2025-02-22 03:23

npm run serve 启动vue项目时 报错 throw er Unhandled “error” event

原由：npmrunserve启动vue项目时，报错thrower;//Unhandled‘error’event；纳闷了昨天下午下班时都是没有问题的,除了问题就解决呗！
菜鸟小营地·2025-02-21 23:44

npm启动vue报错 Error: listen EACCES: permission denied 0.0.0.0:8085

报错日志：D:\****\***>npmrundev>[email protected]***>node--max_old_space_size=4096build/dev-server.js
arvin_baichuan·2025-02-21 23:43

centos7.9在线离线安装docker

yum在线安装#卸载旧版本[root@localhost~]#yumremovedockerdocker-clientdocker-client-latestdocker-commondocker-latest
笑笑2520·2025-02-21 20:53

Spark源码分析 – Shuffle

参考详细探究Spark的shuffle实现,写的很清楚,当前设计的来龙去脉HadoopHadoop的思路是,在mapper端每次当memorybuffer中的数据快满的时候,先将memory中的数据,按
weixin_34292924·2025-02-21 15:06

2后端JAVA：下载数据库数据到EXCEL表格？代码

-CSDN博客下载代码：/***下载数据库数据*总情况：将数据库中的合同信息导出为Excel文件*@paramresponseHTTP响应对
simplesin·2025-02-21 14:57

ASP.NET MVC 下载文件

使用从ASP.NETMVC中的控制器下载任何文件类型FileStreamResult。注意：如果使用ASP.NETCore，请参阅此页面，如果想要将文件上传到服务器，请参阅此页面。
csdn_aspnet·2025-02-21 10:19

【Hadoop】使用Docker容器搭建伪分布式集群

使用Docker容器搭建Hadoop伪分布式集群1、编写docker-compose.yaml文件配置集群version:"3"services:namenode:image:apache/hadoop
慕青Voyager·2025-02-21 09:14

MATLAB 图像处理：阈值分割检测裂纹和划痕

可以使用MATLAB的imread函数将图像读入到MATLAB中：img=imread('image.jpg');灰度化
PixelDyno·2025-02-21 08:09

HDFS分布文件系统（Hadoop Distributed File System）

上创建文件夹3.上传本地文件到HDFS4.查看文件5.删除HDFS上的文件或者目录6.修改指定文件的权限信息（读、写、执行）一般语法：chmod[可选项]五、HDFS实战应用六、总结一.HDFS的本质HadoopDistributedFileSystem
柿子小头·2025-02-21 08:38

评价指标 MAE、MSE、RMSE、MRE

1、MAE（MeanAbsoluteError-平均绝对误差）：2、MSE（MeanSquaredError-均方误差）：3、RMSE（RootMeanSquaredError-均方根误差）：4、MRE
雅俗共赏100·2025-02-21 05:19

Oracle和MySQL的分页查询语句

使用ROWNUMSELECT*FROM(SELECTyour_columns,ROWNUMrnumFROMyour_
命中的缘分·2025-02-21 02:58

Oracle 迁移到 PostgreSQL

数据类型对比项OraclePostgreSQL大文本clobtext数字NUMBERNUMERIC可变长字符VARCHAR2VARCHAR函数对比项OraclePostgreSQL行号rownumrow_number
@Ycoder·2025-02-21 01:52

org.apache.hadoop.hdfs.server.datanode.DataNode: Block pool ID needed, but service not yet registere

启动hadoop集群，发现datanode没有启动，查看日志报错，如图：//日志文件2020-03-2416:40:55,608WARNorg.apache.hadoop.hdfs.server.common.Storage
@菜鸟进阶记@·2025-02-21 01:19

Python 继承详解

目录一、继承的作用二、继承的语法1.单继承2.多继承三、子类扩展1.添加新功能2.重写父类方法3.调用父类方法四、继承的特殊情况1.子类初始化父类2.方法解析顺序（MRO）五、抽象类与接口1.抽象类2.
江湖一条鱼·2025-02-20 23:04

关于启动vue项目，出现：Error [ERR_MODULE_NOT_FOUND]: Cannot find module ‘xxx‘此类错误

目录一、问题报错二、原因分析三、解决方法一、问题报错node环境变量配置有问题：(base)xxx@M73H-15:~/VueProject/pproject-vue$npmrundev/usr/bin
zkkkkkkkkkkkkk·2025-02-20 21:23

Hadoop之HDFS的使用

HDFS是什么：HDFS是一个分布式的文件系统，是个网盘，HDFS是一种适合大文件存储的分布式文件系统HDFS的Shell操作1、查看hdfs根目录下的内容-lshdfsdfs-lshdfs://hadoop01
想要变瘦的小码头·2025-02-20 20:43

基于Transformer的YOLOv8检测头架构改进：提升目标检测精度的全新突破（YOLOv8）

专栏订阅地址：https://blog.csdn.net/mrdeam/category_12804295.html文章目录基于Transformer的YOLOv8检测头架构改进：提升目标检测精度的全新突破什么是
步入烟尘·2025-02-20 19:34

动态蛇形卷积（DySnakeConv）在YOLOv8检测头中的应用与优化-分割性能的提升【YOLOv8】

专栏订阅地址：https://blog.csdn.net/mrdeam/category_12804295.html文章目录动态蛇形卷积（DySnakeConv）在YOLOv8检测头中的应用与优化-分割性能的提升
步入烟尘·2025-02-20 14:44

RHEL 安装 Hadoop 服务器

在这篇文章中，我们将探讨如何在RedHatEnterpriseLinux(RHEL)上安装和配置Hadoop服务器。Hadoop是一个开源的分布式数据处理框架，用于处理大规模数据集。
XhClojure·2025-02-20 13:41

如何安装Hadoop

Hadoop入门(一)——CentOS7下载+VM上安装（手动分区）Hadoop入门(二)——VMware虚拟网络设置+Windows10的IP地址配置+CentOS静态IP设置Hadoop入门(三)—
薇晶晶·2025-02-20 13:06

MapReduce 读取 Hive ORC ArrayIndexOutOfBoundsException: 1024 异常解决

个人博客地址：MapReduce读取HiveORCArrayIndexOutOfBoundsException:1024异常解决|一张假钞的真实世界在MR处理ORC的时候遇到如下异常：Exceptioninthread"main"java.lang.ArrayIndexOutOfBoundsException
一张假钞·2025-02-20 09:33

npm多个registry如果配置，如何管理？工具nrm登场

通过工具nrm(NPMregistrymanager)来管理，指令简单，随时切换1.全局安装npmi-gnrm2.查看版本，测试是否下载成功nrm-V3.查看所有源nrmls4.添加源其中：csdn为自定义名称
大橙子-·2025-02-20 07:47

iOS blocks - 三個會造成retain cycle的anti patterns

在iOS4.0推出了Blocks這個語言特性後到現在iOS都已經出到5.0了所以我想Blocks應該可以被廣泛應用了但現在iOS環境是從MRC(ManualReferenceCounting)走到ARC
backapace·2025-02-20 05:35

Hadoop01-入门&集群环境搭建--非原创（test）

Hadoop01-入门&集群环境搭建今日内容Hadoop的介绍集群环境搭建准备工作Linux命令和Shell脚本增强集群环境搭建来来来大数据概述大数据:就是对海量数据进行分析处理，得到一些有价值的信息，
xl.liu·2025-02-19 21:50

强引用（Strong Reference）、软引用（Soft Reference）、弱引用（Weak Reference）和虚引用（Phantom Reference）

在Java中，对象的引用类型可以分为四种：强引用（StrongReference）、软引用（SoftReference）、弱引用（WeakReference）和虚引用（PhantomReference）
飞升不如收破烂~·2025-02-19 18:29

Hadoop管理工具dfsadmin和fsck的使用

Hadoop提供了多个管理工具，其中dfsadmin和fsck是用于管理HDFS（Hadoop分布式文件系统）的重要工具。以下是它们的使用方法和常见命令。
脚本无敌·2025-02-19 16:46

（一）大数据---Hadoop整体介绍（架构层）----（组件(3)

复杂性:体现在数据的管理和操作上。如何抽取，转换，加载，连接，关联以把握数据内蕴的有用信息已经变得越来越有挑战性二、大数据技术有哪些（重点）===================================================================================基础的技术包含数据的采集、数据预处理、分布式存储、NoSQL数据库、数据仓库、机器学习、并行计
2401_84166965·2025-02-19 16:15

麒麟V10安装Epel源（ARM）

wgethttps://dl.fedoraproject.org/pub/epel/epel-release-latest-8.noarch.rpmrpm-ivhepel-release-latest-
Yes we can623·2025-02-19 16:40

hive全量迁移脚本

：数据在同一库下，并且hive是内部表（前缀的hdfs地址是相同的）#1.读取一个文件，获取表名#echo"时间$dt_jian_2-------------------------">>/home/hadoop
我要用代码向我喜欢的女孩表白·2025-02-19 15:29

笔记：DataSphere Studio安装部署流程

一、标准版部署标准版：有一定的安装难度，体现在Hadoop、Hive和Spark版本不同时，可能需要重新编译，可能会出现包冲突问题。适合于试用和生产使用，2~3小时即可部署起来。
右边com·2025-02-19 13:15

部署一个简单的python服务器

defapplication(env,response):"""定义一个web接口函数,可以接收浏览器客户端发送的url地址,调用执行函数通过url地址调用执行函数:paramenv:环境,表示浏览器发送的请求环境:paramresponse
机智的frank·2025-02-19 12:07

hive-site.xml 配置总结

3.hive提交作业是在hive中还是hadoop中？4.一个查询的最后一个map/reduce任务输出是否被压缩的标志，通过哪个配置项？5.当用户
hxsln11·2025-02-19 12:07

6种最新算法（小龙虾优化算法COA、螳螂搜索算法MSA、红尾鹰算法RTH、新雀优化算法NOA、鳑鲏鱼优化算法BFO、蜘蛛蜂优化算法SWO）求解机器人路径规划（提供MATLAB代码）

一、机器人路径规划介绍移动机器人（Mobilerobot，MR）的路径规划是移动机器人研究的重要分支之，是对其进行控制的基础。
IT猿手·2025-02-18 23:12

常见Linux命令

了解磁盘分区类命令第一节文件目录类命令（1）pwd打印当前目录的绝对路径(printworkingdirectory)基本语法pwd（功能描述：显示当前工作目录的绝对路径）案例实操显示当前工作目录的绝对路径[root@hadoop1
程序员 小柴·2025-02-18 22:02

yum repolist命令

显示所有仓库[root@mypc01soft]#yumrepolistall已加载插件：fastestmirrorLoadingmirrorspeedsfromcachedhostfile*base:mirrors
鸭梨山大哎·2025-02-18 21:18

helm部署jenkins及使用pipeline流水线

1.安装helm略，请参考本专栏helm文档2.创建存储类storageClass请参考《helm搭建NFS的StorageClass》，本专栏可以查看到3.helm添加jenkins官方仓库#helmrepoaddjenkinscihttps
意海还念か·2025-02-18 19:23

Vue3CompositionAPI

Vue3CompositionAPI第一章最终效果演示1.下载依赖npminstall2.启动前端npmrundev3.启动数据json-server--watchdata/db.json--port=
jpruby·2025-02-18 16:24

DeepSeek与医院电子病历的深度融合路径：本地化和上云差异化分析

电子病历（EMR）系统，是指医务人员在医疗活动过程中，使用医疗机构信息系统生成的文字、符号、图标、图形、数据、影像等数字化信息，并能实现存储、管理、传输和重现的医疗记录，是病历的一种记录形式。
Allen_LVyingbo·2025-02-18 14:36

【目标检测】多模态航空目标检测：A SIMPLE AERIAL DETECTION BASELINE OF MULTIMODAL LANGUAGE MODELS

阅读并理解一篇论文：ASIMPLEAERIALDETECTIONBASELINEOFMULTIMODALLANGUAGEMODELS该文首次提出了一种将多模态语言模型应用于航空检测的简单基线方法，名为LMMRotate
慕容紫英问情·2025-02-18 12:46

nlf 3d pose 部署学习笔记

目录multi_hmr创建SemanticRenderer推理代码渲染代码：调用原版render，没成功用的pose和smlx生成vertices，也有vertices3dhmr2，用的是网络生成的vertices
AI算法网奇·2025-02-18 11:08

React源码解读

源码调试环境使用create-react-app脚手架创建项目npxcreate-react-appreact-test进入刚刚下载的目录，弹射create-react-app脚手架内部配置//在npmruneject
程序员小续·2025-02-18 10:24

包管理工具npm、yarn、pnpm、cnpm详解

npminstallpackage#安装包npminstall#安装所有依赖npminstall-gpackage#全局安装npmuninstallpackage#卸载包npmupdatepackage#更新包npmrunscript
懒羊羊我小弟·2025-02-18 08:01

Fink与Hadoop的简介以及联系

Fink和Hadoop是两个常用于大数据处理的开源工具，它们可以搭配使用以构建高效的数据处理系统。一、Fink和Hadoop的关系Fink：1、Fink是一个分布式流处理框架，专注于实时数据处理。
Bugkillers·2025-02-18 07:24

Hbase深入浅出

在大数据生态圈中的位置HBase与传统关系数据库的区别HBase相关的模块以及HBase表格的特性HBase的使用建议Phoenix的使用总结HBase在大数据生态圈中的位置提到大数据的存储，大多数人首先联想到的是Hadoop
天才之上·2025-02-18 03:13
上一页 1 2 3 4 5 6 7 8 下一页
按字母分类： ABCDEFGHIJKLMNOPQRSTUVWXYZ其他