HDFS王伟珣

大数据之-hdfs+hive+hbase+kudu+presto集群(6节点)

index.htmlkudurpm包地址https://github.com/MartinWeindel/kudu-rpm/releaseshivehttp://mirror.bit.edu.cn/apache/hive/hdfshttp
管哥的运维私房菜·2025-02-16 22:50

Hadoop 的分布式缓存机制是如何实现的？如何在大规模集群中优化缓存性能？

分布式缓存的工作原理文件上传：用户将需要缓存的文件上传到HDFS（HadoopDistributedFileSystem）。文件路径可以在作业配置中指定。
晚夜微雨问海棠呀·2025-02-16 11:53

HBase的合并操作

compact的作用flush操作会将memstore的数据落地为一个个StoreFile（HFile），那么随着时间的增长在HDFS上面就会有很多的HFile文件，这样对读操作会产生比较大的影响（读操作会对
b1gx·2025-02-16 06:20

深入HBase——引入

引入前面我们通过深入HDFS到深入MapReduce，从设计和落地，去深入了解了大数据最底层的基石——存储与计算是如何实现的。这个专栏则开始来看大数据的三驾马车中最后一个。
黄雪超·2025-02-15 16:58

Ubuntu下配置安装Hadoop 2.2

参考资料：1.InstallingsinglenodeHadoop2.2.0onUbuntu：http://bigdatahandler.com/hadoop-hdfs/installing-single
weixin_30501857·2025-02-15 15:55

DQN原理和代码实现

参考：王树森《强化学习》书籍、课程、代码1、基本概念折扣回报：Ut=Rt+γ⋅Rt+1+γ2⋅Rt+2+⋯+γn−t⋅Rn.U_t=R_t+\gamma\cdotR_{t+1}+\gamma^2\cdotR
KPer_Yang·2025-02-15 14:20

植物大战僵尸杂交版

1.感谢作者潜艇伟伟迷2.大小大概110M，下载链接在下方链接：https://pan.baidu.com/s/1Ew6iTg0_d_Ut8N9_18KGLw提取码：yspa3.祝大家玩的开心
m0_69576880·2025-02-15 12:03

11 个期货数据 API

在市场交易中，数据为王。数据提供了有效和高效交易所需的背景和见解，而这些数据的质量可以显著影响长期成功。这些数据对期货市场尤其重要。下面，我们将介绍期货数据市场上的一些核心产品。
·2025-02-15 10:14

蓝易云 - HBase基础知识

HBase是一个分布式、可伸缩、列式存储的NoSQL数据库，它建立在Hadoop的HDFS之上，提供高可靠性、高性能的数据存储和访问。
蓝易云·2025-02-15 02:38

亚信安全春节14天双倍假期通告

亚信安全14天双倍假期来袭“网安福利王”再次实至名归2024年8773小时，31582680秒亚信安全一直驰骋于云网安世界奋战在“安全+数智化”的壮阔征途上如今，新春的脚步渐近长达14天的春节长假能让我们暂且放下忙碌的工作去除班味
亚信安全官方账号·2025-02-14 03:58

2D游戏引擎Allegro 系列教程（二） Hello world!

http://blog.csdn.net/qq573011406/article/details/8172949作者：袁全伟邮箱：[email protected]欢迎邮件交流编程心得本系列教程索引
小泰勒·2025-02-13 21:19

光伏、储能一体化监控及运维解决方案---安科瑞王婧

前言：今年以来，在政策利好推动下光伏、风力发电、电化学储能及抽水蓄能等新能源行业发展迅速，装机容量均大幅度增长，新能源发电已经成为新型电力系统重要的组成部分，同时这也导致新型电力系统比传统的电力系统更为复杂，未来预计可再生能源装机规模仍将快速增长，逐步完成能源体系的深度转型，从而实现“碳中和”目标。随之而来的是光伏电站、储能以及配套的电气设施怎么通过系统来实现有效的运维管理，使之安全、可靠运行。关
acrelgxy·2025-02-13 18:32

关于虚拟机的Unknown command

/bin/hdfsdfs–mkdirinput导致出现–mkdir:Unknowncommand的错误，原因在于我复制的这条命令中的-和虚拟机的编码不一样，导致出错，所以应该手敲这个符号“-”，这样就可以啦
真的不想写实验·2025-02-13 04:12

AI写代码工具ScriptEcho：赋能自主创业，加速前端开发

AI前端开发与自主创业：效率为王自主创业者面临着巨大的压力。他们需要在有
·2025-02-12 22:40

Vue3快速上手

Vue3快速上手1.Vue3简介2020年9月18日，Vue.js发布3.0版本，代号：OnePiece（海贼王）耗时2年多、2600+次提交、30+个RFC、600+次PR、99位贡献者github上的
ConstMAO·2025-02-12 12:51

hadoop 1.0 基本概念了解

Map函数负责将输入数据转化为中间值,中间值再通过Reduce函数转化成输出数据HDFS：HDFS是一个分布式文件系统。通过一次写入，多次读出来实现。Chukwa：Chukw
fenggfa·2025-02-12 07:48

深入理解Hadoop 1.0.0源码架构及组件实现

该版本包含核心分布式文件系统HDFS、MapReduce计算模型、Common工具库等关键组件。通过分析源码，可深入理解这些组件的设计和实现细节，包括数据复制、任务调度、容错机制以及系统配置管理。
隔壁王医生·2025-02-12 07:14

【地理坐标Geo】——3

解锁数据可视化的魔法钥匙——pyecharts实战指南在这个数据为王的时代，每一次点击、每一次交易、每一份报告背后都隐藏着无尽的故事与洞察。
花花 Show Python·2025-02-11 18:37

在CAD中插入图块后为什么看不到？怎么解决？

下面以CAD看图王为例介绍如何快速进行操作：下次再遇到此类问题，按照我说的操作就行啦！
·2025-02-11 16:34

如何测量stp/step/prt等三维图纸？

很多时候我们需要查看三维图纸并进行有关长度、面积等方面的测量，以浩辰CAD看图王几个三维测量功能为例，按需操作即可。
·2025-02-11 16:30

CAD图纸分割与布局导出功能怎么用？

CAD看图王是一款功能强大的CAD图纸查看与编辑软件，其图纸分割和布局导出功能为用户提供了极大的便利。
·2025-02-11 16:29

CAD尺寸标注如何隐藏与显示？

本文将给大家介绍浩辰CAD看图王中尺寸标注的隐藏与显示，帮助大家更好的查看CAD图纸。一、
·2025-02-11 16:29

CAD尺寸标注如何隐藏与显示？

本文将给大家介绍浩辰CAD看图王中尺寸标注的隐藏与显示，帮助大家更好的查看CAD图纸。一、
·2025-02-11 16:29

SLDPRT格式文件用什么软件可以打开？

除了SolidWorks软件，还有一些其他软件也可以打开sldprt文件，比如CAD看图王等专业轻量化的CAD看图软
·2025-02-11 16:28

在CAD中插入图块后为什么看不到？怎么解决？

下面以CAD看图王为例介绍如何快速进行操作：下次再遇到此类问题，按照我说的操作就行啦！
·2025-02-11 15:22

DeepSeek 王炸组合 + AI，让效率与创意给你 “撑腰”

DeepSeek作为一款强大的AI工具，通过与多种软件的组合，形成了多个高效协作的“王炸组合”，能够显著提升工作效率和创造力。
qq_38027465·2025-02-11 15:44

HiveQL命令（三）- Hive函数

ApacheHive作为一种流行的数据仓库工具，提供了丰富的内置函数，帮助用户高效地处理和分析存储在Hadoop分布式文件系统（HDFS）中的数据。这些内置函数涵盖了数值计算、字符
BigDataMagician·2025-02-11 12:00

掌握大数据--Hive全面指南

-DDL操作数据库1.Hive简介ApacheHive是建立在Hadoop之上的一个数据仓库工具，它提供了一种类似于SQL的查询语言，称为HiveQL，用于查询和分析存储在Hadoop分布式文件系统（HDFS
纪祥_ee1·2025-02-10 22:40

【Flink实战】Flink -C实现类路径配置与实现UDF Jar

URL可以指向本地、HTTP服务器或HDFS等资源的Jar文件。注意：此处的classpath的url必须是一个能够在client，JM和TM都被访问到的位置。
roman_日积跬步-终至千里·2025-02-10 11:38

张驰咨询：六西格玛培训如何让离散制造业逆袭成王？

离散制造业，作为现代工业的重要组成部分，面临着日益激烈的市场竞争和不断变化的客户需求。为了保持竞争优势，企业不仅需要提高产品质量，降低成本，还需要优化生产流程，提高生产效率。而六西格玛培训作为一种系统化的质量管理方法，为离散制造业提供了实现这些目标的有效途径。六西格玛管理起源于20世纪80年代的摩托罗拉公司，是一种以追求卓越质量为核心的管理方法。它通过消除缺陷和减少变异，来提高顾客满意度。在离散制
张驰课堂·2025-02-10 10:02

科技资讯杂志科技资讯杂志社科技资讯编辑部2024年第24期目录

构建符合党的二十大精神的高职院校劳动教育课程体系研究李曼;4-7党的二十大精神引领下“隧道施工”课程思政探究张志明;陈国辉;8-10新质生产力新质生产力视域下高职院校数字教材建设路径研究于丽;张静;11-13发展新质生产力的理论创新意义探析王翔宇
QQ296078736·2025-02-09 23:52

游戏案例｜Service Mesh 在欢乐游戏的应用演变和实践

作者陈智伟，腾讯12级后台专家工程师，现负责欢乐游戏工作室公共后台技术研发以及团队管理工作。在微服务分布式架构以及游戏后台运维研发有丰富的经验。
「已注销」·2025-02-09 16:34

大数据笔记（二）：HDFS原理知识

目录HDFS原理知识一、前言二、思考三、理论知识点四、存储模型五、架构设计六、角色功能NameNodeDataNode七、元数据持久化八、安全模式九、HDFS中的SNN十、Block的副本放置策略十一、
Lansonli·2025-02-09 10:50

hive出现内存溢出_hive问题处理

内存溢出Client端内存溢出Client端发生内存溢出执行下面的看是很简单的一条sql语句：hive>selectcount(1)fromtest_tb_1_1;QueryID=hdfs_20180802104347
话食科普·2025-02-08 07:29

Hive之数据操作DML

查询语句中创建表并加载数据（AsSelect）创建表时通过Location指定加载数据路径Import数据到指定Hive表中5.2数据导出Insert导出Hadoop命令导出到本地HiveShell命令导出Export导出到HDFS
WHYBIGDATA·2025-02-08 06:55

Spring Boot和Spring Cloud来实现微服务之间的调用

本人详解作者：王文峰，参加过CSDN2020年度博客之星，《Java王大师王天师》公众号：JAVA开发王大师，专注于天道酬勤的Java开发问题中国国学、传统文化和代码爱好者的程序人生，期待你的关注和支持
王大师王文峰·2025-02-08 03:33

MapReduce的代码编写

getInstance()函数设置当前main函数所在的类，设置后运行代码可以找到函数的入口；③设置MapReduce的输入输出路径用于输入数据和输出计算的数据结果；注意若要是输出的路径在集群中已经存在，需要操作HDFS
hjy1821·2025-02-08 02:27

2024-JAVA-大数据-面试汇总_大数据java部门面试(1)

内部表的数据是由Hive自身管理的，外部表的数据是由HDFS管理的；删除内部表会删除元数据和存储的数据；删除外部表只删除元数据不删除存储的数据34,你知道UDF吗？UDF就是H
2401_84141419·2025-02-07 19:15

大数据-267 实时数仓 - ODS Lambda架构 Kappa架构 核心思想

目前已经更新到了：Hadoop（已更完）HDFS（已更完）MapReduce（已更完）Hive（已更完）Flume（已更完）Sqoop（已更完）Zookeeper（已更完）HBase（已更完）Redis
m0_74823336·2025-02-07 16:57

Hbase基础

HBase是基于Google的Bigtable技术实现的，GoogleBigtable利用GFS作为其文件存储系统，HBase利用Hadoop的HDFS作为其文件存储系统；Google运行MapReduce
yandao·2025-02-07 13:38

《集群、权重、时间戳回眸一识》

人物：王浩田时间：2016年9月11日地点：万达二楼玻璃屋主题：memcached分布式存储开篇之言通过演讲者王浩田在讲述的过程中，我发现有几个名词是之前听过但并未了解的新鲜事物，特写此篇来浅析集群、权重
杨晓风-linda·2025-02-07 09:08

# PPT进阶——文字环绕

#作者：21级郭锴#审核：20级王圻铭1.首先，输入一行文字，在文本效果中找到【转换】，接着在【弯曲】中找到【逆时针】，然后调节控点位置，文字就变成了环形。
꧁.雨真吖.꧂·2025-02-07 05:38

labview计算机论文,毕业论文：基于Labview的信号发生器设计

感谢蔡铁锋老师、王文明老师在开题答辩和中期检查中给予我的帮助和指导。感谢孔超然老师，为我们做实验提供了场所和设备。感谢大学四年学校里的老师和同学们，为我提供的学习环境。你们使我懂得了如何去主动地
iiif·2025-02-06 20:11

HIVE常见面试题

1.简述hiveHive‌是一个构建在Hadoop之上的数据仓库工具，主要用于处理和查询存储在HDFS上的大规模数据。
兔子宇航员0301·2025-02-06 18:59

【starrocks学习】之将starrocks表同步到hive

目录方法1：通过HDFS导出数据1.将StarRocks表数据导出到HDFS2.在Hive中创建外部表3.验证数据方法2：使用ApacheSpark同步1.添加StarRocks和Hive的依赖2.使用
chimchim66·2025-02-06 12:52

[python]使用 Pandas 分组和汇总表数据

importpandasaspd#读取工资表数据df=pd.read_excel('输入.xlsx')假设我们的表数据如下所示：姓名基础1基础2其他张三500020001000李四600025001200王五
runepic·2025-02-06 08:20

使用python实现Hadoop中MapReduce

Hadoop包含HDFS(分布式文件系统)、YARN（资源管理器）、MapReduce（编程模型）。
qq_44801116·2025-02-06 06:10

python的dict和set

举个例子，假设要根据一个人的的名字查找对应的对应的数据，如果用list实现，需要两个list：names=['张三','李四','王五']scores=[88,78,89]我们寻找对应的人的成绩，就先要在
Akzeptieren·2025-02-06 06:38

Python的循环

for…in循环假设我们要循环输出一个列表里的元素：names=['张三','李四','王五']fornameinnames:print(name)执行这段代码后，会依次打印names的每一个元素：张三李四王五所以
Akzeptieren·2025-02-06 06:34

【硬刚大数据之面试篇】2021年从零到大数据专家面试篇之ClickHouse篇

本文由【王知无】原创，首发于CSDN博客！本文首发CSDN论坛，未经过官方和本人允许，严禁转载！本文是对《【硬刚大数据之学习路线篇】2021年从零到大数据专家的学习指南(全面升级版)》的面试部分补充。
王知无(import_bigdata)·2025-02-06 04:18
上一页 1 2 3 4 5 6 7 8 下一页
按字母分类： ABCDEFGHIJKLMNOPQRSTUVWXYZ其他